从零手搓MoE大模型，大神级教程来了
从零手搓MoE大模型，大神级教程来了Hugging Face上有一位机器学习大神，分享了如何从头开始建立一套完整的MoE系统。
来自主题: AI技术研报
5460 点击 2024-01-29 16:30
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
Hugging Face上有一位机器学习大神，分享了如何从头开始建立一套完整的MoE系统。
美国著名科技播客Latent Space对于刚刚过去的NeurIPS 2023上的精彩论文进行了一个全面的总结，回顾了多篇优秀论文，虽然没有获奖，但同样值得学界关注。
作为全球最顶级的机器学习工具库，Hugging Face上最近悄悄出现了一个新的transformers模型——Qwen2。没错，正是阿里通义千问Qwen模型的第二代。不过通义团队的算法同学在社交媒体上对此继续保持神秘。
前两天，一个来自小红书的大佬发了个新项目——InstantID，是用一张你的随意角度的照片，就能生成一个 AI 头像。
开源（OS）正在驱动生成式 AI 的创新。得益于像 GitHub 和 Hugging Face 等学术研究平台，我们得以见证 AI 技术的蓬勃发展。但值得注意的是，OpenAI、Anthropic 等越来越多的科技公司选择不公开模型的代码和权重。
2021年劈柴恭喜小扎FAIR在取得的突破时，小扎并不知道到底发生了什么，但快速的学习能力让他重新把Meta从泥潭中拉了出来。无心插柳的FAIR和开源AI让小扎打了一次漂亮的翻身仗。
现在只需框住你需要保留的区域，AI就可以替换万物了！
Gradio CEO 兼联合创始人 Abubakar Abid 谈了谈 Gradio 被收购的内幕故事。
2023年的LLM开源社区都发生了什么？来自Hugging Face的研究员带你回顾并重新认识开源LLM
HuggingFace开源大模型排行榜，又被屠榜了。