Llama系列上新多模态！3.2版本开源超闭源，还和Arm联手搞了手机优化版
Llama系列上新多模态！3.2版本开源超闭源，还和Arm联手搞了手机优化版在多模态领域，开源模型也超闭源了！
来自主题: AI资讯
6369 点击 2024-09-27 11:51
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
搜索
在多模态领域，开源模型也超闭源了！
Meta首个理解图文的多模态Llama 3.2来了！这次，除了11B和90B两个基础版本，Meta还推出了仅有1B和3B轻量级版本，适配了Arm处理器，手机、AR眼镜边缘设备皆可用。
就在刚刚，小扎携掉最强AR眼镜Orion登场！Meta首款AR眼镜，苦研十年后，终于诞生了，成本高达10000美元。果然，小扎让我们离元宇宙又近了一步。这会是一次全新的范式转变吗？
Meta Connect 2024推出Quest 3S、Llama 3.2与AR眼镜Orion。
“可以肯定，明天对于AI开发者而言是个大日子。”
最近，开源大模型社区再次「热闹」了起来，主角是 AI 写作初创公司 HyperWrite 开发的新模型 Reflection 70B。
近日，Mamba方面又搞出了有意思的研究：来自康奈尔、普林斯顿等机构的研究人员成功将Llama提炼成了Mamba模型，并且设计了新的推测解码算法，加速了模型的推理。
Transformer 在深度学习领域取得巨大成功的关键是注意力机制。注意力机制让基于 Transformer 的模型关注与输入序列相关的部分，实现了更好的上下文理解。然而，注意力机制的缺点是计算开销大，会随输入规模而二次增长，Transformer 也因此难以处理非常长的文本。
今天一大早，Meta 便秀了一把「Llama 系列模型在开源领域取得的成绩」，包括如下：
诞生一年半，Llama家族早已稳坐开源界头把交椅。最新报告称，Llama全球下载量近3.5亿，是去年同期的10倍。而模型开源让每个人最深体会是，token价格一降再降。