无一大模型及格！ 北大/通研院提出超难基准，专门评估长文本理解生成
无一大模型及格！ 北大/通研院提出超难基准，专门评估长文本理解生成在长文本理解能力这块，竟然没有一个大模型及格！
来自主题: AI技术研报
10392 点击 2024-08-07 14:58
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
在长文本理解能力这块，竟然没有一个大模型及格！
从泄露的信息来看 ，Apple Intelligence 背后的提示语还是挺简单的。
李飞飞老师提出了空间智能 (Spatial Intelligence) 这一概念，作为回应，来自上交、斯坦福、智源、北大、牛津、东大的研究者提出了空间大模型 SpatialBot，并提出了训练数据 SpatialQA 和测试榜单 SpatialBench， 尝试让多模态大模型在通用场景和具身场景下理解深度、理解空间。
AI向左，机器人向右，具身智能站在交叉点。
现如今，大模型产品的线上投流和线下投广已经变得非常常见，各种花式出圈手段层出不穷，营销规模可以用“卷”来形容。
7月27号，蔚来举办了一场技术发布会，有芯片亮相，也有整车操作系统发布，有Nio Phone的正式上市，也有智能驾驶世界模型NWM的展示。发布会后的第二天，虎嗅汽车来到蔚来位于上海漕河泾的办公室，和蔚来智能驾驶副总裁任少卿聊了两个小时。
随着大型语言模型（LLM）技术日渐成熟，各行各业加快了 LLM 应用落地的步伐。为了改进 LLM 的实际应用效果，业界做出了诸多努力。
地球是平的吗？ 当然不是。自古希腊数学家毕达哥拉斯首次提出地圆说以来，现代科学技术已经证明了地球是圆形这一事实。 但是，你有没有想过，如果 AI 被误导性信息 “忽悠” 了，会发生什么？ 来自清华、上海交大、斯坦福和南洋理工的研究人员在最新的论文中深入探索 LLMs 在虚假信息干扰情况下的表现，他们发现大语言模型在误导信息反复劝说下，非常自信地做出「地球是平的」这一判断。
智谱AI把自研打造的大模型给开源了。
上周，iOS 18 测试版发布，部分用户提前试用了苹果在 WWDC 宣布的一系列 Apple Intelligence（苹果智能）的功能，更多的功能会在未来几个月内陆续发布。