搜索
在微调大型模型的过程中，一个常用的策略是“知识蒸馏”，这意味着借助高性能模型，如GPT-4，来优化性能较低的开源模型。这种方法背后隐含的哲学理念与logos中心论相似，把GPT-4等模型视为更接近唯一的逻辑或真理的存在。
这两天，Groq惊艳亮相。它以号称“性价比高英伟达100倍”的芯片，实现每秒500tokens大模型生成，感受不到任何延迟。外加谷歌TPU团队这样一个高精尖人才Buff，让不少人直呼：英伟达要被碾压了……
在人工智能领域，OpenAI 继其 GPT-4 模型后，再次引领科技风潮，近期发布了令人瞩目的文生视频大模型 Sora。这一创新不仅再次证明了 AI 技术的无限潜力，也加速了全球对人工智能专业人才的追求。宾夕法尼亚大学工程学院顺应时代潮流，宣布推出一个全新的人工智能（AI）专业的工程学士学位课程，以培育未来将在这一领域引领变革的杰出人才。
自 ChatGPT-4 再度掀起“AI”热潮，2月16日，OpenAI 发布了首个文本转视频 AI 模型 Sora，为人工智能又带来亿点点惊艳和震撼。
大模型提速，抢走英伟达饭碗
OpenAI公布Sora视频模型，国内涌现卖课盈利现象。Sora还未正式开放，卖课的已经盈利了。
杨立昆：Sora不是世界模型，V-JEPA才是。
推测解码（Speculative Decoding）是谷歌等机构在 2022 年发现的大模型推理加速方法。它可以在不损失生成效果前提下，获得 3 倍以上的加速比。GPT-4 泄密报告也提到 OpenAI 线上模型推理使用了它。
甲辰龙年伊始，OpenAI发布首个文生视频模型Sora，震惊业界及市场的同时，也使自身跃升全球第三大独角兽。
威尔·史密斯的这段视频，把全网都骗了！其实Sora的技术路线，早已被人预言了。李飞飞去年就用Transformer做出了逼真的视频。但只有OpenAI大力出奇迹，跑在了所有人前面。