为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?
8010点击    2026-07-16 10:30

我们先来看两个画面。


第一个画面:


把手机镜头对准桌上一只手办玩偶,屏幕里,这只塑料小玩偶开始眨眼睛,一下从沉睡的状态醒了过来。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


第二个画面:


三位女生在一间普通的办公室面对摄像头随意做动作,右边立马输出了她们实时变成了机械美少女的造型。


机械结构和光影跟着身体实时变化,几乎0延迟。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


没错,你可能会说这个不是很简单吗,随便一个AI视频模型都能做到。


但这个东西厉害的地方在于,它是实时的,流式输出的,不需要上传和等待。


这个体验有点意思,今天我们就来盘一盘它——


这个东西叫Xmax X2.0,一个通用实时交互视频模型,今天0点官方刚刚在X上官宣发布,同步开放API。


一起来看一看它背后那条正在悄悄换赛道的AI视频战线。


一、Xmax X2.0是什么?


Xmax X2.0来自Xmax AI,一家Slogan叫Play the World through AI的公司。它给自己的定义是:通用实时交互视频模型。


主打两个关键词:实时,交互。


这次开放了三大类能力——


实时重渲:包括CharX实时换人(人变、背景不变)、ClothX实时换装(只有衣服变)、VibeX实时换风格(连人带背景整体变)。


共同点是毫秒级、帧级的流式替换,原始的动作和光影被完整保留。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


触屏交互:主打功能


MoX,在屏幕上轻轻一拖,静态的主体就能活过来。


一张照片里的小猫,点一下被唤醒,开始动,拖到哪走到哪,画面变成了可以操作的对象。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


次元互动:主打功能DimX,通过摄像头把虚拟角色召唤到现实里,也可以反过来,拿现实物品给虚拟角色定位。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


比如把手里的毛绒玩具直接变成指定IP,桌上的手办在镜头里活过来,还能摸、能对视。


5项功能之外,还有一个Free模式,用自由文字控制效果,眼睛发射激光、浑身着火变骷髅这类需求统统能满足,主打一个自由整活。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


这里需要说明:X2.0并非换装滤镜或者AR贴纸的升级版。


它是底层模型能力的一次迭代,真正值钱的地方在于,这些交互方式可以自由组合、随意泛化,去覆盖直播、短剧、游戏这些可能的场景,这个逻辑后面讲商业时会展开。


再说一说团队。


创始人史佳欣,清华计算机博士,核心技术团队来自清华KEG实验室和HCI实验室。


前者就是孵化出智谱的那个实验室,国内大模型含金量最高的学术班底之一。


核心成员来自字节、阿里等大厂,做过基础模型、做过C端产品、做过游戏,从底层技术到应用玩法全栈打通。


今年2月,他们发布了全球首个虚实融合的实时交互视频模型Xmax X1。


4个月后,XmaxX2.0把画质从480p拉到了960p、24fps,交互能力的边界又扩了一大圈。


二、理解Xmax X2.0背后的技术


要理解Xmax X2.0的位置,可以画一个简单的2×2矩阵——


横轴是生成方式,离线还是实时;纵轴是消费方式,只能看还是能上手。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


左下角那个格子(离线生成、只能看)有:Sora、Veo、可灵、海螺,产出物是一个固定的视频文件。


左上角(离线内容、能上手)是互动影视和游戏,能玩,但靠预制素材和游戏引擎硬堆,成本高得吓人。


右下角有数字人直播等分支在竞争,而Xmax就处在右上角。


为什么右上角这个象限的玩家少?


因为它很难——


第一道是实时。


人机交互领域有个经典结论,Jakob Nielsen在《可用性工程》里给过三个阈值:


100毫秒以内,人感觉是即时的;1秒是思维不被打断的上限;超过10秒,注意力直接丢失。交互要形成心流,延迟必须压进毫秒级。


第二道是交互理解。


大多数视频模型只认识Prompt,你要它看懂触屏、看懂手势、看懂摄像头里的物理世界很难,我的理解是,这些模型和物理世界的带宽很窄。


第三道是数据。


虚实融合的效果需要专业的高质量训练数据,这类数据在互联网上很稀缺,生产成本高。


传统视频模型用双向attention对整段视频联合建模,全部算完才能看,Xmax走的是流媒体路线,帧级自回归DiT架构,边生成边播。


但流式化通常会一头撞上速度、成本、质量的不可能三角。


Xmax采用多阶段多目标融合蒸馏,大幅压缩推理采样时间,同时让上下文持久化,保证长时间生成不掉质量。


再加注意力矩阵稀疏化和FP8量化,最终把模型压到单张消费级显卡就能满血运行。


还有一个容易被忽略但我认为有分量的突破:


Xmax X2.0已经部署到了移动端,在最新款iPhone上本地跑出384@16fps的流式推理,是全球首个能在端侧实时运行的交互视频生成模型。


三、Xmax X2.0未来的可能性


XmaxX2.0的升级,在我看来,它落地方向其实很广,覆盖智能硬件、消费、文旅、虚拟陪伴、AI社交、互动视频等一长串领域。


我把它们整理成四个方向——


第一条,内容消费方向。


先说直播。


这几天世界杯正踢到决赛周,你可以想象这样一个直播间:主播一键换上主队球衣,观众发条弹幕,主播的衣服、动作甚至整个画面风格就跟着变。


直播关注的是互动率和停留时长,过去主播靠话术和福袋拿捏观众,现在观众可以直接上手改画面,这应该还是挺带劲的。


对MCN来说,过去做一个虚拟形象直播间,需要动捕设备、建模等多个流程,成本不低,现在真人主播随时变身,整套重资产直接省掉。


再说短剧。


截至去年7月,国内微短剧用户已达6.96亿,2024年市场规模505亿元,历史上第一次超过电影票房,用户日均使用时长101分钟,追平了即时通讯。


在这么大一个盘子上,Xmax X2.0未来可能解锁的玩法是:


看到一半,把主角实时换成自己,爽剧的尽头是自己当主角,换脸当主角、剧情由我定,都是现成的增值付费点。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


第二条,消费决策方向。


电商女装的平均退货率常年在50%到60%,直播间甚至能冲到80%以上,商家后台退款理由的第一名是货不对版,有人被逼到给衣服挂上巨型吊牌防蹭穿。


问题的根源是自己和模特之间的差异。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


ClothX的实时换装等于把试衣间搬进屏幕,一分钟试完一整个购物车,主播讲解的同时,观众在自己身上同步看效果。


确定性上去,退货率就会下来。


商家新款上架不再需要棚拍和模特档期,一个真人主播一晚上就能过完全店SKU,内容成本也跟着塌方式下降。


文旅这边,参考一下汉服经济:


光洛阳一个城市,汉服体验馆就超过1200家,一件租金一百多块的汉服,能带动妆造、跟拍、餐饮住宿至少600块的衍生消费。


但传统模式的瓶颈也摆在那儿,选衣、化妆和造型,整个流程很漫长。


XmaxX2.0则可以这么玩:


站在景区镜头前,一秒换上精致古装,变身在古迹前拍大片,体验的边际成本几乎归零,对景区来说,等于多出一个二销SKU。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


第三条,情绪价值方向。


情绪价值这几年很能打,我们看两组数据:


乙女游戏《恋与深空》全球用户突破8000万,上线两年累计收入超9亿美元。泡泡玛特2025年营收371亿元,同比增长185%。


Labubu所在的THE MONSTERS一个系列卖了141.6亿,成为全球首个百亿级潮玩IP。


为情绪掏钱,已经是这个时代确定性最高的消费行为之一。


Xmax X2.0也可以这条线加buff。


比如心仪的二次元角色跨过屏幕来到你房间,摄像头对准桌上老公的立牌,他在屏幕里活了,可以摸,可以对视。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


再比如捉宠玩法:在现实街头捕捉虚拟宠物,伸手比个手势它就围着你撒娇。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


当年宝可梦GO靠一层简单的AR贴图就做到了年流水10亿美元量级,实时生成版的想象空间还是很大的。


还有动态壁纸:一张小猫照片做壁纸,办公间隙抬起手机点一下,它活过来跟你互动。


第四条,硬件线:智能眼镜、端侧设备。


智能眼镜在IDC口径下2025年中国市场出货量同比增长121%,到2029年,全球出货量预计将突破4000万台。


而眼镜这个品类,天生就是摄像头加屏幕,Xmax的想象是:透过智能眼镜自定义肉眼所见世界的风格,把整个现实变成可换肤的界面。


为什么说以Xmax X2.0为代表的实时交互视频模型值得重视?


支撑这条线的,正是前面说的端侧突破。


Xmax X2.0能在iPhone上本地实时推理,意味着这份能力可以不依赖云端,塞进每一台终端设备,成本和隐私两个问题一次解决。


从这个意义上,每一块有摄像头和屏幕的玻璃都是潜在入口。


四、这些场景为什么直到今天才可能成立?


上面这些场景,坦率讲大部分早就有人想到过,为什么直到Xmax X2.0才让其成为可能?


我们用俞军那个经典的产品价值公式来算:


用户价值 =(新体验 - 旧体验)- 替换成本。


新体验这一项,靠毫秒级实时撑起来。回到Nielsen的三阈值,只有把延迟压进毫秒级,交互才有心流,体验才能像刷抖音一样丝滑,这是及格线。


旧体验这一项,是等待数秒甚至数十秒的生成,这种断裂感在技术demo里可能还能看得过去,放进消费场景很显然行不通。


替换成本,则被Xmax X2.0从下面几个方面


首先交互成本下降了,现在我们之所以看到Prompt教程,恰恰说明写Prompt本身就是普通人最大的使用成本。


X2.0大部分时候不需要想Prompt,随手一划就能改变视频内容,用户教育成本极低。


然后是画质门槛,480p是demo,960p、24fps才算过了消费体验的合格线,用户不会为糊成一团的画面掏钱,这次升级补齐了这块板。


接下来是价格门槛,X2.0把API价格打到了每小时20人民币,处在行业最低档。


算笔账:一个直播间开满8小时,成本160块,随便成交一单就覆盖了。这才是B端敢规模化接入的价格,也是长尾开发者玩得起的价格,此外还可以端侧部署。


正是因为这几点,从技术demo到落地应用这个体验公式的值第一次显著为正。


再延伸一下,内容产业干了一百年,本质上是门库存生意:先生产,后分发。


好莱坞一年拍几百部电影压箱底,Netflix 每年砸 170 多亿美元填内容库,哪怕强如抖音,推荐算法再神,分发的也全是已经拍好的存货。


制造业早就走完了这条进化线:福特流水线解决大规模生产,丰田解决精益生产,C2M 解决按需定制。


而内容业停在了半路:个性化的只有分发环节,你和我刷到的视频顺序不同,但每条视频本身,对所有人一模一样。


Xmax X2.0 补上了最后一环:内容在被消费的那一瞬间才生成,你拖拽的轨迹、你换上的衣服、你召唤的角色,都让你手里这条视频成为全世界唯一的版本。


Xmax X2.0 所代表的方向是内容产业的按需生产线,而按需生产改造过的每一个行业,市场都比改造前大了一个数量级。


结语


最后聊点行业层面的判断。


生成侧的竞争的确非常激烈,但它服务的主体依然是创作者,是作用于生产端而非消费端,普通人跟AI视频的关系,还停留在看。


而实时交互侧才刚刚开局:Genie 3还在测试阶段,Decart刚拿到投资的弹药,而Xmax X2.0直接把开放API和端侧部署两张牌同时打了出来。


Xmax给自己的定位是:全球领先的流式视频token提供方。


没错,视频正在从文件变成流、从内容变成界面,按token计价的实时视频流,大概率会成为技术和产业的重要方向。


麦克卢汉六十年前说媒介即信息,其核心思想是:真正塑造社会的,从来都是媒介形态本身,内容本身反倒在其次。


而这一次,视频从能看变成能玩,就是是媒介本身在重构。


媒介已变,你准备好了吗?


文章来自于"卫夕指北",作者 "卫夕"。

AI转型,免费服务,就找AITNT
AITNT资源拓展
根据文章内容,系统为您匹配了更有价值的资源信息。内容由AI生成,仅供参考
1
数字人

【开源免费】Fay开源数字人框架是一个AI数字人项目,该项目可以帮你实现“线上线下的数字人销售员”,

“一个人机交互的数字人助理”或者是一个一个可以自主决策、主动联系管理员的智能体数字人。

项目地址:https://github.com/xszyou/Fay

2
prompt

【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。

项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md

在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0

3
无人直播

【开源免费】VideoChat是一个开源数字人实时对话,该项目支持支持语音输入和实时对话,数字人形象可自定义等功能,首次对话延迟低至3s。

项目地址:https://github.com/Henry-23/VideoChat

在线体验:https://www.modelscope.cn/studios/AI-ModelScope/video_chat


【开源免费】Streamer-Sales 销冠是一个AI直播卖货大模型。该模型具备AI生成直播文案,生成数字人形象进行直播,并通过RAG技术对现有数据进行寻找后实时回答用户问题等AI直播卖货的所有功能。

项目地址:https://github.com/PeterH0323/Streamer-Sales