
UniReal登场:用视频架构统一图像生成与编辑,还学到真实世界动态变化规律
UniReal登场:用视频架构统一图像生成与编辑,还学到真实世界动态变化规律本文中,香港大学与 Adobe 联合提出名为 UniReal 的全新图像编辑与生成范式。该方法将多种图像任务统一到视频生成框架中,通过将不同类别和数量的输入/输出图像建模为视频帧,从大规模真实视频数据中学习属性、姿态、光照等多种变化规律,从而实现高保真的生成效果。
本文中,香港大学与 Adobe 联合提出名为 UniReal 的全新图像编辑与生成范式。该方法将多种图像任务统一到视频生成框架中,通过将不同类别和数量的输入/输出图像建模为视频帧,从大规模真实视频数据中学习属性、姿态、光照等多种变化规律,从而实现高保真的生成效果。
AI生成视频,边生成边实时播放,再不用等了! Adobe与MIT联手推出自回归实时视频生成技术——CausVid。
尽管近期 Qwen2-VL 和 InternVL-2.0 的出现将开源多模态大模型的 SOTA 提升到了新高度,但巨大的计算开销限制了其在很多场景下的应用。
今年拿了腾讯 Al Lab(青云计划”), 字节跳动(Seed) 的 offer, 国外有之前实习的 Sony Research 和 Yamaha 的 return offer, 也有正在面试的 Adobe 和 Meta。 这些工作机会的方向都和我的博士工作完全 match, 没有转方向的痛苦。最后, 我接了字节 Seed 团队的 offer, 结束秋招。
要么加入 AI,要么被淘汰
作为后期行业大哥级的存在,Adobe终于让Firefly AI视频功能从期货变现实了!视频中任何缺失部分,AI一键解决,效果已能媲美Runway和Sora。与此同时,经过全面升级的史上最强PS也来了。
为了让设计更友好而创立的公司 Canva,今年的估值是 260 亿美元,这可能是目前全球最有价值的由女性领导的初创公司。
AI生成视频无疑是今年最火热的赛道之一,涌现了众多种子选手。然而,像Akool这样的全能选手却不多见。Akool提供包括虚拟人、视频翻译、视频生成、换脸等影视级效果生成一站式解决方案,覆盖了企业多重营销应用场景。
有了Adobe Firefly,对于专业人士而言显然不是个好消息。
刚刚,Adobe 正式宣布推出新的图像生成模型 Firefly Image 3,即日起在 Firefly Web 应用程序、Adobe Photoshop 和 Adobe InDesign 中提供测试版,并在「今年晚些时候」全面上市,旨在让创作者能够提高工作效率,生成更高质量、更详细的图像。