音乐和视频之间那道墙,好像被打破了。
上个月,一个做独立音乐的朋友找我吃饭,聊到新歌宣发的事,愁得不行。
歌写好了,录完了,混音也做了,但到了要发的时候才发现,没有视觉内容。
发网易云?光秃秃一个音频封面。
发抖音?连个能剪的素材都没有。
找人拍MV,便宜的工作室报价两万起步,时间一周打底。
他算了一笔账,这首歌的制作成本才八千。
有一个产品,叫MVLAND,美图旗下的,做MV质感很不错。

官网:https://mvland.cn/
我推荐他去试试。
MV新手用户,最容易上手的,是音乐成片。
操作简单到有点不像AI工具该有的复杂度。
之前我自己生成过一首偏治愈、放松的解压曲子,作为背景音放着,能帮助我保持专注。
上传这首歌,描绘脑海中的画面,简单选几个条件,等AI自动分析完。

很快就有了对歌曲的分析总结,从基本数据到曲风节奏,从艺术风格到自定义形象,

点一下生成,然后就有了分镜图。
整个过程不需要写提示词,不需要调参数,也不需要选镜头。

镜头的画面质感不错、审美很在线。
如果有哪个镜头不满意,或者顺序想调整,还可以二次修改。
点击左上角的六个点,可以拖拽画面,点击右上角的编辑,就可以对画面进行精细控制了。

再之后就进入到了视频编辑器的页面。
从分镜头到一键视频全出,再到可以精修的文字、音轨、画面长短等等,都是很符合用户习惯的设计。

如果是老玩家、专业用户,用起来只会觉得麻雀虽小五脏俱全;如果是新手,第一次用也不会觉得陌生,学习成本很低,但是用久了上限很高。
之前对我来说比较困难的事情,做一个音画匹配的MV,现在就可以轻松搞定。

MVLAND让我喜欢的地方在于,它不是先随机生成画面再让你去挑,是先把一首歌的结构、节拍、情绪拆解开,再根据这些信息去匹配视觉方案。
先听懂你的歌在说什么,再决定给你看什么。
对于普通用户来说,不需要懂剪辑、也不用懂分镜色彩理论。
只需要有一首歌,剩下的交给AI。
后来我又试了几首风格完全不一样的歌。
一首民谣,AI给的画面是暖色调的自然光,镜头语言很慢,像一个人在午后慢慢翻相册。
一首电子乐,画面变成了霓虹色的赛博朋克风,快切、拖影、频闪,完全是夜店VJ屏上该有的那种东西。
一首古典钢琴曲,AI居然给出了黑白质感的画面,镜头像是在美术馆里缓慢游走。

每个风格的画面调性都和音乐本身的气质对得上。
这是产品在设计之初,就把音乐理解放在第一位的结果。
我认识的好几个做翻唱的自媒体博主,已经把这个功能用起来了,上传一首翻唱作品,半小时后就有了一支可以发抖音的MV。
画质和风格都在线,放在信息流里完全不违和。
这不是把创作门槛降低了一点点,是直接把门拆了。
但如果只是自动生成,那这个产品也就止步于小白工具了。
真正让我觉得有意思的,是它给专业创作者留的那扇门,「创意画布」。
尤其是「剪辑台」的功能,可以一键唤起。

点击底部工具栏最右侧按钮,即可快速进入剪辑台模式,可按空格拖动画布,也可将素材直接拖入剪辑台。
在同一画布内完成素材整理、剪辑与预览。

在调整轨道、增删镜头等等的过程里,预览也很实用,轨道的右上角点小眼睛,提前就能知道成品效果如何。

AI生成的所有素材:镜头、画面、字幕、转场,都会出现在一个画布上,你可以直接拖拽到剪辑轨道里进行调整。
在轨道上还有很用心的小细节:
比如左上角拖拽,可以灵活调整剪辑轨道的尺寸大小和比例,素材再多也能合理布局;
如果还觉得不够大,点右上角的全屏编辑,就可以有更完整全面的编辑功能了。

我还为视频生成了一首两分半钟的音乐,作为BGM,氛围渲染也很到位。
在下方中间,选音乐,就可以生成带歌词的歌曲或者纯音乐了。


按正常流程,我得把这些画面、音乐片段导出,再导入剪辑软件,然后重新对节奏、卡点、调色。
但在创意画布里,所有素材都在同一个界面里,我直接拖进轨道就可以开始剪了。
字幕也可以自由添加、制作,能满足的效果很多元。

像是把传统剪辑工具轨道的部分,也给吸收了进来。
完整的剪辑面板,能力很强大——
左侧是媒体池,下方是时间线轨道,右上方支持对画面进行裁剪、缩放、位置调整等编辑操作,帮助快速完成内容优化与细节处理。

我尝试做了一个相对完整的科幻短片,效果同样不错。
这个片子中间也遇到有小瑕疵,就是我在轨道里,自己轻轻动手精准多剪了一下。

最让我舒服的是两个细节。
一个是剪辑台超好用。
在MVLAND的剪辑台里,可以替换任何一个镜头,调整任何一个片段的时长,修改任何一条字幕的内容和出现位置。所有操作都在画布内完成,不需要导出再导入。

另一个是历史记录。
调整了二十个参数,生成了一版效果,不满意,想回到十分钟前的某个版本,在大多数工具里做不到。

点下方的历史纪录,就能够看到图片、视频等的每一次调整。
MVLAND让操作有了痕迹,可以随时回溯,做长视频、做修改,心里都能更有数。

这两个功能加在一起,给创作者的自由度是质的飞跃。
我开始有了一种真正的导演的感觉。
AI给提供了素材和初剪方案,但最终的成品由人来定。
面对的不再是一个黑箱,是有了一个可以插手干预、可以精细调控的创作空间。
最近世界杯很火,有没有什么爆款玩法、热点趋势、炫酷的视觉呈现呢?
看到还上了一个「爆款玩法」的功能,可以参考案例,打造属于自己的专属创意玩法。

实际使用中给我的惊喜很大。
它本质上是一套预设的创作模板和玩法框架。
但和一般意义上的模板不一样,它是给了一个创作起点和一个明确的方向感。

我试了一个世界杯赛场玩法,上传自己的头像,选了球衣。
听起来简单,但效果出奇地好。

还有角色置身新场景的玩法,可以把自己的形象,放进很有想象力的场景里。
人物、画面和音乐的融合度依然很高。

当创意门槛也降低以后,我都更有动力发抖音、发小红书了。
很多人不是不会操作工具,是不知道自己要做什么。爆款玩法解决了这个问题。
观察到小红书上,其实已经有不少博主在用这个功能做内容了,有的做翻唱MV,有的做动漫混剪,有的做剧情短片。
风格五花八门,但底层都是同一套工具在支撑。
从音乐成片到创意画布,从爆款玩法到个人短剧,用下来很容易让人进入心流,真的能沉浸到内容创意的制作当中。
创意画布,是我用得最多的一个模块。
在这张无限的画布上,灵感和奇思妙想,都能被流畅呈现,让我第一次觉得,做视频还挺轻松、挺好玩的。

说完了功能,聊点行业层面的东西。
MVLAND选择了一条不一样的路。
它没有去和通用模型拼参数、拼时长,而是扎进了一个具体的场景:音乐视频创作。
这个场景足够大。
独立音乐人、翻唱博主、音乐类自媒体、甚至只是喜欢某首歌的普通用户;但之前没有一个工具真正为这个场景设计过工作流。
通用AI视频工具的问题在于,它们不懂音乐。
它们不知道什么是主歌什么是副歌,不知道一段歌词的情绪高潮在哪里,不知道什么样的画面节奏配得上什么样的鼓点。
MVLAND把音乐理解放在了最前面。
它的多Agent工作流里,第一个Agent就是做音乐分析的。
拆结构、识节拍、判情绪,然后后面的视觉生成全部基于这个分析结果来执行。
是让画面从音乐里长出来。

MVLAND官网 https://www.mvland.cn
美图在这个产品上投入的资源也能看出一些端倪。
它还计划打造AI时代的造型公司,用AI挖掘音乐形象、打磨人设、训练风格、组建团体,把一个虚拟歌手或团体打造成有影响力的音乐IP、认真把生态搭建起来。
这大概是AI在这个阶段最务实的价值。
把原本只有少数人能做到的事,变成每个人都能做的事。
最近还有特别优惠,值得去试试!
文章来自于微信公众号 “AI异类弗兰克”,作者 “AI异类弗兰克”
【开源免费】字节工作流产品扣子两大核心业务:Coze Studio(扣子开发平台)和 Coze Loop(扣子罗盘)全面开源,而且采用的是 Apache 2.0 许可证,支持商用!
项目地址:https://github.com/coze-dev/coze-studio
【开源免费】n8n是一个可以自定义工作流的AI项目,它提供了200个工作节点来帮助用户实现工作流的编排。
项目地址:https://github.com/n8n-io/n8n
在线使用:https://n8n.io/(付费)
【开源免费】DB-GPT是一个AI原生数据应用开发框架,它提供开发多模型管理(SMMF)、Text2SQL效果优化、RAG框架以及优化、Multi-Agents框架协作、AWEL(智能体工作流编排)等多种技术能力,让围绕数据库构建大模型应用更简单、更方便。
项目地址:https://github.com/eosphoros-ai/DB-GPT?tab=readme-ov-file
【开源免费】VectorVein是一个不需要任何编程基础,任何人都能用的AI工作流编辑工具。你可以将复杂的工作分解成多个步骤,并通过VectorVein固定并让AI依次完成。VectorVein是字节coze的平替产品。
项目地址:https://github.com/AndersonBY/vector-vein?tab=readme-ov-file
在线使用:https://vectorvein.ai/(付费)
【开源免费】AutoGPT是一个允许用户创建和运行智能体的(AI Agents)项目。用户创建的智能体能够自动执行各种任务,从而让AI有步骤的去解决实际问题。
项目地址:https://github.com/Significant-Gravitas/AutoGPT
【开源免费】MetaGPT是一个“软件开发公司”的智能体项目,只需要输入一句话的老板需求,MetaGPT即可输出用户故事 / 竞品分析 / 需求 / 数据结构 / APIs / 文件等软件开发的相关内容。MetaGPT内置了各种AI角色,包括产品经理 / 架构师 / 项目经理 / 工程师,MetaGPT提供了一个精心调配的软件公司研发全过程的SOP。
项目地址:https://github.com/geekan/MetaGPT/blob/main/docs/README_CN.md
【开源免费】LangGPT 是一个通过结构化和模板化的方法,编写高质量的AI提示词的开源项目。它可以让任何非专业的用户轻松创建高水平的提示词,进而高质量的帮助用户通过AI解决问题。
项目地址:https://github.com/langgptai/LangGPT/blob/main/README_zh.md
在线使用:https://kimi.moonshot.cn/kimiplus/conpg00t7lagbbsfqkq0