新京报客户端

好新闻 无止境

立即打开
一张图和一段音频就能生成视频,即梦多模态视频生成功能内测在即
新京报 记者 白金蕾 编辑 陈莉
2025-02-08 12:55
多模态视频生成功能会在即梦上以小范围内测的形式进行调优调整,并逐步开放。相关负责人同时表示,即梦还会对这一功能设置严格的安全审核机制,并且对输出的视频标注水印以作提醒。

新京报贝壳财经讯(记者 白金蕾)2月7日,即梦AI(人工智能)在官方社交媒体上发布了一条新功能上线预告片。视频显示,采用了全新的多模态视频生成模型OmniHuman(字节跳动旗下多模态模型),用户仅需输入一张图片和一段音频,就可以生成一条生动AI视频,这有望大幅提升AI短片的制作效率和质量。


即梦AI相关负责人透露,该模型目前已具备较好的表现,但在生成影视真实级别的视频上仍存在一定的提升空间。由其支持的多模态视频生成功能会在即梦上以小范围内测的形式进行调优调整,并逐步开放。该负责人同时表示,即梦还会对这一功能设置严格的安全审核机制,并且对输出的视频标注水印以作提醒。


多模态视频生成功能将在即梦上进行小范围内测。图|自即梦AI视频号内容截图


OmniHuman技术主页信息显示,该模型为字节跳动自研的闭源模型,可支持肖像、半身以及全身等不同尺寸的图片输入,并根据输入的音频,在视频中让人物生成与之匹配的动作,包括演讲、唱歌、乐器演奏以及移动。此外,对动漫、3D卡通等非真人图片输入的支持效果也较为出色,生成的视频能保持特定风格和原有运动模式。


根据技术主页展示的演示效果来看,OmniHuman的生成效果已经具有较高的自然度。为防止该项技术被不当利用,字节跳动技术团队在主页中特别标注称,OmniHuman将不会对外提供下载。


编辑 陈莉 校对 吴兴发


相关推荐
六大平台AI视频识别测试:发布不设“卡”,认不出“AI美女”
科技
“石景仙山 京西福地”文旅专题展邀您共享
新京号
快手上线AI单元剧,AIGC内容如何商业化落地
科技
WAIC观察:大模型在落地,机器人在风口
科技
Google 这款免费 AI,连 OpenAI 都在夸
新京号
最新一批AI受害者,是中小学语文老师
新京号
按摩店里的高考梦:盲人李金生的两个世界
时事
时空壶W4Pro升级,翻译延迟仅3-5秒,轻松实现外贸商务跨语言交流
企业资讯
趣丸科技贾朔:天谱乐AI开放四大能力,赋能音乐产业升级
企业资讯
号称“拯救ADHD的年度软件”,我帮病友们试了试……
新京号

新京报报料邮箱:67106710@bjnews.com.cn