通义App打造视频生成产品矩阵 将于9月份开放自定义角色

发布时间:2024-12-27 18:56:57 来源: sp20241227

  【环球网科技报道 记者 李文瑶】8月6日,记者获悉,通义App推出角色扮演功能,可一键替换视频人物。上传一段视频,选择要替换的3D角色,可以在不改变其他场景和人物的情况下,将视频里原有的角色一键变身为有趣的3D角色模型,实现让孙悟空跳水、机器人打网球、二次元女孩揉面等创意视频。

  据了解,今年年初,阿里通义实验室推出Motionshop模型,引发海内外创作者们关注。目前,模型产品化加速落地,Motionshop上线通义App,开放给所有用户免费使用。

  现在打开通义App,进入频道,就可来到 Motionshop产品页面“角色扮演”,首批上线了机器人、孙悟空、二次元女孩、国风女孩四个角色模板。为给视频创作和动画制作提供更多可能性,通义App方面透露将于9月份开放自定义角色。

  Motionshop是通义实验室研发的AI模型,属于当前大热的AIGC领域。利用视频处理、角色跟踪/分割、姿态估计、路径追踪渲染等多种技术,使得动态视频中的主角能够轻松跨越现实与虚拟的界限。

  在Motionshop之前,常规的人物替换特效都采用路径追踪渲染,该方法效果真实但效率较低;如果牺牲渲染质量使用传统实时光栅化的方案,性能虽然可以大幅提升但是渲染质量会有巨大降级。Motionshop则提供了一套极为高效的路径追踪方案,可以在提供路径追踪渲染质量的前提下,达到接近实时光栅化渲染的效率。

  1月初,通义实验室推出Motionshop,成为众多创作者关注的热门AI模型。现在,所有人都可以免费体验前沿模型的创造力,在通义App上快速便捷创作创意视频。未来,Motionshop有望应用于影视动画制作、创意短视频以及电商直播等场景。

  通义目前已经形成了完整的人物视频生成模型的产品矩阵。年初爆火的现象级应用“全民舞王”,基于Animate Anyone打造;4月份推出的“全民唱演”,基于EMO技术打造,音频驱动照片唱歌可以让兵马俑开口唱华阴老腔;7月巴黎奥运会期间推出的“全民云运动”,采用Outfit Anyone和Animate Anyone等技术,可让普通用户用一张照片便能生成高质量换装和运动视频。 【编辑:付子豪】