阿里通义万相新突破:静态图+音频,轻松生成电影级数字人视频
来源:ITBear 发表于2025-08-27 20:21:22 编辑:时寒峰

  原标题:阿里通义万相新突破:静态图+音频,轻松生成电影级数字人视频

  在科技日新月异的今天,阿里巴巴再次引领技术潮流,正式推出了其通义万相平台的全新多模态视频生成模型——Wan2.2-S2V。这一创新模型仅需用户提供一张静态图片和一段音频,便能自动生成面部表情生动、口型精准匹配、肢体动作流畅的电影级数字人视频,为数字人直播、影视后期制作及AI教育等领域带来了革命性的变化。

  据悉,Wan2.2-S2V模型能够生成分钟级别的视频内容,极大提升了视频创作的效率。用户只需简单操作,便能见证静态图片中的人物仿佛被赋予了生命,随着音频的节奏动起来,无论是唱歌、说话还是表演,都显得栩栩如生。这一技术突破无疑为影视行业的内容创作者提供了强有力的支持,也为数字人直播等新兴领域打开了全新的想象空间。

  早在今年7月,阿里通义万相已经开源了包括文生视频、图生视频在内的多款视频生成模型,如Wan2.2-T2V-A14B、Wan2.2-I2V-A14B等,这些模型在业界首次采用了MoE架构,展现了强大的视频生成能力。而此次推出的Wan2.2-S2V则更加注重音频与图像的同步,致力于实现画面与音频的完美契合。

  在实际体验中,Wan2.2-S2V展现出了令人惊叹的效果。无论是真人、卡通、动物还是数字人形象,只需上传一张图片和一段音频,模型便能自动生成一段与音频完美同步的视频。视频中的人物面部表情丰富自然,口型与音频精准对位,甚至手部或身体其他部分的动作也十分流畅。这一技术不仅适用于真人角色的视频生成,还能为动画角色增添生动的表现力。

  Wan2.2-S2V还支持多种画幅和分辨率的视频生成,无论是竖屏短视频还是横屏影视剧,都能轻松应对。用户还可以通过输入文本Prompt来控制视频画面,让视频主体的运动和背景的变化更加丰富多样。这一功能为视频创作者提供了更多的创作自由和想象空间。

  在测试过程中,我们尝试上传了一张动画人物“吉伊”的图片,并输入指令让画面中的角色唱歌。结果令人惊喜,“吉伊”不仅动了起来,还配上了背景音乐,虽然嘴巴的线条识别尚有一些误差,但整体效果已经相当出色。随后,我们又尝试了让小狗张嘴唱歌、爱因斯坦张口说话等场景,每一次尝试都带来了全新的视觉体验。

  随着数字人直播、影视制作等行业对高效视频创作工具需求的日益增长,阿里通义万相平台不断推出创新技术,为这些领域提供了强有力的支持。Wan2.2-S2V模型的推出,无疑将进一步推动视频生成技术的快速发展,为创作者们带来更多惊喜和可能。

投稿邮箱:lukejiwang@163.com
相关推荐
Meta押注人形机器人软件赛道,以开放平台模式谋求行业
Meta押注人形机器人软件赛道,以开放平台模式谋求行业

原标题:Meta押注人形机器人软件赛道,以开放平台模式谋求行业生态主导权 科

AI2025-09-28 21:15:29

宇树科技CEO王兴兴:算法迭代升级,下半年将推出1.8米
宇树科技CEO王兴兴:算法迭代升级,下半年将推出1.8米

原标题:宇树科技CEO王兴兴:算法迭代升级,下半年将推出1.8米高人形机器人

AI2025-09-27 13:08:26

苹果推出轻量AI模型SimpleFold:简化结构降成本,助力科
苹果推出轻量AI模型SimpleFold:简化结构降成本,助力科

原标题:苹果推出轻量AI模型SimpleFold:简化结构降成本,助力科研加速发展 科

AI2025-09-25 19:30:23

宇树科技王兴兴:通用机器人发展遇阻,开放协作或成
宇树科技王兴兴:通用机器人发展遇阻,开放协作或成

原标题:宇树科技王兴兴:通用机器人发展遇阻,开放协作或成破局关键 在近

AI2025-09-24 20:15:13

华为“超节点+集群”破局:撞开算力枷锁,铺就中国
华为“超节点+集群”破局:撞开算力枷锁,铺就中国

原标题:华为超节点+集群破局:撞开算力枷锁,铺就中国AI智能新坦途 2005年,

AI2025-09-21 15:45:28

DeepSeek-R1登上《自然》封面
DeepSeek-R1登上《自然》封面

原标题:DeepSeek-R1登上《自然》封面 国际顶级学术期刊《自然》最新一期封面聚

AI2025-09-18 19:14:51

马斯克:顺利的话30年内就能建成自给火星城
马斯克:顺利的话30年内就能建成自给火星城

原标题:马斯克:顺利的话30年内就能建成自给火星城 9月15日消息,在近日举行

AI2025-09-15 19:47:38

​支付宝蚂蚁AI健康管家AQ上新:拍脸测肤、健康管理、
​支付宝蚂蚁AI健康管家AQ上新:拍脸测肤、健康管理、

原标题:​支付宝蚂蚁AI健康管家AQ上新:拍脸测肤、健康管理、老人服务一应

AI2025-09-13 16:47:11

OpenAI携手博通自研AI芯片,台积电代工,预计2026年量产
OpenAI携手博通自研AI芯片,台积电代工,预计2026年量产

原标题:OpenAI携手博通自研AI芯片,台积电代工,预计2026年量产 近期,据国外

AI2025-09-05 21:04:21

柯洁忆战阿尔法狗:棋手幻灭,AI时代各行业需未雨绸
柯洁忆战阿尔法狗:棋手幻灭,AI时代各行业需未雨绸

原标题:柯洁忆战阿尔法狗:棋手幻灭,AI时代各行业需未雨绸缪 在一次由新浪

AI2025-09-04 20:33:17