首页 > 视听 > 此刻

分享到微信

打开微信，点击底部的“发现”，
使用“扫一扫”即可将网页分享至朋友圈。

AI视频又炸了！ Pika能“对口型” 阿里直接让赫本“唱歌”

第一财经2024-03-01 13:15:54

作者：视点责编：赵伟

在AI多模态领域，视频生成的竞争已经到了白热化地步。2月28日，AI视频生成平台Pika上线唇形同步功能Lip Sync，只要上传文本或音频，就能让视频人物发声且嘴型完全同步。

Pika的音频生成部分由AI语音克隆创企ElevenLabs提供技术支持，但受限于已有产品的架构，Pika只能分段生成3秒时长的唇形同步视频，且仅生成唇部配合音频发生运动。

就在同一天，阿里推出更炸裂的视频生成框架EMO，只要输入一张图像和一段音频，就能生成任意时长的人像说话视频，且五官、表情非常自然。视频最终长度，取决于输入音频的长度。

在示例视频里，EMO不仅能让赫本讲话、让蒙娜丽莎读《莎士比亚》，还能让小李子唱超“烫嘴”Rap，甚至高启强也能化身罗翔普法。不管是让肖像唱歌（不同风格的歌曲）、让肖像开口说话（不同语种）、还是各种“跨演员”的表演，EMO的效果都令人大为惊叹。

AI视频又炸了！ Pika能“对口型” 阿里直接让赫本“唱歌”。点击视频，一看究竟！

文章作者

视点

记者观察：有国产模型近一个月调用量超7.5万亿tokens “Token经济” 引爆全球AI对决海外开发者为何“用脚投票”？︱一探

Token经济的兴起，正在从根本上重塑全球AI产业的竞争格局。本周的英伟达GTC大会上，黄仁勋面向全球开发者抛出了“Token工厂经济学”的全新概念。阿里巴巴也重磅官宣Token Hub，以“创造Token、输送Token、应用Token”为核心目标。就在全球科技巨头纷纷下注时，第一财经记者注意到，近期国产大模型的海外调用量呈现指数级狂飙，“中国Token出海”这一话题已成为行业热议焦点。在与AI创业企业、模型厂商、云算力服务商等行业各方交流中记者发现，“Token出海”并非单纯的算力或Token消耗出海，而是在全球AI竞赛的背景下，中国从“资源输出”向“高阶智力服务输出”的一次集体跃迁。

1038 03-22 18:44