AI视频生成工具Pika上线人物唇形同步功能LipSync

2024年02月28日 由 neo 发表 226 0

尽管 OpenAI 发布了令人印象深刻的 Sora AI 视频生成模型演示,但公众仍无法访问。然而,竞争对手 Pika 正在通过推出 Lip Sync 功能来吸引用户。这项新功能允许用户为视频添加语音对话,并自动同步角色的口型,为用户带来更加真实的体验。


在 ElevenLabs 的技术支持下,Pika 的 Lip Sync 功能支持文本转音频和上传的音频轨道。用户只需输入或录制想要让视频角色说的话,即可通过 Pika 的人工智能生成匹配的口型动画。这一创新功能目前仅限于 Pika Pro 用户(每月 58 美元的订阅服务,提前 12 个月以 696 美元的价格收费)或受邀加入 Pika 的“超级合作者”计划的成员。

尽管 Pika 生成的视频在质量和真实性方面可能略逊于 OpenAI 的 Sora 或其他竞争对手,如 Runway,但 Lip Sync 功能的推出使其在颠覆传统电影制作软件方面取得了领先地位。通过解决人工智能在创作更长叙事电影方面的最后一个障碍,Pika 正在为创作者提供更全面的工具。

与此同时,竞争对手 Runway 也更新了其 Multi Motion Brush 功能。该功能允许用户为视频中的不同对象和场景添加多达五个独立的运动方向。现在,Runway 正在添加区域检测功能,以自动选择和突出要应用运动的对象,从而简化了操作过程。

尽管 Pika 也允许用户编辑视频组件并扩展画布,但目前尚未提供类似的“画笔”工具,因此在运动控制方面可能略显不足。然而,随着人工智能技术的不断发展,我们有理由相信,Pika 和其他竞争对手将继续推出更多创新功能,以满足创作者的多样化需求。

文章来源:https://venturebeat.com/ai/ai-video-wars-heat-up-as-pika-adds-lip-sync-powered-by-elevenlabs/
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
热门职位
Maluuba
20000~40000/月
Cisco
25000~30000/月 深圳市
PilotAILabs
30000~60000/年 深圳市
写评论取消
回复取消