Meta AI为Instagram视频配音,实现唇形同步
Meta正在大幅扩展其人工智能驱动的翻译工具的应用范围,将其更深入地整合到Facebook和Instagram中。这项高级功能旨在自动将Reels内容配音成不同语言,旨在为创作者和观众消除语言障碍。
这项创新的核心是该系统不仅能够翻译口语,还能精心匹配原始说话者的语音节奏和语调,最重要的是,能够将翻译后的音频与他们的嘴部动作同步。这种唇形同步能力代表了超越传统配音的显著飞跃,通过使配音内容看起来像是说话者真正在说新语言,从而承诺提供更自然、更沉浸的观看体验。目前,该工具支持英语和西班牙语之间的翻译,Meta去年在其Connect活动上首次展示了这一功能,这表明它正在进行战略性推广,并计划在未来支持更广泛的语言。
对于Instagram和Facebook上的创作者来说,启用此功能非常简单。在发布Reel之前,只需在菜单中激活一个名为“使用Meta AI翻译语音”的简单开关即可。该平台还为创作者提供了在视频上线之前预览配音视频(包括唇形同步)的选项,以确保质量控制。一旦发布,这些翻译后的Reels将自动以用户的首选语言呈现,从而增强了跨不同语言社区的内容可访问性。为了保持透明度,所有使用此AI工具翻译的视频都将带有明确的标签,表明其已使用AI。
这项翻译功能的推广目前正在进行中,目标是拥有1000名或更多粉丝的Facebook创作者,并扩展到所有公共Instagram账户。这种分阶段的推出表明Meta旨在随着其规模的扩大而收集反馈并完善技术。
这项举措是Meta利用AI促进全球互联互通和丰富用户体验的更广泛承诺的一部分。通过自动化翻译和配音过程,该公司使创作者能够轻松触达更广泛的国际受众,从而可能实现内容创作的民主化,并促进其平台上的跨文化交流。对自然发声的语音匹配和精确的唇形同步的强调,凸显了使AI生成内容感觉不那么人工、更具真实沟通性的努力,标志着社交媒体上多语言内容共享演变的重要一步。