跳至內容

互动式AI虚拟形象:记者数字副本的实践

2 分钟阅读
Dr. Sam «DeepFake King» Markov
ai内容制作ai虚拟形象ai视频生成synthesia交互式ai数字副本文本转语音神经网络虚拟记者语音转文本
Интерактивный AI-аватар: цифровая копия журналиста в действии — illustration 1

神经网络正在改变世界,公关领域也不例外。想象一下:你正在与一个数字人副本交流,它像原版一样回答问题。这正是 Synthesia 创业公司企业事务主管 Alex Voica 展示他的交互式AI 头像时发生的事情。这不仅仅是神经网络生成的文本,而是一个真正的突破,它让我们思考通信的未来以及交互式 AI 头像如何改变我们与信息的互动方式。

Synthesia:从 1 亿美元 ARR 到创建数字孪生

Synthesia 是 AI 头像市场上的主要参与者,与 D-ID、HeyGen 和 Colossyan 等公司齐名。今年,这家初创公司的估值达到了40 亿美元,去年其年度经常性收入 (ARR) 超过了1 亿美元。

他们的主要任务是帮助企业使用 AI 头像创建交互式培训视频。最近,Synthesia 推出了 Roleplay Sessions 产品,该产品允许员工(例如)与交互式 AI 头像练习商业演示,该头像会提供反馈并评估他们的回答。这不再仅仅是生成 100 个视频,而是一个用于学习和发展的成熟工具。

如何创建 AI 记者头像:过程和技术

创建个人 AI 头像是一个引人入胜的过程。他们邀请我制作我的数字副本,我当然同意了。毕竟,这是了解订阅式神经制作如何运作的机会。

为此,我参观了 Synthesia 办公室的一个迷你电影工作室,在那里拍摄了许多照片并录制了两分钟的语音样本。创建了两种类型的头像:

  • 个人头像:只需重现任何给定的脚本。
  • 交互式头像:可以听取和回答,并根据特定信息进行训练。

“我妈妈称之为‘惊人的’,这是她极高的赞扬。她和父亲试图问一些‘只有他们才知道’关于我的问题——但模型没有回答,每次都将他们重定向到关于风险投资欺诈的故事。‘我不记得生过你们两个,’她在测试模型后开玩笑说。”

我的头像的技术堆栈包括 Synthesia 自己的视频和语音模型,但该公司还允许客户选择其他实验室的替代品,例如 Cartesia、ElevenLabs、Google 或 OpenAI。企业可以将他们的头像托管在任何云上,或者向 Synthesia 付费进行托管。这为AI 内容制作开辟了无限的可能性。

交互式虚拟形象的技术基础

交互式虚拟形象通过以下几种模型的组合来工作:

  1. 语音转文本(Voice-to-text):将用户的语音转换为文本。
  2. 代理语言模型:分析文本并根据其做出决策。
  3. 文本转语音(Text-to-voice):生成音频回复。
  4. 视频模型(由 Synthesia 开发):在对话过程中为虚拟形象制作动画。

这使得创建带字幕的 AI 虚拟形象和AI 语音配音成为可能,使其成为AI 视频广告和大规模神经网络视频生成的理想选择。

Synthesia 产品类型:从经典虚拟形象到 API

Synthesia 提供三种主要产品类型,让不可能的规模化——现在成为可能:

交互式 AI 虚拟形象:记者数字副本的行动 — 插图 2
  • 视频创建和分发平台:经典的虚拟形象,可以为给定脚本配音。非常适合创建 AI 广告片。
  • 代理平台 Sessions:在调查或角色扮演中与虚拟形象进行交互。
  • API 平台:允许将 Synthesia 的视频和语音模型与其他技术结合,以创建独特的交互式虚拟形象和产品。这为大规模生成 API 和创建加密项目的 AI UGC 开辟了道路。

新闻业的未来与 AI 虚拟形象:伦理问题

创建我的虚拟形象花了几天时间。我首先测试了个人虚拟形象,以评估语音质量。它相当准确,我很高兴它没有传达我录音时沙哑的声音。

我的非技术朋友觉得这很有趣,也有点吓人。我的交互式虚拟形象是确定性的,也就是说,它只回答与它所训练的主题相关的问题——我关于风险投资欺诈的文章。这引发了关于新闻业未来的重要问题。

  • 人们会愿意观看虚拟形象呈现的新闻吗?
  • 虚拟形象能否补充甚至取代记者?
  • 公司高管会愿意与记者的 AI 虚拟形象而不是真人交流吗?

新闻业最重要的方面是信任,而信任是 AI 无法传达的。然而,在新闻业之外,克隆自己的想法可能非常有吸引力。想象一下:你正在休息,而你的数字副本仍在工作,回答问题。这不再是科幻小说,而是现实,它允许创建AI 换脸视频,并且神经网络编写脚本和剪辑。这是一个可以每天制作500 个视频的电子商务 AI 视频工厂。

常见问题

1分钟AI视频要多少钱?

1分钟AI视频的成本因所选平台、虚拟形象的复杂性、配音质量和附加功能而异。Synthesia提供各种定价方案,其中可能包括订阅式神经制作,使其适用于不同的预算。平均而言,成本可能从每分钟几美元到几十甚至几百美元不等,具体取决于定制解决方案。

什么是AI内容制作?

AI内容制作是利用人工智能创建媒体内容(视频、音频、文本、图像)的过程。这包括通过文本生成视频、创建动画AI角色、AI语音配音甚至编写剧本。目标是自动化和加速内容创建,提高其效率并降低成本。这使得实现AI与真实UGC的效率成为可能。

在哪里可以为加密项目订购AI视频?

对于加密项目,速度和可扩展性至关重要,AI视频制作是理想的解决方案。您可以求助于Synthesia、HeyGen或Colossyan等平台,它们提供为加密项目创建AI UGC的服务。这些公司提供工具,用于通过神经网络批量生成视频、创建带字幕的AI虚拟形象以及快速调整内容以适应各种营销活动。您还可以使用批量生成API将AI视频集成到您自己的系统中。

结论

世界正在变化,神经网络正在成为我们生活中不可或缺的一部分。创建交互式AI虚拟形象不仅仅是一项技术创新,更是迈向未来的一个步骤,在这个未来中,渲染和深度伪造道德将成为关键概念。尽管我对我的数字分身有复杂的感觉,但我看到了这项技术在商业和通信方面的巨大潜力。

我们正站在一个新时代的门槛上,在这个时代,一个AI创意要多少钱将不再由工作时间决定,而是由算法的效率决定。加入我们,了解更多关于AI如何改变世界的信息!订阅我们的新闻通讯,不要错过关于未来技术的新文章。


← 返回博客