今年夏天,视频生成初创公司Synthesia的企业事务负责人Alexandru Voica给我发来一个链接,介绍他们公关团队的最新成员,我感到很惊讶。那是他的交互式虚拟分身,经过训练可以回答关于Synthesia的常见媒体问题,比如公司是做什么的、如何运作等。就在前一天,我参加了一个论坛,有公关从业者问我是否介意收到使用AI生成文本的媒体推介。但Alexandru的分身远不止于此——在我看来,这就是公关领域使用AI的“终极Boss”。
9月,Synthesia邀请我参观其在纽约的新办公室。Synthesia起源于英国,是与D-ID、HeyGen和Colossyan等齐名的热门数字分身初创公司。它今年早些时候达到了40亿美元的估值,并表示去年ARR(年度经常性收入)已突破1亿美元。
Synthesia让企业能够使用AI分身制作交互式培训视频,并最近推出了一款名为Roleplay Sessions的产品,让员工可以与一个会做出回应并对表现打分的交互式AI分身练习销售推介等内容。
当我参加新办公室开业活动时,他们问我想不想要自己的AI分身,我毫不犹豫地答应了。我当然想要自己的数字孪生。那天我的穿搭很可爱,发型也很整齐。
在见到我的数字孪生之前,我对分身一直态度冷淡,但我觉得它们终将不可避免地成为日常网络生活的一部分。我听说有人在Instagram上创建与自己形象相似的分身来帮助制作社交媒体内容。我觉得这一切都非常有趣,这也许就是为什么我现在毫不迟疑地向你展示我的数字孪生。这是Synthesia第一次为记者(也是除Voica之外第一次为任何人)制作数字分身。它基于我那篇关于为什么获得风投支持的初创公司比非VC支持的初创公司实施更多欺诈行为的报道进行训练,并且只会回答有关该报道的问题。
下面,只需点击“在新窗口中开始”即可开始体验。
你可以问它这样的问题:
- 我为什么决定写这篇报道?
- 这篇研究论文讲的是什么?
- 研究人员发现了什么?
为了制作这个分身,我走进藏在Synthesia办公室里的一间小型摄影棚,他们给我拍了大量照片,并录了两分钟我的声音。我必须同意制作这些分身,就这样,数字Dom诞生了。他们为我创建了一个个人分身(只会朗读我给它的任何脚本)——有戴眼镜和不戴眼镜两个版本——还为我制作了两个交互式分身(可以与我对话并聆听我说话),同样有戴眼镜和不戴眼镜两个版本。
我们选定了一篇文章来训练交互式分身,然后其中一个团队构建了我的交互式分身,它由语音转文字、视频、语言和文本转语音模型组合驱动。我的分身的技术栈包括Synthesia自己的视频和语音模型,不过该公司也允许客户选择Cartesia、ElevenLabs、Google或OpenAI等其他实验室的替代方案。企业还可以选择在自己想要的任何云上托管分身,或付费让Synthesia托管。
语音转文字模型将人们说的话转换成文本,智能体语言模型理解文本并可根据文本采取行动,文本转语音模型将回复转换成音频,最后由视频模型(由Synthesia构建)让分身在说话时动起来。
总体而言,Synthesia构建了三类产品——一是搭载经典分身的视频创作和分发平台,用户输入脚本,分身照着念;二是名为Sessions的智能体平台,人们可以在调查或角色扮演中与分身互动;三是API平台,用户可以将Synthesia的视频和语音模型与其他技术服务结合,构建交互式分身或其他类型的产品。
Synthesia团队花了几天时间制作我的分身。我先玩了个人分身,输入了一段相当普通的脚本,想听听我的AI声音听起来如何。我让它谈论纽约的秋天已经到来——那是我一年中最喜欢的季节。声音相当准确,我很高兴它没有捕捉到我录制音频样本时的沙哑。
我把它展示给一些非科技圈的朋友,他们觉得它既有趣又令人毛骨悚然。
然后我给他们看了我的交互式分身,它是确定性的,意思是它只会说它被训练回应的内容。在这里,就是我那篇风投欺诈的报道。我问它我加入TechCrunch之前在哪里、我住在纽约哪个区之类的问题,但每次它都把我引回那篇报道。
我的朋友们觉得声音听起来不太像我,认为肖像相似度不如个人分身,但尽管如此,它还是足够接近,让人有些毛骨悚然。我妈妈称之为“神奇”,这在她那里已经是很高的评价了。她和我爸爸不断试图问它一些“只有他们才知道”的关于我的问题——但模型没有回答,每次都把他们引向那篇风投欺诈报道。
“我不记得生过你们两个,”她测试完模型后开玩笑道。
这次经历让我思考新闻业的未来会是什么样子。人们能接受打开新闻后由一个分身来播报吗?一位投资者立刻告诉我:不行。当然,如今对于渗透进社交媒体和其他新闻分享平台的AI垃圾内容(AI slop),已经存在大量抵制。但我问到的其他人却不那么确定。分身能否增强——甚至取代——记者?CEO们会愿意与一个记者的AI分身交谈,而不是人类记者吗?
我喜欢这份职业的地方在于与人交流、写故事和研究新话题。但新闻业最重要的部分是信任。这似乎永远不可能外包给AI。
在新闻业之外,我相信克隆自己的想法可能很有吸引力。再也不用在假期或休假后赶工补课了,因为总有一个“你”在身边回答问题。
我们必须拭目以待,看分身在美国企业界的应用将如何演变。但现在我有了自己的分身,心情却很复杂。在度过最初的新鲜感之后,我在它停止说话后仔细端详着我的分身,等待着——等什么,我也说不清。也许是在等它眨眼。或者说点新的东西,或者微笑,或者只是让我知道它懂了。
由于我的数字孪生是确定性的,它们永远不会那样做。但我能看出,如果分身是非确定性的——即由一个可以自由高谈阔论的聊天机器人驱动——人们会多么容易陷入一丝“AI精神病态”。
我告诉一位投资者,无论数字孪生的未来如何,我预测我们这代人——Z世代——可能永远无法习惯它们。它们太科幻了:我们在电影里见过的一切现在都成真了。但我要说,我觉得数字分身比人形机器人更不让人不适。至少对于分身,如果事情变得诡异,我随时可以退出登录。
不过在那之前,以下是我的个人分身,为你盘点我们网站本周的所有头条新闻!