- Joshua Xu，一位在广告技术和机器学习方面拥有深厚背景的技术创新者，从 Snapchat 转至联合创立 HeyGen，一家专注于使用 AI 进行视觉叙事的公司。
- HeyGen 的数字人生成功能因其创建逼真数字人的能力而备受关注，导致其在中国 AI 克隆业务中广泛采用。
- HeyGen 已成功吸引 AI 领域的大量投资，总融资额超过 5900 万美元，近几轮由知名投资者领投。
Joshua Xu从在 Snapchat 担任重要职务，到如今成为HeyGen的联合创始人兼首席执行官，Joshua Xu 的旅程展示了他职业生涯的非凡演变。凭借计算机科学背景和丰富的广告技术经验，Joshua 的贡献对于推动 HeyGen 在 AI 技术领域的视觉叙事和内容创作创新方法起到了关键作用。
Joshua Xu：从 Snapchat 到 HeyGen
Joshua Xu 是 HeyGen 的联合创始人兼首席执行官。他拥有卡内基梅隆大学计算机科学硕士学位和同济大学自动化学士学位。作为 Snapchat 前 100 名员工之一，Joshua 曾是广告部门的二号工程师和核心技术负责人。任职期间，他在从无到有构建 Snapchat 的广告平台、推荐算法系统以及十亿级数据机器学习平台 Barista 过程中发挥了关键作用。他还领导了 AI Camera 的技术和产品开发。
另请阅读：谁是 Liran Zvibel？WEKA 首席执行官曾是以色列士兵，现应对数据工作负载挑战
自 2020 年 11 月以来，Joshua 一直在位于加利福尼亚州洛杉矶的 HeyGen 工作。在此之前，他在Snapchat担任软件工程师超过六年。他是变现团队的第三位工程师，也是广告排名的第一位工程师。Joshua 的专业知识涵盖广告技术，包括基础设施、投放节奏、优化、数据处理、排名和推荐。他还是 Snap 机器学习平台 Barista 的创建者，并在计算摄影和相机技术方面拥有丰富经验。
HeyGen：使用户能够以更低成本完成内容创作
HeyGen 成立于 2020 年 11 月，最初名为 Surreal（诗云）。它由 Joshua Xu 和其同济大学校友、前ByteDance产品设计师 Wayne Liang 共同创立。红杉资本中国和真格基金是其重要投资者之一。
据 Joshua Xu 称，公司将名称取为“Surreal”（中文发音“shiyun”），是因为创始团队都很喜欢刘慈欣的科幻小说《诗云》（中文发音“shiyun”）。他们认同小说中的观点：“人类艺术创造力无法被机器和算法取代”。他们还认为，机器和算法可以帮助人类更快地工作，让人们更专注于创作。公司的目标是“利用 AI 制作内容，帮助用户以更低的成本完成内容创作”。
最终，我认为我们公司的愿景是为每个人构建一个视频引擎。当你有一个新想法时，都可以用视频将其可视化，从而更好地沟通。
Joshua Xu
创立之初，HeyGen 专注于开发人物图像生成技术并试图将其推向市场。公司最初瞄准广告和电子商务领域，推出了 AI 模特换脸平台，该平台可以翻译商家广告图片和视频中模特的文字和语音，相应调整嘴唇动作，甚至改变模特的外貌以适应全球不同文化和审美偏好，帮助广告主和商家实现更高的转化率。
2021 年 8 月，HeyGen 宣布正在开发内容生成引擎 Surreal Engine，核心技术包括深度学习、自然语言理解和 3D 建模。HeyGen 声称 Surreal Engine 是一个多模态生成器，可将内容生成分解为三个步骤：理解、构架和渲染，实现文本、语音、图像、视频、3D 内容和虚拟内容之间的无缝过渡。
然而，这些产品未在市场上产生重大影响，直到 2022 年 9 月，公司最新的 AI 视频生成工具因其能够产生“数字人”效果而受到公众关注。
另请阅读：谁是 Aetna Wun Trombley？Lycia Therapeutics 首席执行官兼董事会成员是一位不屈不挠的创新者
HeyGen 的数字人创建功能赢得公众关注
该公司主要推广其数字人生成功能，用户只需上传一段两分钟的视频，即可创建一个与真人完全相同的数字人。用户还可以调整手势、面部表情和嘴唇动作，以微调“细微的肢体语言”。
作为一个 AI 驱动的人物，你只需使用文字或音频来驱动它，它就可以说 40 多种不同语言。通过这种方式，我们帮助大幅降低了内容创作成本，人们实际上可以在不同的社交平台上制作更多的视频营销内容。
Joshua Xu
HeyGen 高度逼真的效果使其成为中国“AI 克隆”业务的主流工具。据《北京商报》报道，一些人专门使用 HeyGen 克隆名人或网红来进行推广和付费服务，从而获利。
HeyGen 的 AI 视频翻译器可以通过自动翻译脚本、匹配声音和同步嘴唇动作，轻松实现视频广告本地化。
另一个工具是 Avatar 2.0。HeyGen 声称这是一项突破性发展，重新定义了个性化视频创作的格局。该功能允许用户使用移动设备或笔记本电脑在五分钟内创建高质量虚拟化身。
此外，HeyGen 的个性化视频生成器使用户能够为潜在客户和客户创建自定义视频消息。用户可以在几分钟内为每位收件人量身定制视频。
今年 3 月 21 日，HeyGen 更新至 5.0 版本。此最新版本包括对用户界面、视频编辑功能和实时聊天功能的全面升级，以满足对高效智能工具的需求。
在 Joshua 看来，随着各大互联网巨头积极构建虚拟内容生态系统，一个完全沉浸式的数字世界确实越来越接近现实。因此，内容经济很可能面临供不应求的局面。
HeyGen 赢得 AI 领域投资者青睐
HeyGen 在 AI 领域获得投资者极大关注，迄今已融资超过 5900 万美元。
2021 年 3 月 2 日，HeyGen 表示已获得红杉中国种子基金和真格基金的天使投资，筹集了数百万美元。这笔资金用于帮助客户利用内容生成技术制作图像和视频。
2021 年 8 月 30 日，HeyGen 表示在 Pre-A 轮融资中筹集了数百万美元，由 IDG 资本领投，红杉中国种子基金和真格基金追加投资。资金用于技术开发、产品更新和市场拓展。
2023 年 11 月 29 日，HeyGen 表示已从 Sarah Guo 的 Conviction Partners 获得 560 万美元风险投资，公司估值为 7500 万美元。Sarah Guo 在董事会中取代了红杉中国。
2024 年 3 月，HeyGen 从 Benchmark 获得 6000 万美元（约 4.3 亿人民币）的融资。
自 2023 年以来，HeyGen 一直在减少中国投资者的参与。12 月 11 日，其中国实体申请注销，公司将重心转向美国市场。
一位 AI 视频业内人士表示，技术壁垒低、竞争激烈可能是 HeyGen 转移到海外的原因。“技术水平并不高，关键在于运营。中国市场竞争力强，其他项目也做得很好。”
报道称，HeyGen 希望更好地接触海外客户，避免政府压力，并削减劳动力、运输和税收成本。
Joshua 表示：“我们非常了解我们的投资者、用户和数据中心，所以政府影响不会波及我们。”
HeyGen 表示，不会允许其技术被用于政治竞选或游说活动。