Quem é Joshua Xu? Co-fundador da HeyGen criando nova era de geração de vídeos por IA

Quem é Joshua Xu? Co-fundador da HeyGen criando nova era de geração de vídeos por IA é perfilado pela BTW Media porque evidências publicadas o vinculam à infraestrutura da internet, governança, dependências operacionais ou visibilidade de mercado.

• Joshua Xu, um inovador em tecnologia com forte experiência em tecnologia de publicidade e aprendizado de máquina, fez a transição do Snapchat para co-fundar a HeyGen, empresa focada em usar IA para narrativa visual.
• O recurso de criação de humanos digitais da HeyGen ganhou grande atenção por sua capacidade de criar humanos digitais realistas, levando à ampla adoção em negócios de clonagem por IA na China.
• A HeyGen atraiu com sucesso investimentos substanciais no setor de IA, com um financiamento total de mais de US$ 59 milhões e rodadas recentes lideradas por investidores renomados.

A jornada deJoshua Xudesde seu papel impactante noSnapchataté sua posição atual como co-fundador e CEO daHeyGenmostra uma evolução notável em sua carreira. Com formação em Ciência da Computação e vasta experiência em tecnologia de publicidade, as contribuições de Joshua foram fundamentais para impulsionar a abordagem inovadora da HeyGen para narrativa visual e criação de conteúdo no campo da tecnologia de IA.

Joshua Xu: do Snapchat para a HeyGen

Joshua Xu é co-fundador e CEO da HeyGen. Ele possui mestrado em Ciência da Computação pela Carnegie Mellon University e bacharelado em Automação pela Tongji University. Como um dos primeiros 100 funcionários do Snapchat, Joshua foi o engenheiro número 2 na Divisão de Publicidade e um líder central de tecnologia. Durante sua passagem, ele desempenhou um papel crucial na construção da plataforma de publicidade do Snapchat, no sistema de algoritmo de recomendação e na plataforma de aprendizado de máquina de dados em escala de bilhões, o Barista, do zero. Ele também liderou o desenvolvimento técnico e de produto da Câmera de IA.

Leia também:Quem é Liran Zvibel? CEO da WEKA foi um soldado israelense, agora enfrenta cargas de trabalho de dados

Desde novembro de 2020, Joshua trabalha na HeyGen, sediada em Los Angeles, Califórnia. Antes dessa função, trabalhou no Snapchat por mais de seis anos como engenheiro de software. Foi o terceiro engenheiro da equipe de Monetização e o primeiro engenheiro em Classificação de Anúncios. A expertise de Joshua abrange tecnologia de publicidade, incluindo infraestrutura, pacing, otimização, processamento de dados, classificação e recomendação. Ele também é o criador da plataforma de aprendizado de máquina do Snap, o Barista, e possui ampla experiência em fotografia computacional e tecnologia de câmera.

HeyGen: permitindo que usuários criem conteúdo a custos mais baixos

A HeyGen, fundada em novembro de 2020, originalmente se chamava Surreal. Foi co-fundada por Joshua Xu e seu colega de graduação da Tongji University, o ex-designer de produto daByteDanceWayne Liang. ASequoia CapitalChina e oZhenFundestão entre seus principais investidores.

De acordo com Joshua Xu, a empresa foi nomeada “Surreal” (pronúncia chinesa “shiyun”) porque a equipe fundadora gostava do romance de ficção científica de Cixin Liu “The Cloud of Poem” (pronúncia chinesa “shiyun”). Eles concordam com a ideia do romance de que “a criatividade artística humana não pode ser substituída por máquinas e algoritmos”. Também acreditam que máquinas e algoritmos podem ajudar os humanos a trabalhar mais rápido, permitindo que as pessoas se concentrem mais na criação. O objetivo da empresa é “usar IA para criar conteúdo, ajudando os usuários a concluir a criação de conteúdo a custos mais baixos”.

Em última análise, acho que nossa visão para a empresa é construir um mecanismo de vídeo para todos, de modo que, sempre que você tiver uma nova ideia, possa usar o vídeo para visualizá-la, e isso pode se comunicar melhor.

Joshua Xu

No início, a HeyGen focou no desenvolvimento de tecnologias de geração de imagens de personagens e tentou levá-las ao mercado. A empresa inicialmente direcionou-se aos setores de publicidade e comércio eletrônico com o lançamento da plataforma de troca de rostos por modelo de IA, que pode traduzir o texto e a fala de modelos em imagens e vídeos de anúncios de comerciantes, ajustar os movimentos labiais de acordo e até mesmo mudar a aparência dos modelos para se adequar às preferências culturais e estéticas ao redor do mundo, ajudando anunciantes e comerciantes a alcançar taxas de conversão mais altas.

Em agosto de 2021, a HeyGen anunciou que estava desenvolvendo o motor de geração de conteúdo Surreal Engine, com tecnologias centrais incluindo aprendizado profundo, compreensão de linguagem natural e modelagem 3D. A HeyGen afirma que o Surreal Engine é um gerador multimodal que pode dividir a geração de conteúdo em três etapas: compreensão, enquadramento e renderização, alcançando transições perfeitas entre texto, fala, imagens, vídeos, conteúdo 3D e conteúdo virtual.

No entanto, esses produtos não causaram um impacto significativo no mercado até setembro de 2022, quando a mais recente ferramenta de geração de vídeos por IA da empresa ganhou atenção do público por sua capacidade de produzir efeitos de “humano digital”.

Leia também:Quem é Aetna Wun Trombley? CEO e membro do conselho da Lycia Therapeutics é uma inovadora incansável

Recurso de criação de humanos digitais da HeyGen ganha atenção pública

A empresa promove principalmente seu recurso de criação de humanos digitais, em que os usuários podem criar um humano digital idêntico à pessoa real em um vídeo simplesmente enviando um clipe de dois minutos. Os usuários também podem ajustar gestos, expressões faciais e movimentos labiais para refinar a “sutil linguagem corporal”.

Como uma pessoa com IA que você pode simplesmente usar texto ou áudio para controlar, e ela pode falar mais de 40 idiomas diferentes. Dessa forma, ajudamos a reduzir muitos custos de criação de conteúdo e as pessoas podem realmente ser liberadas para fazer muito mais conteúdo de marketing de vídeo em diferentes plataformas sociais.

Joshua Xu

Os efeitos altamente realistas da HeyGen a tornaram uma ferramenta popular para negócios de “clonagem por IA” na China. De acordo com uma reportagem do Beijing Business Today, algumas pessoas usam especificamente a HeyGen para clonar celebridades ou influenciadores para promoções e serviços pagos, obtendo lucro com isso.

O Tradutor de Vídeo por IA da HeyGen pode localizar facilmente anúncios em vídeo, traduzindo automaticamente os roteiros, combinando vozes e sincronizando os movimentos labiais.

Outra ferramenta é o Avatar 2.0. A HeyGen afirma que este é um desenvolvimento inovador que redefine o cenário da criação de vídeos personalizados. Este recurso permite que os usuários criem avatares de alta qualidade em cinco minutos usando um dispositivo móvel ou laptop.

Além disso, o Gerador de Vídeos Personalizados da HeyGen permite que os usuários criem mensagens de vídeo personalizadas para potenciais clientes e parceiros. Os usuários podem adaptar cada vídeo para destinatários individuais em minutos.

Em 21 de março deste ano, a HeyGen foi atualizada para a versão 5.0. Esta versão mais recente inclui atualizações abrangentes na interface do usuário, recursos de edição de vídeo e funções de bate-papo em tempo real para atender à demanda por ferramentas eficientes e inteligentes.

Na visão de Joshua, à medida que os grandes gigantes da internet estão construindo vigorosamente seus ecossistemas de conteúdo virtual, um mundo digital totalmente imersivo está de fato se tornando cada vez mais próximo da realidade. Consequentemente, a economia de conteúdo provavelmente enfrentará um estado de demanda excedendo a oferta.

HeyGen ganha favor dos investidores no setor de IA

A HeyGen recebeu muita atenção de investidores na área de IA e captou mais de US$ 59 milhões até agora.

Em 2 de março de 2021, a HeyGen disse que recebeu investimento anjo do Sequoia China Seed Fund e ZhenFund, levantando vários milhões de dólares. O dinheiro foi usado para ajudar os clientes a criar imagens e vídeos com tecnologia de geração de conteúdo.

Em 30 de agosto de 2021, a HeyGen disse que levantou vários milhões de dólares em uma rodada Pré-A, liderada pela IDG Capital, com investimento adicional do Sequoia China Seed Fund e ZhenFund. Os fundos foram usados para desenvolvimento de tecnologia, atualizações de produto e crescimento de mercado.

Em 29 de novembro de 2023, a HeyGen disse que recebeu US$ 5,6 milhões em capital de risco do Conviction Partners, de Sarah Guo. A empresa foi avaliada em US$ 75 milhões. Sarah Guo substituiu a Sequoia China no conselho.

Em março de 2024, a HeyGen recebeu US$ 60 milhões (cerca de 430 milhões de RMB) em financiamento da Benchmark.

Desde 2023, a HeyGen vem reduzindo sua presença de investidores chineses. Em 11 de dezembro, a entidade chinesa solicitou o cancelamento do registro, e a empresa focou no mercado dos EUA.

Um insider do setor de vídeos com IA disse que as baixas barreiras técnicas e a alta concorrência na China podem explicar a mudança da HeyGen para o exterior. “O nível técnico não é alto; o segredo são as operações. O mercado chinês é competitivo, com outros projetos indo bem.”

Relatórios dizem que a HeyGen quer melhor acesso a clientes estrangeiros, evitar pressão governamental e cortar custos com mão de obra, transporte e impostos.

Joshua disse: “Conhecemos bem nossos investidores, usuários e centros de dados, então a influência do governo não nos afeta.”

A HeyGen disse que não permitirá que sua tecnologia seja usada para campanhas políticas ou lobby.