“Esta é uma conversa que tive com Zuckerberg no Metaverso. Estou fisicamente a centenas de quilômetros de distância de Mark, mas sinto que estou cara a cara com ele.


Ontem, uma conversa remota entre o cientista do Instituto de Tecnologia de Massachusetts (MIT), Lex Fridman, e o CEO da Meta, Mark Zuckerberg, se tornou o maior sucesso nas redes sociais. O vídeo da entrevista de uma hora no metaverso alcançou rapidamente dezenas de milhões de visualizações.

Agora, no metaverso, nossas imagens podem ser quase iguais às de pessoas reais, desde os detalhes de todo o corpo até as expressões e movimentos, é tão natural que chega a ser incrível.

Portanto, no mundo real, precisamos prestar atenção ao gerenciamento de expressões:


O efeito é tão real que faz as pessoas se sentirem sobrecarregadas.

Durante a “Primeira Conversa do Metaverso” no podcast LexFridman, Zuckerberg exibiu o novo avatar de realidade virtual Codec da Meta, que usa tecnologia de digitalização para construir um modelo 3D do rosto do usuário, que é então conduzido por uma implementação de aprendizado de máquina. Durante a conversa, o novo fone de ouvido irá detectar as expressões faciais do usuário e mapeá-las no avatar 3D em tempo real para formar ações.

Zuckerberg disse sobre a conversa do Metaverso: “A plataforma basicamente envia uma versão codificada de sua imagem pela rede de uma forma que é ainda mais eficiente em termos de largura de banda do que a transmissão de vídeo”.

Claro, no metaverso você também pode personalizar sua imagem, como modificar a iluminação:


Ao contrário dos avatares originais do Meta, que foram ridicularizados como sem pernas, olhos opacos e desconfortáveis, os avatares da nova geração parecem extremamente reais, têm latência insignificante e permitem que você sinta que está com outras pessoas no mundo virtual.

“Isso vai ao cerne da visão da realidade aumentada, que é fornecer uma sensação de presença, não importa onde você esteja no mundo”, disse Zuckerberg.

Tudo isso obviamente coloca mais carga no hardware de renderização. Durante a conversa, Zuckerberg e Fridman usavam a versão mais recente do QuestPro, que possui recursos integrados de rastreamento facial e ocular. Deve-se notar que este não é o Quest3 lançado há poucos dias. QuestPro pode não ser lançado oficialmente até 2025.


Codec Image requer uma digitalização do rosto do usuário para construir um modelo virtual 3D.

A entrevista de Zuckerberg ocorreu no metaverso, e o conteúdo da conversa também ocorreu no metaverso. Durante a conversa de uma hora, Zuckerberg falou sobre metaverso, realidade aumentada, grandes modelos e outros temas.

Zuckerberg disse que, na verdade, a maior parte da comunicação entre as pessoas não é feita através da linguagem, mas sim através de detalhes como expressões. Meta está tentando usar mais avatares de desenhos animados para capturar expressões, proporcionando uma experiência realista e ao mesmo tempo tendo um certo senso de realidade.

Ele sugeriu que os usuários poderiam editar seus doppelgangers virtuais para exibir emoções mais exageradas e brincou dizendo que poderia usar a tecnologia de avatar para ajustar sua famosa entrega inexpressiva.


Por mais impressionantes que sejam os avatares, pode demorar um pouco até que sejam amplamente utilizados.

É importante notar que os números mostrados nesta entrevista foram criados usando digitalização de última geração, com duração de horas, envolvendo centenas de câmeras, algo que atualmente está fora do alcance do consumidor médio.

Mas Zuckerberg disse na entrevista que o plano da Meta é permitir que as pessoas usem seus smartphones para digitalizar muito rapidamente.

“Basta pegar o telefone e agitá-lo na sua frente por alguns minutos, dizer algumas palavras, fazer um monte de expressões... e então a IA pode produzir algo com a qualidade que temos agora”, disse Zuckerberg à LexFridman.

Zuckerberg disse que a Meta planeja integrar a tecnologia em seus produtos nos próximos anos.

As projeções realistas atuais são uma melhoria significativa em relação aos avatares de desenho animado usados ​​no jogo VR gratuito da Meta e na plataforma social HorizonWorlds.


Selfie do metaverso de Zuckerberg.

No ano passado, Zuckerberg foi ridicularizado nas redes sociais quando postou uma selfie de seu avatar do Metaverso fora da Torre Eiffel virtual, com comentaristas comparando a imagem a um videogame dos anos 1990. Zuckerberg admitiu na época que o avatar era “básico”.

Inesperadamente, a tecnologia melhorou muito depois de apenas um ano.

Como lamentou o cientista de IA Lex Fridman durante a entrevista: "Realmente não sei como descrever esse sentimento. É como se estivéssemos na mesma sala, como o futuro."

Os esforços contínuos de Zuckerberg estão mudando a percepção do Horizon Worlds. Ele disse a LexFridman que avatares realistas podem ajudar a atrair pessoas que ficam desanimadas com as imagens do Metaverso. “As pessoas estão maravilhadas com a experiência, mas recebemos alguns comentários de que os avatares não pareciam tão realistas neste ambiente.”

Claramente, as capacidades atuais do metaverso trarão grandes mudanças na forma como interagimos. É certo que esta é a demonstração mais impressionante do projeto Metaverso de Zuckerberg de todos os tempos.


“Mudou e nossa percepção do metaverso começou a mudar” - esta é uma tecnologia que marcou época.

Se o Meta conseguir esse efeito em produtos de consumo em breve, poderá se tornar um aplicativo revolucionário.