Fundada na Europa
Mais de 130 mil downloads
Mais de 150 projetos 3D sob medida concluídos
← Todos os artigos

Personagens e riggingAnimação e recursos visuais

Como testar blendshapes ARKit no Blender com a Business Casual Woman

Teste três movimentos faciais manualmente antes de ensaiar a captura pelo iPhone para uma cena de treinamento no escritório.

Business Casual Woman de terno escuro, mostrada em close e em pé

Antes de gravar o roteiro inteiro de um treinamento, teste três movimentos na sua apresentadora no Blender. Faça a personagem piscar um olho, sorrir de um lado e abrir a mandíbula. Depois, grave uma fala curta. Se um movimento sair errado, você poderá comparar a pose manual com a pose capturada.

O modelo Business Casual Woman inclui rig corporal e facial em Rigify, 52 blendshapes ARKit, controles de sincronização labial e expressões prontas. As imagens abaixo mostram o rig e as poses que acompanham o produto. Você pode fazer o ensaio com seu próprio sistema de captura.

Se quiser usar outra apresentadora, escolha outra personagem com blendshapes ARKit e faça os mesmos três testes no rig facial.

Teste três movimentos manualmente

Abra uma cópia de trabalho do arquivo no Blender e enquadre a apresentadora dos ombros para cima. Selecione a malha do rosto e procure as shape keys em Object Data Properties. Anote os nomes usados no arquivo. Se um controle do rig acionar uma chave, mova esse controle e observe como o rosto reage.

Business Casual Woman em pose pensativa, com controles coloridos do rig facial visíveis ao redor da cabeça

O rig facial da Business Casual Woman. Aproxime a vista para ver onde as pálpebras se encontram.

Volte à expressão neutra entre os testes. Em cada movimento, faça uma pausa na metade da intensidade e outra no final.

  1. Piscada esquerda. Feche o olho esquerdo da personagem. De frente, ele aparece à sua direita. Confira se os cílios acompanham a pálpebra e se o outro olho continua aberto.
  2. Sorriso à direita. Levante o canto direito da boca da personagem. Gire para uma vista de três quartos e observe a bochecha e o canto dos lábios durante o movimento.
  3. Abertura da mandíbula. Abra a mandíbula devagar. Observe os dentes inferiores e o queixo. Volte à expressão neutra e confira se os lábios podem voltar a se tocar.

A Apple chama esses movimentos de eyeBlinkLeft, mouthSmileRight e jawOpen. Use esses nomes como referência para associar os canais recebidos às chaves do rig. Referência de blendshapes da Apple

Painel Shape Keys do Blender ao lado da indicação de que estão incluídos 52 blendshapes ARKit

Referência de blendshapes da ThreeDee. No seu arquivo, selecione a malha do rosto e observe um valor enquanto move o controle correspondente.

Compare o sinal recebido com a pose no Blender

Comece pelo movimento que foi mais fácil de observar no teste manual. Se foi o da mandíbula, mantenha os lábios e as sobrancelhas relaxados e abra a boca duas vezes enquanto observa o valor que chega ao receptor. Depois, veja o valor mapeado no Blender. Acompanhar o movimento do rosto ao receptor e à malha ajuda a localizar o primeiro ponto em que ele muda.

O que aparece no testeO que conferir a seguir
O receptor não mostra alteração quando você abre a boca.Confira se o app rastreia seu rosto e envia dados ao receptor selecionado. Repita o teste antes de editar o rig.
O valor no receptor muda, mas a personagem mantém a pose.Confira qual malha e qual shape key o canal da mandíbula aciona. Teste essa mesma chave manualmente mais uma vez.
A personagem se move, mas o sorriso unilateral repuxa a bochecha oposta.Olhe de frente para a câmera, levante apenas o canto direito da sua boca e compare com o lado direito da personagem. Confira o mapeamento antes de trocar as chaves.
A expressão funciona na janela de visualização, mas fica difícil de ler ao lado do slide de treinamento.Reveja a mesma tomada com um enquadramento mais próximo. Se os lábios ficarem legíveis, ajuste o enquadramento ou a luz antes de alterar a animação.

Ensaie uma fala curta com a câmera

Depois de conectar o app compatível no iPhone ao receptor no Blender, grave a pessoa e a janela de visualização lado a lado. Mantenha a expressão neutra por um instante, repita os três movimentos e diga “Boas-vindas. Abra o arquivo e faça o teste comigo.” Faça uma pausa depois de “comigo” para ver a mandíbula voltar à posição neutra. Exemplo de rastreamento facial da Apple

Dois closes da Business Casual Woman, primeiro com um sorriso de boca fechada e depois com sorriso aberto e olhos semicerrados

Duas expressões prontas mostram como a boca, as bochechas e as pálpebras mudam juntas. Use a tomada gravada para observar a transição entre as poses.

Reveja o B de “boas” e o F de “faça”. Para o B, os lábios devem se tocar. Para o F, procure o contato do lábio inferior com os dentes superiores. Se a mandíbula se moveu no teste manual, mas ficou parada na captura, confira o mapeamento da mandíbula no receptor. Se o olho errado piscar, compare os lados esquerdo e direito da personagem com os canais recebidos antes de mexer na malha.

Confira as formas da boca no áudio

Referência de sincronização labial da ThreeDee com os controles da boca marcados como FV e MBP

A tabela de sincronização labial agrupa sons em que os lábios assumem formas parecidas. Use FV e MBP como referências ao revisar a fala.

Avance quadro a quadro até o B de “boas”. Logo antes de ouvir a consoante sair, procure o instante em que os lábios se tocam brevemente. Depois, encontre o F de “faça”. O lábio inferior deve se aproximar dos dentes superiores, ainda deixando o ar passar. A mandíbula pode dar movimento às duas palavras sem mostrar a diferença entre os sons.

Para comparar com um ajuste manual, duplique a tomada ou trabalhe em uma cópia do arquivo. Use os controles de fala disponíveis para ajustar as duas posições da boca sobre o mesmo áudio. Reproduza as duas versões em velocidade normal. Mantenha a correção apenas se ela facilitar a leitura da palavra no contexto. Se o receptor já comanda um controle da boca, confira qual entrada tem prioridade antes de acrescentar outra animação.

Assista no tamanho em que o aluno vai ver

Coloque a apresentadora ao lado do slide ou da gravação de tela no tamanho previsto para a entrega. Reproduza a saudação. Você ainda consegue reconhecer o sorriso? Consegue ver os lábios se fechando? Se o movimento estiver claro no Blender e desaparecer na tomada final, compare o enquadramento e a iluminação antes de exagerar as expressões.

Vistas da Business Casual Woman no Blender com a iluminação que acompanha a cena e a apresentadora posicionada diante da câmera

Use a cena de iluminação incluída como ponto de partida para conferir o resultado no tamanho final.

Se a apresentadora precisar se parecer com alguém da sua equipe ou dizer uma fala específica, fale com a ThreeDee sobre uma personagem ou animação personalizada. Inclua uma referência da personagem e a fala que deseja gravar. Se já tiver um rig no Blender, diga se precisa de ajuda para prepará-lo para a captura ARKit.

← Voltar ao blog