VRM에 비즘과 눈 깜빡임을 추가하는 법 — 셰이프 키를 직접 조각하지 않고

Tripo, Meshy 또는 마켓플레이스에서 가져온 리깅된 모델은 걷고 손을 흔들지만 한마디도 할 수 없습니다. 움직이는 얼굴을 만드는 것은 예전에는 Blender에서 쉐이프 키를 수작업으로 조각하는 것을 의미했습니다. 이제는 모델을 업로드하고 1분 후에 말하는 것을 보는 것을 의미합니다.

모델에 움직이는 얼굴을 주려면, .glb(또는 기존 .vrm)를 Riggle에 업로드하세요. 리깅 여부나 얼굴 모양 유무는 관계없습니다. 약 1분 후 말하고, 깜빡이고, 감정을 표현하는 VRM 1.0을 받을 수 있습니다. 립싱크를 구동하는 5가지 비짐(입 모양) aa, ih, ee, oh, ou, 독립적인 좌우 윙크가 있는 깜빡임, 행복, 분노, 놀람, 그리고 모델에 눈 뼈가 있을 때 따라오는 눈을 포함합니다. 결제 전에 모든 표정의 비디오를 볼 수 있으며, 업로드와 재실행은 무료이고 다운로드는 10 토큰이 비용이 듭니다. 이것은 립싱크, 깜빡임, 반응을 구동하는 VRM 표현 세트이며, 52개 모양의 ARKit 퍼펙트 싱크 리깅은 아닙니다(로드맵에 있습니다).

내 모델 리깅하기

'얼굴 리깅'이라고 불리는 두 가지 다른 작업

'퍼펙트 싱크'는 iPhone 수준의 완전한 얼굴 추적을 위한 VTuber 용어입니다. 이는 모델이 52개의 ARKit 쉐이프(browInnerUp, eyeBlinkLeft, jawOpen, mouthSmileLeft 등 48개 추가)를 가지고 있으며, 각 쉐이프가 VRM 표현으로 매핑됨을 의미합니다. VSeeFace, Warudo, VMagicMirror, Vear, Luppet과 같은 앱은 이들을 이름으로 조회하므로, 이름이 약간만 달라도 '52개 쉐이프 중 45개를 인식했습니다'라는 고전적인 메시지가 나타나는 이유입니다.

하지만 대부분의 아바타는 화면에서 살아있기 위해 52개 모두가 필요하지 않습니다. VRM 표현 세트(5가지 입 모양 aa/ih/ee/oh/ou, 깜빡임, 감정 프리셋)는 VRM 앱 내에서 오디오로부터 립싱크, 유휴 상태의 깜빡임, 반응을 구동하는 것입니다. '내 아바타가 말하고, 깜빡이고, 반응해야 한다'가 목표라면 그 세트가 전부입니다. '내 눈썹이 TrueDepth 카메라를 통해 실제 눈썹을 따라가야 한다'가 목표라면 52개 전체가 필요하며 그 이하로는 안 됩니다.

이것이 왜 하루가 걸렸었나

이 생태계의 표준 조언은 항상 'Blender를 열고 쉐이프 키를 손으로 조각하라'였습니다. 모델당 대략 하루, 메시를 편집할 때마다 반복, 그런 다음 Unity에서 VRM으로 결과를 연결하는 데 더 많은 시간이 걸렸습니다. 입을 스스로 열려고 하는 자동 도구는 턱과 뺨을 함께 끌어당기는 경향이 있어서, 모델이 말하는 대신 녹아내리는 것처럼 보였습니다.

Riggle은 그 하루를 약 1분으로 단축하고, 비용을 지불하기 전에 비디오로 결과를 보여줍니다.

AI 생성 또는 마켓플레이스 모델을 위한 빠른 경로

  1. 모델 업로드. Tripo, Meshy, Mixamo 또는 자체 파이프라인에서 온 .glb(리깅 여부 무관, 최대 100MB) 또는 다시 리깅하고 싶은 기존 .vrm. 스켈레톤이 없으면 Riggle이 추가하고 사용자가 정면 뷰에서 확인합니다.
  2. 미리보기 시청. Riggle은 모델의 얼굴을 보여주고 입과 눈을 몇 번의 클릭으로 지정하도록 요청합니다. 약 1분 후 각 표정의 스틸 이미지와 함께 아바타에서 모든 표정이 재생되는 짧은 비디오를 볼 수 있습니다. 만족스럽지 않나요? 다시 실행하세요. 재실행은 무료이며, 토큰은 다운로드에만 사용됩니다.
  3. 다운로드. VRM 1.0 앱에 바로 사용할 수 있는 VRM 1.0.

정확히 나오는 것: aa, ih, ee, oh, ou, 독립적인 blinkLeft 및 blinkRight가 포함된 blink, happy, angry, surprised, 그리고 리깅에 눈 뼈가 있을 때 따라오는 눈. VRM 1.0 전용 - 0.x 내보내기 없음.

입을 벌린 모델이 가장 잘 작동합니다 - 그리고 이건 각주가 아닙니다

입력은 정말 중요합니다. 입을 벌린 채 생성된 모델(치아, 혀, 안쪽 입술)은 가장 자연스러운 입 모양을 만들어냅니다. 왜냐하면 아바타가 말할 때 보이는 것이 바로 그 자신의 입이기 때문입니다. Tripo나 Meshy에서 프롬프트를 제어할 수 있다면, 입을 벌려달라고 요청하세요.

닫히거나 평평하게 그려진 입도 작동하지만, 더 부드럽고 거친 입 움직임을 보입니다. 그리고 비용을 지불하기 전에 미리보기 비디오에서 정확히 어떻게 보이는지 확인할 수 있습니다. 심하게 스타일화되거나 털이 많은 메시도 마찬가지입니다. 먼저 미리보고, 다른 결과를 원하면 다시 실행하세요.

정말로 52개 전부 필요한가요?

솔직하게 물어볼 가치가 있습니다. 왜냐하면 대답은 보통 '아니오'이기 때문입니다. 52개의 ARKit 쉐이프는 사람의 얼굴을 미세한 디테일(모든 눈썹 부분, 모든 볼 부풀림, 모든 개별 눈꺼풀 상태)로 미러링하기 위해 존재하며, iPhone의 깊이 카메라에서 실시간으로 구동됩니다. 안쪽 눈썹이 올라간 것을 알아차릴 관객에게 미묘한 얼굴 연기를 하고 있다면, 그 디테일이 바로 제품입니다.

대부분의 아바타에게는 그렇지 않습니다. 스트리밍에서 '살아있다'고 인식되는 것은 오디오와 일치하는 입, 스스로 깜빡이는 눈, 감정을 등록할 수 있는 얼굴입니다. 즉, 5가지 비짐, 깜빡임 및 독립적인 윙크, 그리고 행복/분노/놀람입니다. 이것이 VRM 표현 세트이며, VRM 앱이 오디오와 유휴 타이머로부터 구동하는 것이고, Riggle이 만드는 것입니다.

따라서 솔직한 경계선은 다음과 같습니다. Riggle은 52개의 ARKit 쉐이프를 생성하지 않습니다. 그것은 제품이 아니라 로드맵입니다. Riggle이 하는 일은 얼굴이 전혀 움직이지 않는 모델을 가져와 약 1분 만에 움직이는 얼굴을 부여하고, 비용을 지불하기 전에 비디오 미리보기를 제공하는 것입니다. 만약 당신이 직면한 격차가 이것이라면, 이것이 모든 해결책입니다.

모델에 움직이는 얼굴을 부여하세요

리깅 여부와 관계없이 GLB를 업로드하고 VRM 1.0을 다운로드하기 전에 모든 표정이 재생되는 것을 확인하세요. 첫 모델은 무료입니다.

내 모델 리깅하기

크리에이터들이 자주 묻는 질문

Blender 없이 비짐과 깜빡임을 추가할 수 있나요?

예. Riggle은 브라우저에서 실행됩니다. 업로드하고, 미리보기를 보고, VRM 1.0을 다운로드하세요. 설치할 것이 없습니다.

Riggle이 퍼펙트 싱크 / 52개 ARKit 블렌드쉐이프를 모두 지원하나요?

아니요. Riggle은 VRM 1.0 표현 세트(5가지 비짐, 독립적인 좌우 윙크가 있는 깜빡임, 행복, 분노, 놀람, 모델에 눈 뼈가 있을 때 따라오는 눈)를 생성합니다. 완전한 52개 쉐이프 ARKit 퍼펙트 싱크는 더 큰 작업이며, 현재 제품이 아닌 로드맵에 있습니다. 만약 오늘 당신의 모델 얼굴이 전혀 움직이지 않는다면, 그 표현 세트가 마네킹과 아바타의 차이를 만듭니다.

이미 리깅된 모델이 필요한가요?

아니요. 스켈레톤이 있는 모델은 그것을 유지하고, 없는 모델은 Riggle로부터 스켈레톤을 받아 정면 뷰에서 확인합니다. 기존 .vrm도 작동합니다.

시간이 얼마나 걸리나요?

약 1분입니다. 사라지는 부분은 느린 부분입니다. 손으로 쉐이프 키를 조각하거나, 스튜디오 서비스에서 하루를 기다리는 것.

가이드