사이버 펑크 2077 에서 국가 언어 별 특성에 맞는 다양한 립싱크를 도입

게임 등의 3D 페이셜 애니메이션을 다루는 JaliResearch는 10 월 19 일 CD PROJEKT RED 오픈 월드 RPG '사이버 펑크 2077'을 사례로 회사의 기술을 소개하는 영상을 공개했다.

본작에서는 18 개 언어를 지원하며,이 중 일본어를 포함한 10 개 언어에 관해서는 풀 보이스를 지원합니다. 그 캐릭터의 립싱크를 포함 페이셜 애니메이션의 생성에 JaliResearch의 기술이 활용되고있다.

"사이버 펑크 2077 '의 페이셜 애니메이션을 다루는 있어서는 앞서 10 언어를 지원하는 것 이외에 거대한 오픈 월드의 모든 캐릭터에 적용하거나"위챠 3 : 와일드 헌트'보다 품질 높은 립싱크를 실현하는 것, 그리고 페이셜 모션 캡쳐를 사용하지 않는 것이 목표로 내걸 수 있었던 것 같다.

생성 작업 흐름으로는 대사 필과 녹음, 태그를 소재로 소리의 크기와 높이, 음소의 타이밍과 함께 AI에서 분석. 그리고 대사의 표현과 립싱크 애니메이션을 결합하여 완성한다. 태그는 여러 언어를 사용하는 대사가있는 경우에 언어를 지정하거나 각종 감정의 정도를 지정하기위한 것이라고한다. 감정은 사실적인 애니메이션을 실현하는 데있어서 중요한 요소로 JaliResearch는 독자 기술로 립싱크 입술의 움직임에 반영시키고 있다고한다.

페이셜 애니메이션에 관련된 요소는 외에, 대사 · 대사의 표현 · 윙크 / 시선 눈썹 / 이마의 움직임 목의 움직임을들 수있다. 예를 들어 윙크는 대사의 녹음 분석 및 어휘 분석, 또한 이전의 시간 경과에 의해 이루어진다. 시선에 대해서는 밝은 빛이나 얼굴 움직임 등에 반응하고 자연적인 눈동자의 움직임을 실현하고있는 것.

또한 이번 영상에서 소개 된 캐릭터의 페이셜 애니메이션은 애니메이터의 수작업은 일절없고, 모든 자동 생성에서 만들어지고있는 것. "사이버 펑크 2077」에서는 이렇게 생성 된 애니메이션 아티스트가 더욱 디테일을 더하고 있다고하지만, 페이셜 모션 캡쳐조차 불필요 있고, 작업 시간 단축으로 이어지는 기술이었다 것으로 보인다.

JaliResearch은 립싱크가 부자연와 플레이어가 위화감을 안고 버리기 때문에, 게임의 몰입감에 있어서는 중요한 요소라고 말한다. 이 회사의 기술처럼 대사에서 자동으로 생성하고 각 언어의 차이를 표현하는 방법은 예를 들어 스퀘어 에닉스도 "HappySadFace"라는 자체 시스템을 구축하여 「파이널 판타지 VII 리메이크」에서 사용하고 있던 ( CEDEC2020 ). 게임의 비주얼이 고도화함에 따라 이러한 세세한 표현의 추구가 최종 품질을 좌우하는 것이다.

"사이버 펑크 2077 '는 PC / PS4 / Xbox One 용으로 11 월 19 일 발매 예정이다.