VTuber Live (Virtual Live)의 작동 방식

YouTube나 니코니코 동영상 등, 다채로운 배경 앞에서 표정을 바꾸면서 전달을 하고 많은 사람들을 즐겁게 하고 있는, 가상적인 YouTuber인 VTuber.
그런 VTuber의 인원수는 해마다 늘어나고, VTuber의 대기업도 많은 VTuber를 가지고 활동하고 있는 요즘, VTuber의 활동은 온라인의 폭을 넘어오고 있습니다. 그것이 VTuber 라이브(Virtual Live)라고 불리는 것입니다.
VTuber 라이브/가상 라이브란?
그런 VTuber 라이브(버추얼 라이브)란 어떤 구조로 이루어지는 것인가라는 점에서 설명해 갑니다.
실시간으로 2D/3D 캐릭터가 노래하거나 춤추는 라이브
VTuber Live (Virtual Live)는 VTuber로 활동하는 사람들이리얼 이벤트로 눈앞에서 실시간으로 라이브를 한다구조의 것입니다. 2D나 3D등 VTuber의 캐릭터에 관계없이, 노래하거나 춤추는 라이브가 주가 되고 있습니다.
VTuber의 리얼 이벤트에는 그 밖에도 VTuber가 회장이나 전달 코멘트 등에 리얼타임으로 반응하는 등, 라이브 형식이 아닌 토크계의 이벤트도 개최되고 있습니다.
그 중에는 VTuber가 비친 모니터와 일대일로 대화를 할 수 있는, 추억을 만나고 싶은 팬에게는 기쁜 리얼 이벤트를 행하고 있는 일도 있기 때문에, VTuber 라이브(버추얼 라이브) 이외에도 즐길 수 있는 이벤트는 많이 있습니다 .
해마다 집객력이 올라가고 있다
VTuber의 인기가 상승하고 있는 지금, VTuber 라이브(가상 라이브)의 집객력도 해마다 올라오고 있습니다.참가하는 사람이 늘어나는 경우도 있고 VTuber 라이브(가상 라이브)가 행해지는 횟수도 늘어나고 있어, VTuber 팬에게 있어서는 기쁜 한입니다.
VTuber 단체로의 VTuber 라이브(버추얼 라이브)도 있습니다만, 대형 사무소의 경우는 그 사무소에 소속하는 VTuber를 한자리에 모이는 형태로의 라이브도 많습니다.
원래의 전달로 콜라보레이션 등을 하고 있기 때문에 VTuber끼리의 관계성이 깊은 VTuber끼리 나오고 있는 경우는, 그 조합을 좋아한다는 팬도 있기 때문에, 보다 집객력도 올라가고 있는 것이다 라고 생각합니다.
VTuber 라이브/가상 라이브 작동 방식
그런 VTuber 라이브(버추얼 라이브)는, 도대체 어떤 구조로 행해지고 있는지, 라고 하는 것은, 실제의 인간이 행하는 라이브와 다른 분, 의문으로 생각하고 있는 사람도 적지 않습니다.
여기에서는 VTuber 라이브(가상 라이브)가 어떠한 구조로 운영되고 있는지를 설명합니다.
모션 캡처를 사용하여 인간의 움직임을 반영

VTuber의 3D 아바타 등은 실제 VTuber 촬영과 마찬가지로 모션 캡처를 이용하여 인간의 표정 등의 움직임을 반영합니다.
실제의 전달은 표정을 포함해 상반신만을 움직이는 페이스 트래킹 기능이나 소프트를 이용하고 있는 것이 많습니다만, 실제의 라이브라고 표정을 포함해 3D 아바타등의 전신을 움직일 필요가 있습니다.
모션 캡쳐의 상세에 대해서는 후술하지만,현실에 있는 인간(이른바 VTuber 안의 사람)이 움직인 데이터가 VTuber로서의 아바타/모델의 움직임에 반영하자 그것을 이용하여 라이브를 하는 형태입니다.
실제 사람의 표정 등의 움직임이 반영된 가상 라이브를 리얼 이벤트로 하는 것이 VTuber 라이브(가상 라이브)라고 불리는 것입니다.
연기자와 기술면에서 지원하는 엔지니어로 나뉘어져 있다
그럼 VTuber 라이브(버추얼 라이브)는 어떤 형태로 운영·실행되고 있는가 하면, 이것은 통상의 리얼 라이브와 같고, 연자와 기술면에서 서포트하는 엔지니어로 크게 나뉩니다.
연기자란 VTuber 자신을 가리키며, VTuber의 3D 아바타의 표정이나 사지의 움직임 등의 반영원이 되는 실제 인간/중의 사람입니다.모션 캡처라는 정장을 착용하고 마이크를 향해 말하거나 노래를 부르거나 춤을 추거나합니다.
실제 VTuber는 모션 캡쳐를 이용한 전달을 한다는 구조를 이용하고 있는 사람은 적지만, 표정 등의 움직임을 반영하고 있다는 점은 실제 VTuber로서의 활동과 크게 다르지 않습니다.

VTuber 라이브(버추얼 라이브)의 경우는 스테이지의 연출 등도 포함뒷면에서 지원하는 엔지니어의 활약하는 것이 일반적인 VTuber 활동과 다른 점이라고 할 수 있습니다.
무대는 배경 등도 중요해 그 배경 등도 포함한 라이트의 연출 등도 전문 지식이 필요합니다. 일반 생신의 인간이 행하는 라이브와 달리 라이브는 거대한 스크린에 비추어 놓습니다.
통상의 라이브와 같이 CG 등을 구사해 깊이가 있는 입체적인 스테이지 배경과 함께 3D의 아바타를 비추어 움직인다는 영상 기술이 필요하기 때문에, 이용하는 기재도 통상의 생신의 인간의 라이브와 다른 것입니다.
모션 캡처란?
그런 이용 기재의 하나인 모션 캡쳐란, 몸 전체의 움직임을 반영시키기 위해 장착하는 기재의 하나입니다.
전체 움직임을 반영하기 위해센서를 몸 전체에 장착하고 움직임을 데이터로 추적하여 3D 아바타 등에 반영라는 구조를 이용하고 있습니다.
모션 캡쳐에는 여러 종류가 있습니다만, 센서 부착의 장치를 입은 채 몸을 움직여, 표정 등을 포함해 반영시킬 수 있습니다. 이 장비 자체가 비싸기 때문에 VTuber로서의 활동 자체에 이용하는 사람은 그다지 많지 않습니다.
섬세한 움직임을 반영할 수 있는 기술의 결정이라고도 할 수 있는 기재이므로, VTuber 라이브(버추얼 라이브)에는 없어야 하는 기재라고 할 수 있습니다.
VTuber 라이브/가상 라이브를 수행하는 데 필요한 장비/기술
VTuber 라이브(가상 라이브)를 수행하기 위해서는 다양한 장비와 기술이 필요합니다. 통상의 VTuber 전송에 필요한 장비/기술에 접하고 있으므로, 3D 아바타 등을 이용해 전달하고 싶은 사람도 참고해 보세요.
모션 캡처를 이용하는 장비
고가이기 때문에 도입하고 있는 VTuber는 적습니다만, 모션 캡쳐를 이용하기 위해서 필요한 장비를 도입하는 것으로,몸 전체의 움직임을 추적하고 전달하는 기술이 활용수 있습니다.
녹색 배경 속에서 움직임을 반영하거나 센서로부터의 정보를 수신하여 반영시키거나 모션 캡쳐에서 이용하는 기술의 구조는 다양합니다.
수십만 되는 장비라고 하는 것도 있어 개인의 VTuber로 도입하고 있는 사람은 꽤 적습니다만, 전술한 VTuber 라이브(버추얼 라이브)에서는 이용하고 있는 사람이 많다고 할 수 있습니다.
VR 장비

비교적 준비하기 쉬운 장비로는 VR 기기가 있습니다.헤드셋과 2개의 컨트롤러로 3D 아바타 전체를 이동수 있기 때문에, 개인의 VTuber로 몸 전체를 움직이는 기술을 이용해 전달하고 싶다고 하는 경우는 활용하고 있는 사람이 많습니다.
이쪽이 수십만으로 준비할 수 있는 것도 있으므로, 3D아바타 전신을 움직이는 기술을 이용하고 싶은 경우에는 이쪽이 추천입니다.
얼굴 추적 소프트웨어
VTuber 활동에 그렇게 돈을 쓸 수 없다고 하는 사람은 당연히 많아, 적어도 표정 등이 반영되는 것만으로 좋다, 라고 하는 경우는 페이스 트래킹 소프트를 이용하는 것만으로 VTuber로서의 활동이 가능합니다.
얼굴 추적은 얼굴의 움직임을 읽는 기능입니다. 일반적으로 PC에 웹캠을 붙인 것만으로는 아바타를 움직일 수 없으며 모션 캡처 등이 필요합니다.
그러나 페이스 트래킹을 소프트를 도입하는 것만으로,자신의 표정을 카메라로 읽고 3D 아바타 등의 표정에 반영수 있습니다.

PC의 경우는 Web 카메라가 있으면 이 페이스 트래킹 소프트를 활용하는 것만으로 VTuber 활동은 할 수 있기 때문에, 기재가 준비되어 있으면 개인에서도 충분히 활동 개시가 가능합니다.
「Animaze」「Vtube Studio」「nizima LIVE」등의 페이스 트래킹 소프트가 많은 사람에게 이용되고 있어, 무료의 것으로부터 유료인 것까지 다양합니다만 전달 소프트와 함께 활용하는 것으로 간단하게 VTuber 활동 수 있습니다.
라이브 전송용 스마트폰 앱
최근의 스마트폰은 페이스 트래킹 기능 첨부의 것이 많기 때문에, 스마트폰이면 간단하게 VTuber 전달할 수 있게 되어 있습니다. 그 때문에, 표정을 읽어 추적하는 기능은 원래 있는 것으로부터, 나머지는 전달할 수 있는 환경을 정돈할 뿐입니다.
스마트폰에서 VTuber로 전송하기 위해서는 라이브 전송용 스마트폰 앱을 활용하게 됩니다. 앱의 종류도 풍부하고, 일러스트를 준비하는 것만으로 좋은 것도 있고,아바타부터 배달까지 모두 준비 가능한 스마트폰 앱도있습니다.
배경도 여러가지 준비되어 있어, 간편하게 VTuber 활동할 수 있는 것은 스마트폰의 이점이라고 말할 수 있을 것입니다.
VTuber 라이브/가상 라이브 배달 뒷면
그런데, VTuber 라이브는 대규모이므로 개인의 VTuber에는 꽤 어려운 부분도 있습니다만, 대형 사무소라면 라이브 이벤트를 행하는 일도 많기 때문에, 어떤 것일까라는 부분을 소개해 갑니다.
TUBEOUT!
바루스 주식회사가 주최하는 XR 라이브 이벤트에 「TUBEOUT!」라고 하는 것이 있습니다.
「TUBEOUT!」은 많은 VTuber가 참가하고 있으며, 바루스 주식회사에 있는 VTuber 이외에도 외부 VTuber도 참가하고 있는 규모가 큰 VTuber 라이브(가상 라이브)입니다.
「TUBEOUT!」의 경우, 스테이지에 5명의 VTuber가 지날 수 있어 안의 사람은 각각 모션 캡쳐를 붙이고 「TUBEOUT!」의 라이브를 행합니다.
「TUBEOUT!」의 라이브 상황은 리얼 회장 외에도 전달되므로 많은 사람들이 「TUBEOUT!」의 라이브를 각지에서 즐길 수 있습니다.

또, 「TUBEOUT!」에서는 라이브 전송시와 같이 던져 동전을 하거나, 라이브중에 앙케이트나 코멘트를 요구할 수도 있는 등, 통상의 YouTube 라이브의 확대판과 같은 것이 가능한 구조로 행해집니다 했다.
덧붙여 「TUBEOUT!」때의 뒤쪽인 엔지니어는 2명과 적은 것 같습니다만, 「TUBEOUT!」로 이용하는 배경등은 사전 준비이므로 「TUBEOUT!」의 라이브 당일은 트러블 대응뿐이기 때문에 가능하도록 입니다.
Vtuber Fes Japan 2021
니코 니코 동영상을 운영하는 도완고가 주최 한,일본에서도 최대급 VTuber 라이브 이벤트가 된 것이 “Vtuber Fes Japan 2021″입니다. 지금은 활동을 휴지하고 있는 「키즈나아이」씨도 참가하고 있던 이벤트로, 리얼에서도 넷에서도 크게 화제가 되었습니다.
리얼 이벤트로서 리얼 회장에서 볼 수 있었던 것 외에, 넷 티켓으로 넷 전달이라고 하는 형태로 보는 것도 가능했습니다.
이쪽도 1개의 스테이지에 많은 VTuber의 아바타가 늘어서, 리얼하게 거기에 있다고 생각되는 것 같은 표시의 구조로 행해졌습니다. 고참부터 신인까지 폭넓게 참가한 적도 있고, 대성황에 끝난 VTuber 라이브이기도 합니다.
실시간 AR 라이브
대기업 VTuber 사무소인 니지 산지는 실시간 AR 라이브를 실시하고 있습니다. AR이란 「증강 현실」이라고 하는 것으로, 현실의 세계가 배경인 분,실제로 VTuber가 현실처럼 착각구조로 이루어진 라이브가 AR 라이브입니다.
배경 등은 리얼한 것 그대로이므로, VTuber가 실제로 거기서 라이브를 행하고 있는 것처럼 보인다는 존재감이 크고, 실제의 증명도 아바타에 반영되는 등 세세한 부분도 현실의 것에 맞고 있다고 하는 것 가 크게 화제를 불렀습니다.
노래나 댄스 등도 피로되었으므로 니지산지를 좋아하는 사람에게는 특히 즐거운 이벤트입니다. AR의 구조를 이용한 이벤트는 과거에도 행해지고 있기 때문에, 앞으로도 똑같이 활동하는 VTuber나 라이브를 하는 VTuber도 늘어나가는 것은 아닐까요.
마지막으로
VTuber 라이브(버추얼 라이브)는, 표로 연기하는 VTuber와, 배경등의 준비나 당일의 조정을 행하는 엔지니어가 협력해 있어 할 수 있는 것입니다.
리얼하게 VTuber가 라이브로 움직이는 구조는 모션 캡쳐라고 불리는 기술이 있어, 해마다 그것도 진화해,현실을 배경으로 VTuber가 움직이는 AR 라이브라는 것도 실현하고 있습니다.
VTuber 라이브를 실시하는 것은 개인으로는 어렵지만, 모션 캡쳐를 실제로 이용하지 않아도, 스마트 폰 1개로 VTuber 활동할 수 있는 환경도 갖추어져 있습니다.
자신이 VTuber로서 활동하는 것도 가능하다는 것을 포함해 이 기사로부터 이해를 깊게 해 주시면 감사하겠습니다.