VTuberのトラッキングを解説｜活動するために必要なツールや基礎知識について
目次
Vtuber活動にはトラッキングソフトやデバイスが必要
Vtuberとして活動するためには、アバターと自身の動きをリアルタイムでリンクさせるトラッキングが可能な環境を整える必要があります。
トラッキングをおこなうには、Webカメラやトラッキングソフト、トラッキングデバイスなどを揃える必要があります。しかし、活動の準備中では「どのソフトを使用すればいいのか」「自分の活動に向いているデバイスはどれ？」と悩んでしまうかもしれません。
本記事では、Vtuberとして活動を始める前に知っておきたいトラッキングの基礎知識について徹底解説します。
Vtuberでよく聞くトラッキングとは？
トラッキングの概要
トラッキングとは「カメラやセンサーを用いて、人間の動きや位置を追跡・取得する技術」のことを指します。
この技術を用いて、自分の顔の向きやカメラとの距離、口の動き、手足の動きなどを読み取らせ、アバターにリアルタイムで反映させることで、アバターが自分の動きにリンクして動くようになるのです。
トラッキングソフトでできること
トラッキングソフトは、取得した動きのデータをアバターに橋渡しする役割を担います。 具体的には、以下のような制御が可能です。
- 表情の同期：まばたき、視線移動、口の開閉の反映
- 体の向きや傾きの連動：首の動きや上半身の揺れ
- 特殊なアクション：キー操作と連動して、アバターに特定のポーズや表情をさせる
高機能なソフトを使用すれば、より滑らかで実際に生きている感が強くなります。
トラッキングの種類
Vtuberのトラッキングには、大きく分けて2Dと3Dの2種類が存在します。
2Dトラッキング
2Dトラッキングは、主にLive2Dなどの平面的なイラストモデルを動かす際に使用されます。Webカメラやスマートフォンのカメラで顔のパーツを追跡するため、
デスクに座っておこなう雑談配信やゲーム実況などで、よく使われる方法です。
最近では、一般的なWebカメラよりも高性能だと言われている、iPhoneのTrueDepthカメラを使用してトラッキングをおこなうVtuberも増えているようです。
3Dトラッキング
3Dトラッキングは、3Dモデルを使用し、全身の動きをアバターに反映させる方法です。全身を動かす場合はフルトラッキングと呼ばれます。
頭や手足、腰などに複数のセンサー（トラッカー）を装着して動きを計測するため、全身をフルに使ったダンス動画の撮影や、VR空間を使った企画撮影などに最適です。
機材のコストは2Dより高くなる傾向にあり、場合によっては撮影スタジオを借りる必要もありますが、その分立体的でダイナミックなパフォーマンスが可能になります。
トラッキングとモーションキャプチャーの違いとは
トラッキングとモーションキャプチャーはよく混同されがちですが、厳密には概念が異なります。
- モーションキャプチャー： 人間の動きを記録・デジタル化する技術そのもの
- トラッキング： 特定のポイント（顔や関節など）を追い続け、位置情報を取得する行為
そこまで厳密に把握しておく必要はありませんが、上記の内容を頭の片隅に入れた状態で、「フェイストラッキング」と「ボディモーションキャプチャー」という言葉を覚えておけば、イメージしやすいのではないでしょうか。
トラッキングをおこなうために必要な機材・ソフト一覧
ここからは、トラッキングに必要な機材やソフトなどを紹介します。自身の活動範囲やジャンルに合ったものを探してみてください。
PCやWebカメラ
Vtuberを配信で使うためには、最低限PCとWebカメラが必要です。
Webカメラはアバターに動きを反映させるためだけに必要なので、そこまで高スペックなものを用意する必要はありません。PC事態にカメラが内蔵されていれば、それでも十分です。
iPoneのTrueDepthカメラのように、スマートフォンのカメラ機能でも代用できるものも増えているので、自身のスマートフォンが使えるかも確認してみましょう。
ただし、PCは以下で紹介するスペックのものを用意することをおすすめします。
| 項目 | スペック |
|---|---|
| CPU | Intel Core i7 または AMD Ryzen 7 以上 |
| GPU | NVIDIA GeForce RTX 4070 以上 |
| メモリ | 32GB以上 |
トラッキングソフト
トラッキングソフトは、使用するアバターの形式（2D/3D）に合わせて最適なものを選びましょう。
Vtube Studio
VTube Studioは、Vtuberの間で最も普及している2D用トラッキングソフトです。
目を見開く、舌を出すなどの繊細な表情変化まで再現でき、パラメーター設定の自由度も高いことが特徴として挙げられます。
前述のiPhoneのカメラと連携する機能も備わっているため、スマートフォンをカメラとして活用したい方にも向いています。
Vtube Studioについて詳しく知りたい方は、以下の記事をご覧ください。
nizima LIVE
nizima LIVEは、Live2D社が提供する日本発のトラッキングソフトです。特徴は、Live2Dモデルの読み込みから設定までがスムーズにおこなえる点です。
また、独自のルーム機能により、他の配信者とアバターを持ち寄って簡単にコラボ配信ができるなど、配信者の交流を支援する機能が豊富に備わっています。
VSeeFace
VSeeFaceは、3Dアバターを使用するVtuberには非常に嬉しい、無料で軽量、低遅延なトラッキングを実現したトラッキングツールです。
不自然な動きを防ぐためのフィルタリング機能が充実しているため、いわゆる「配信事故」を防ぎやすい点が特徴です。精度が良いという評価も多いため、3Dアバターを使用しているVtuberは一度試してみましょう。
Luppet
Luppetは、3Dアバターの上半身の動きを美しく見せることにこだわった有料ソフトです。開発者自身がVtuberとしての使いやすさを追求しており、専門用語を極力排除したシンプルな設定画面が特徴です。
リープモーションコントローラー2との相性が良く、キーボードを打つ手の動きや、お辞儀の深さなど、自然な仕草の表現に長けています。
トラッキングデバイス
自宅でフルトラッキングを実現するには、専用のトラッキングデバイスが必要です。こちらでは、個人でも比較的購入しやすいトラッキングデバイスを紹介します。
リープモーションコントローラー2
リープモーションコントローラー2は、机に置くだけで「指先の動き」を精密に読み取れる小型デバイスです。
「全身を動かす必要はないけれど、雑談配信中に手振りで感情を伝えたい」「キーボードを打つ手をアバターに連動させたい」といったニーズに最適です。
場所を取らず、装着の手間もないため、手軽に表現力を向上させたいVtuberに愛用されています。
mocopi
SONYが開発したmocopiは、直径約3cmのボタン型センサーを6箇所に装着するだけでフルトラッキングを可能にします。
最大の特徴は「PC不要」で、スマホ1台あれば公園や屋外でも全身の動きをキャプチャできる点です。専用のベースステーションや高価なカメラ設置も不要なため、自宅のスペースが限られている方でも、VRChatやダンス動画の撮影を気軽に楽しめます。
Opsens by Uni-motion
Opsens by Uni-motionは、二次元マーカーを使用してトラッキングを実現する、Uni-motionの後継機種です。長時間の使用でもズレが発生しにくく、遅延や動作の飛びも少ないことが特徴として挙げられます。
単四電池で200時間以上動くため、長時間の配信をおこなう方に最適なデバイスだと言えます。
機材が用意できない場合は、専用アプリで配信しよう
高スペックPCや高価なデバイスを揃えるのが難しい場合でも、スマートフォン1台あればVtuberとしてデビューすることは十分に可能です。
昨今は、スマホのカメラ性能を活かした高精度な配信アプリが充実しています。
REALITY
REALITYは、スマートフォンだけで3Dアバターを作成し、そのままライブ配信ができるアプリです。数千種類のパーツを組み合わせるだけで、誰でも簡単にVライバーになれるのが魅力です。
アプリ内には独自のSNS機能やミニゲームが備わっており、機材がない配信初心者でも、視聴者とのコミュニケーションを楽しみながらファンを増やしていける土壌が整っています。
IRIAM
IRIAMは、1枚のイラストをアップロードするだけで、AIが自動的に2Dアバターを作成してくれる配信アプリです。複雑なモデリングの知識は不要で、誰でもオリジナルのキャラクターを使って活動できるという特徴があります。
独自技術により、スマートフォンの通信環境でも遅延が少ないため、リアルタイムの掛け合いを重視する配信者に適しています。
【目的別】おすすめのトラッキング構成
雑談配信がメインの場合
雑談配信は、視聴者とのコミュニケーションがメインとなるので、表情の豊かさが大切です。なので、2Dモデルの場合は「iPhoneのTrueDepthカメラ＋VTube Studio」の組み合わせをおすすめします。
3Dモデルを使用する場合は「WebカメラとVSee Face」の組み合わせでも、十分に機能するでしょう。
歌ってみた配信をする場合
歌ってみた配信では、表情だけでなくリズムに合わせた手の動きなども大切になってきます。歌っている最中に棒立ちだと恰好がつかないため、ハンドトラッキングも導入してみましょう。
おすすめの構成は「3Dアバター＋Luppet＋リープモーションコントローラー2」です。この構成で配信することで、身振り・手振りが配信に追加され、一気にライブ感が増します。
ダンス・演劇などの場合
ダンスや演劇など、全身を使ってパフォーマンスする場合は、フルトラッキングの環境を整えましょう。
欲を言えばスタジオレンタルなどが望ましいですが、そこまで費用をかけられない場合は「mocopi」がおすすめです。
専用カメラ（ベースステーション）の設置が不要なデバイスであれば、自宅などの限られたスペースでも、ダイナミックな動きを反映できる可能性があります。ただし、ブレイクなどの激しいダンスをおこなう場合は、スタジオレンタルをおすすめします。
自分のモデルに最適なトラッキングツールを導入し、配信のクオリティを上げよう
本記事では、Vtuber活動で必要になるトラッキングの基礎知識や、おすすめのソフト・デバイスを紹介しました。アバターの滑らかな動きは、Vtuber配信の要と言っても過言ではありません。2Dや3D、メイン活動、求める機能によって最適なツールは変わるので、本記事を参考にしながら、自身に最適なツールを探してみてください。
VTuberトラッキングのよくある質問
VTuberのトラッキングとは何ですか？
カメラやセンサーで人の動きや位置を取得し、その情報をアバターにリアルタイムで反映させる技術です。
2Dトラッキングと3Dトラッキングの違いは何ですか？
2Dトラッキングは主に顔の動きを平面的なモデルに反映する方法で、3Dトラッキングは全身の動きまで立体的なモデルに反映できる方法です。
WebカメラがなくてもVTuber活動はできますか？
できます。スマートフォンのカメラを使ったり、REALITYやIRIAMのような専用アプリを使ったりする方法があります。
雑談配信に向いているトラッキング構成は何ですか？
記事では、2DモデルならiPhoneのTrueDepthカメラとVTube Studioの組み合わせがおすすめとされています。
歌ってみたやダンス配信では何を追加するとよいですか？
歌ってみたではハンドトラッキング、ダンスや演劇ではフルトラッキング環境を整えると表現の幅が広がります。
関連の人気記事
Vtuberが視聴者を定着させるために
視聴者を定着させるためにソフトに期待できることとしては、初見の視聴者を配信に定着させ、常連を積み上げていくような効果です。
そのような観点からおすすめなのがCastCraftです。
コメビュ（視聴者/コメント管理）機能
CastCraftでは、初見と常連を一目で判別できるだけでなく、視聴者データを蓄積して視聴者全員を覚えてメモを付けることができます。
Screen（画面演出）機能
CastCraftのScreen機能では、視聴者のコメントや投げ銭に応じて画面を盛り上げる演出を盛り込むことができたり、自由自在な文字エフェクトもつくれます。
お手持ちの画像やGIFにもアニメーションを付けてエフェクト化することができます。
いつでも投げ銭（収益化）機能
また、「いつでも投げ銭」という収益化機能では、配信者に9割還元できる他、投げ銭してくれた視聴者に対して個別のお礼の返信や特典ファイル（画像や音声など）を添付することも可能です。
導入実績
導入している配信者さんの事例としては、
等がいらっしゃいます。
導入されたチャンネルの総登録者数は1.6億人を超えており、これまで260万回以上の配信で使われています。
CastCraftを活用すれば、視聴者との関係をより良いものに進化させ、あなたの配信コミュニティをより濃いものにできます。
日々の配信をより楽しくするために、ぜひ導入を検討されてみてください。