「3Dライブ配信を、私1人で。」3Dにじさんじアプリ、にじさんじバーチャルライバーに配布開始!
https://prtimes.jp/main/html/rd/p/000000035.000030865.html

<主な特徴>
■ @:配信環境の簡易化
「3Dにじさんじ」では、顔認識をにじさんじライバーに既に配布しているiPhoneXにある「Face Tracking with ARKit」にて行い、
それを配信PC内の「3Dにじさんじ」アプリに送りモデリングに反映させるため、一般的な3D配信に使用するヘッドマウントディスプレイを付けずにライブ配信が出来ます。
そのため、現在の2D配信のような視聴者とのやり取り・企画実施等も、今までの3D配信に比べ行いやすくなります。

また、手の動きのモーションは、Oculus Rift内のコントローラ「Oculus Touch」と2台のセンサにて行うため、無線&簡易的なシステムで手・腕・指の動きを実現出来ます。
センサに関しても机における小さなものなので、場所を広く取ることなく配信環境の構築が行えます。


■ A:長時間生配信特有の問題を最小限に
にじさんじプロジェクトでは生配信&長時間配信を中心としたものが多いため、開発時にも長時間の生配信特有の問題が最小限になるよう設計しています。

例えば、機材選定段階では他社のヘッドマウントディスプレイを用いた設計を当初の選択肢としてあげていましたが、1時間、2時間と長く配信するには不向きなため、それを使わない形を模索し実現致しました。また、ネットワーク遅延による配信への影響を無くしています
(「ARKit→3Dにじさんじアプリへの転送とモデリング」は、「OBS→YouTubeへのアップロード遅延」に比べて十分小さい)。


■ B:今後のアップデート実施を容易にする取り組み
今回のシステムを構築する上で、今後の拡張(アップデート)のしやすさを項目の一つとして挙げています。開発側のアプリアップデートだけではなく、ライバー側のアプリアップデートの容易性も確保しています。
また、新規にライバーのモデルを追加する際や、既存ライバーのモデルの修正・追加をなるべく容易にする、などを意識しながら設計しています。