ソニーが無料で誰でもVTuber体験できる機能を「ToF AR Lab」に追加

誰でも気軽にVTuberを体験できるアプリ「ToF AR Lab」v1.1.0が公開

　ソニーセミコンダクタソリューションズ（株）は10月3日、誰でも気軽にVTuber（バーチャルYouTuber）を体験できる機能を追加したスマートフォン向けアプリ「ToF AR Lab」を拡張して公開した。無料で利用可能で、対応OSはAndroid/iOS。Android版は10月11日に拡張リリース予定。

　「ToF AR Lab」は、手持ちのスマートフォン搭載のカメラを使って画面に映し出された現実風景に、バーチャルの視覚情報を重ねて表示できるスマホ向けアプリ。今年6月15日に同社より一般公開された、ゲームエンジン「Unity」で開発可能なSDK「ToF AR」を用いて自社開発されたものだ。

　今回の機能アップデートにより、カメラで写した人間の動きのデータが取り込まれ、それをあらかじめ用意された3Dの仮想キャラクター（アバター）の動きに反映。従来のVTuber用アプリでは、細かい動きの再現が難しいという課題があったが、本アプリは「ToFカメラ」などで取得した被写体の深度（奥行き）情報を利用することで、手や指の細かな動きまでをアバターに反映し、よりスムーズで違和感のない体験を可能にしたという。

空中に何個のボールをキープできるかを競う「Juggling」

3Dの仮想空間を作り出す「SandBoxRoom」

　また「ToF AR Lab」では、VTuber体験に加え、深度情報をもとに周辺環境を画面上で三次元化する「メッシュ処理機能」を用いて画面上に3Dの仮想空間（メタバース）を作り出す「SandBoxRoom」、まるで水の中にいるようなバーチャル体験ができる「IceWater」、現実風景における壁や床などを手や足で触れる動作により、バーチャルな蝶を飛ばすことができる「Kirigami」などの機能も体験可能だ。