I Made a Pretty Interesting VTuber Display System!【hololive / Houshou Marine】
【How I made it】
① I used Scaniverse’s 3D Gaussian Splatting to 3D-scan a GQuuuuuuX box and a VOTOMS Brutishdog figure.
Of course, you can scan pretty much anything you want.
↓
② I created a Unity scene where Marine Senchou dances on top of the scanned 3D box.
↓
③ I added Portalgraph to the Unity scene and built it.
Portalgraph is a Unity SDK that enables stereoscopic VR viewing on any flat display by tracking the viewer’s position.
↓
④ I carefully aligned the built Unity scene with the real-world scanned environment.
↓
⑤ As an extra accent, I added Bishamonten to the real-world side.
↓
⑥ Finally, I recorded the scene using a smartphone with a tracker attached.
Dance Motion: Houshou Marine
Song: Bishoujo Muzai♡Pirates【hololive / Houshou Marine】
3D Model: hololive / Houshou Marine
VTuberの魅力をさらに引き立てるために、実際に3DスキャンとUnityを組み合わせた立体的なディスプレイシステムの制作に挑戦しました。使ったのはScaniverseの3D Gaussian Splatting技術で、これは物体の形状とテクスチャを高精度にデジタル化するのに最適です。例えば私の場合、Quuuuuuxという箱とVOTOMSのBrutishdogフィギュアをスキャンし、ユニティのシーン上で宝鐘マリンのダンスモデルと重ね合わせました。 重要だったのは、Portalgraph SDKを使うことで平面ディスプレイ上でも立体視が可能になったことです。このSDKは閲覧者の位置を追跡し、自然な角度からの立体像を生成できるため、VR機器なしで3D感を味わえます。私が制作した環境は、実世界の物体とデジタルモデルが一体化しているように見えるため、見る角度によって異なる表情が楽しめるのも特長です。 さらに、シーンに日本の守護神である毘沙門天のフィギュアを加え、和の要素も演出しました。撮影はトラッカー付きのスマホで行い、動きに合わせてシーンのアライメント調整も丁寧に行っています。 このシステムはVTuberファンのみならず、AR/VR技術や3Dモデリングに興味が ある方にも新しい体験を提供できると思います。私自身の制作過程を通して、3Dスキャンとリアルタイムレンダリング技術がどのように協調し、よりリッチなコンテンツ作りに役立つか実感できました。今後もこうした技術を活用し、現実と仮想が融合する新たな表現方法を追求していきたいです。





















