ARやVRなどの技術を利用したコンテンツ作成や配信・物販システムを開発・運営するバルスは8月12日、同社のプラットフォームサービス「SPWN portal」を利用して8月8日に音楽ライブ配信「未来 × SPWN AR LIVE -into the Virtual World-」を実施したことを発表した。無料の会員登録を済ませれば、アーカイブ映像の無料視聴が可能だ。
今回の音楽ライブでは、モーショントラッキングによって演者が立っている位置を特定し、影の発生する場所や手に追随して輝く演出など実現。人物の立ち位置を3Dで位置情報として取得することで背景を立体的に表現した点が特徴だ。具体的には、クロマキー処理で人物を抜き出し、位置情報を基にAR背景を合わせているとのこと。楽曲に合わせて4つ舞台をARで作成し、曲が変わると瞬時に舞台転換を行った。なお今回のライブでは、マイクロソフトが開発した人間の姿勢を推定できるカメラデバイス「Azure Kinect」を利用している。