← IndexWork 16 / 36

DJ・VJ|深度カメラ

深度カメラを使ったジェネレーティブVJ

深度カメラで空間の情報をリアルタイムに取り込み、ジェネレーティブな映像と組み合わせた VJ。DJ と VJ を一人で行った。

Period
2026.02
Role
VJ システムの開発 / 映像演出 / DJ
Team
個人
イベント
デジタルフラグメンツ
深度カメラを使ったジェネレーティブ VJ
Fig. 01

Overview

イベント「デジタルフラグメンツ」で DJ と VJ を担当しました。本番の直前に深度カメラを使う構成に切り替え、4 日ほどで VJ ソフトを Unity で組み直しています。

深度カメラ(Luxonis OAK-D)の深度とカラーの映像から人を切り出し、点群や VFX Graph のパーティクル、背景の差し替えなどに使います。

What I did

  1. 01

    17 種類のエフェクト

    グリッチ、RGB のずれ、走査線、万華鏡、ハーフトーン、魚眼などのエフェクトを深度の合成と組み合わせ、キーボードで切り替えます。

  2. 02

    手と音で操る

    Unity の中で手の検出モデルを動かし、OK サインでグリッチ、こぶしで万華鏡、といったジェスチャーでエフェクトを出し、手の位置で強さを変えます。マイクの音はキック・スネア・ハイハットに分けて映像に反応させています。

Facts

開発
2026.02.11 – 02.15(17 コミット)

Stack

Unity 6 · URP · VFX Graph · Sentis · DepthAI(OAK-D) · Python

Links