TOP >  WORKS > RESONANT INSCAPES

音から連想される情景で、音楽を目で楽しむオーディオビジュアルシステム

RESONANT INSCAPES

音楽からぼんやりイメージが浮かんでくる。
過去の記憶や情景を思い出す。
そんな共感覚のような音楽の感じ方を、AIとともに映像作品化する試みです。

音の特徴量を抽出し、環境音としてその音が存在しうるシーンを類推。
そのシーンを画像生成AIによってリアルタイムに映像化します。

音楽ライブの情報保障の実験として始まった
《RESONANT INSCAPES》は、
ろう者との音に関する対話からスタートしました。

対話の中から、音楽を感じる際の
”ピアノの音は蛇口から出る水の音を感じた”といった
共感覚のような音楽の捉え方に着目。

記憶の中の情景と音楽を重ね合わせるような感覚に共感し、
それを映像として視覚化する手法をリサーチしています。

 

Credit

Creative Director: 諸星智也 (Dentsu Lab Tokyo) | Creative Technologist: 高梨大 (Dentsu Lab Tokyo) | Designer: イワタナオキ

WORKS 一覧