共感覚がなくても音楽が「見える」。オーケストラ指揮者のタクトから音楽を視覚化した動画

　音楽とは、一般的には聴覚で楽しむものである。その前提に変わりはないが、聴覚だけではなく、視覚をも使って音楽を捉えた動画が公開されている。

　よくあるような、音楽の主題に沿った絵や風景を映し出す、といった手法ではない。指揮者のタクトの動きを動的に捉え、アニメーションで視覚的効果を付与したものなのである。

　タクトを振っているのは、ロンドン交響楽団の音楽監督、サイモン・ラトル氏だ。

音楽を見せるアニメーション

London Symphony Orchestra - Visualizing Motion and Music

　演奏はロンドン交響楽団、曲はエドワード・エルガーの『エニグマ変奏曲』である。これは2017～2018年のシーズンのために作成された動画に、製作過程の映像を加えたものだ。

曲の表情に伴ってアニメーションも変化する

情報技術による視覚化

　このプロジェクトは、芸術であると同時にデータサイエンスでもある。"Vicon Motion Systems"社とポーツマス大学クリエイティブ・テクノロジーズ学部との協働により、多くの情報技術が用いられた。



　特製の指揮棒と12台のカメラが、120コマ/秒でラトル氏の動きを捉えた。このデータを元にアニメーション効果を付加したのはトビアス・グレムラー氏だ。

　付加された図形の形や色にも意味がある。グレムラー氏のコメントによると、「質感、色、素材、そして光は、古典楽器(木管、金管、弦など)と、古典的なコンサートホールの雰囲気や建築にインスパイアされている」とのことだ。



　指揮者が表現するのは、曲のテンポ、演奏のタイミング、そして何よりも曲の「表情」だ。指揮者の動きをアニメーションが強調し、音楽を視覚的に捉えているのである。違う指揮者による演奏なら、これとは異なるアニメーションが生まれることだろう。



via: Atlas Obscura / DeMilked / YouTube / London Symphony Orchestra など / written by K.Y.K. / edited by parumo
あわせて読みたい
大好きなあの曲はどんな味がするかな？音楽をリアルタイム分析してミックスジュースを作る装置「SQUEEZE MUSIC」


共感覚で音に色が見えるアーティスト、有名なあの曲を絵画で表現


共感覚（シナスタジア）を持つ人が見た世界を可視化した3Dアニメーション映像


あなたは共感覚の持ち主か？曲を聴いて色をイメージする共感覚チェックテスト


感動の音楽を聞くと鳥肌が立つ人と立たない人がいる。一体なぜ？そのメカニズムを解明（米研究）