音楽の視覚化

PC ベースの音楽視覚化ソフトウェアであるMilkDropに含まれるプリセットのスクリーンショット(バージョン 1.04d、2001)

ミュージック・ビジュアライゼーション( Music Visualization)とは、楽曲に基づいてコンピュータでアニメーション化された画像です。画像は通常、再生中の楽曲と同期してリアルタイムで生成・レンダリングされます。この機能は、電子音楽ビジュアライゼーションメディアプレーヤーソフトウェアに搭載されています。

視覚化技術は、オシロスコープの表示をシミュレートするといった単純なものから、複数の効果を複合的に用いる複雑なものまで多岐にわたります。音楽の音量周波数スペクトルの変化は、視覚化の入力として用いられる特性の一つです。

効果的な音楽視覚化は、周波数や振幅などの音楽トラックのスペクトル特性と、レンダリングおよび表示される視覚イメージのオブジェクトまたはコンポーネントとの間で高度な視覚的相関関係を実現することを目的としています。

意味

音楽の視覚化は、従来の事前に生成された音楽と視覚化の組み合わせ(ミュージック ビデオなど)とは対照的に、リアルタイムで生成されるという特徴によって定義できます。また、一部の音楽視覚化システム(Geiss のMilkDropなど)では、プログラムを実行するたびに各曲またはオーディオごとに異なる視覚化を作成できるという点も、他の形式の音楽視覚化(ミュージック ビデオレーザー照明ディスプレイなど)が常に同じ視覚化を表示するのとは対照的であるという点で、音楽の視覚化の特徴として区別されることがあります。音楽の視覚化は、2D または 3D の座標系で実現でき、最大 6 つの次元を変更できます。4 番目、5 番目、および 6 番目の次元は、色、強度、および透明度です。

歴史

1976 年に発売されたAtari Video Music。この機器は十分な人気を得ることはなく、わずか 1 年間しか生産されませんでした。

最初の電子音楽ビジュアライザーは、 1977年にAtari社が発表したAtari Video Musicで、家庭用ゲーム機「Pong」の考案者であるロバート・ブラウンによって設計されました。Hi -Fiステレオシステムに組み込める視覚的な探求を生み出すというアイデアでした。[ 1 ]イギリスでは、フレッド・ジャッドが音楽ビジュアライゼーションの先駆者となりました。

音楽やオーディオプレーヤーは初期の家庭用コンピュータで利用可能であり、ZX Spectrumのカセットプレーヤーを使用したSound to Light Generator (1985年、Infinite Software)などの視覚化機能を備えたものもあった。 [ 2 ] 1984年の映画「エレクトリック・ドリームス」では音楽ビジュアライザーが目立ったが、リアルタイムで計算されるのではなく、事前に生成された効果としてであった。

IBM PC互換機向けの最初の音楽視覚化プログラムの一つは、 1993年に書かれたオープンソースでマルチプラットフォームのCthughaでした。1990年代には、Amigaで始まったトラッカーミュージックシーンが、 Cubic Player(1994年)、Inertia Player (1995年)などのプログラムや、デモシーンからの精巧なオーディオ/ビジュアル体験など、リアルタイム技術を使った音楽視覚化を採用しました。[ 3 ] [ 4 ]

コンピュータ音楽ビジュアライゼーションは、 Winamp(1997年)、Audion(1999年)、SoundJam(2000年)などのアプリケーションの登場により、1990年代半ばから後半にかけて広く普及しました。1999年までに、数十種類のフリーウェア音楽ビジュアライザが配布されていました。特に、Ryan GeissによるMilkDrop(2001年)とその前身である「geiss-plugin」(1998年)、Andy O'MearaによるG-Force、そしてNullsoftによるAVS(2000年)は、人気の音楽ビジュアライゼーションとなりました。AVSはWinampの一部であり、最近オープンソース化されました[ 5 ]。G -ForceはiTunes [ 6 ]Windows Media Centerでの使用がライセンス供与され、現在ではAndy O'Mearaのソフトウェアスタートアップ企業SoundSpectrumの主力製品となっています。2008年には、iTunesにThe Barbarian Groupが作成した「Magnetosphere」ビジュアライザが追加されました[ 7 ]

聴覚障害者コミュニティによる使用

聴覚障害者や難聴者の音楽鑑賞体験を向上させるために、電子音楽視覚化の応用例がいくつかある。2015年現在、バーミンガム・シティ大学の博士課程に在籍するリチャード・バーン氏は、電子楽器からの詳細な視覚フィードバックを表示するデバイスの研究を行っている。これらの視覚情報は、音程や倍音など、演奏されている音の詳細な情報を提供する。これにより、聴覚障害のある音楽家は自分が演奏している音符をよりよく理解できるようになり、新たな方法で音楽を創作できるようになる。[ 8 ]

シンガポール国立大学の研究者たちは、聴覚障害者の音楽体験を向上させるデバイスを開発しました。この技術は、音楽ディスプレイと触覚椅子を組み合わせたもので、音楽の音質を振動と視覚イメージに統合し、音楽の特定の特性と相関させます。視覚ディスプレイは、音楽に合わせて大きさ、色、明るさが変化する様々な形状を表示します。この視覚ディスプレイと、音楽に合わせて振動する触覚椅子を組み合わせることで、難聴者により包括的な音楽体験を提供することを目指しています。[ 9 ]

音楽の視覚化は、聴覚障害のある生徒の教育にも活用できます。ニューヨーク市のクーパー・ユニオンは、聴覚障害のある子供たちに音について教えるために音楽の視覚化を活用しています。ニューヨーク市のアメリカ手話・英語小学校内に、インタラクティブな光スタジオを開発しました。これは、音と音楽によって生み出されたデジタル出力を表示するインタラクティブな壁面ディスプレイで構成されています。子供たちは動きに合わせて楽器を演奏し、その音楽からの視覚的なフィードバックを見ることができます。また、「トーキングフラワー」の壁も見ることができます。この壁面ディスプレイでは、それぞれの花が音の特定の周波数に基づいて音を光に変換します。[ 10 ]

電子音楽ビジュアライザーの一覧

音楽視覚化ソフトウェアの一覧

OpenCubic Player は、1994 年からリアルタイムSTFTベースの音楽視覚化機能を備えたMS-DOSモジュール ファイルプレーヤーです。

Jeff Minter 氏は、長年にわたって「ライト シンセサイザー」と呼ぶ音楽ビジュアライザーを作成してきました。その例としては次のようなものがあります。

視覚化をサポートするメディアプレーヤーのリスト

  • AIMP (AIMP DevTeam) (プラットフォーム: Windows)
  • Foobar2000 (プラットフォーム: Windows)
  • MediaPortal (オープンソース、Team MediaPortal) (プラットフォーム: Windows)
  • iTunes(2001年、Apple)(プラットフォーム:Mac OS X、Windows) [ 12 ]
  • Apple Music (2019, Apple) (プラットフォーム: macOS, iOS & Android) [ 13 ]
  • Elmedia Player (Eltima ソフトウェア) (プラットフォーム: Mac OS)
  • Winamp (Nullsoft/Radionomy) (プラットフォーム: Windows)
  • Windows Media Player (Microsoft) (プラットフォーム: Windows)
  • MediaMonkey (Ventis Media Inc.) (プラットフォーム: Windows)
  • RealPlayer (RealNetworks) (プラットフォーム: Windows)
  • Kodi (旧 XBMC) (Team XBMC) (プラットフォーム: クロスプラットフォーム)
  • MusicBee (Steven Mayall) (プラットフォーム: Windows)
  • KMPlayer (Pandora.TV) (プラットフォーム: Windows)
  • Amarok (オープンソース、KDE) (プラットフォーム: クロスプラットフォーム)
  • Totem (オープンソース、Gnome) (プラットフォーム: Linux)
  • Clementine (オープンソース) (プラットフォーム: クロスプラットフォーム)
  • Audacious メディア プレーヤー(Audacious チーム) (プラットフォーム: POSIX)
  • VLC メディア プレーヤー(オープン ソース、 VideoLANプロジェクト) (プラットフォーム: クロスプラットフォーム)
  • Xineプレーヤー

参照

参考文献

  1. ^ US 4081829、Brown、Robert J.、「Audio activated video display」、1978年3月28日公開、Atari Inc.に譲渡。 
  2. ^ 「Sound to Light Generator」 . World of Spectrum . 2009年2月20日閲覧。
  3. ^ Hartmann, Doreen (2010).コンピュータデモとデモシーン:リアルタイムにおける芸術的サブカルチャー革新(PDF) . 第16回国際電子アートシンポジウム.オリジナル(PDF)から2014年9月12日アーカイブ. 2015年5月2日閲覧
  4. ^ボリス・バーガー;オンドレイ・パウロビッチ。ミロス・ハサン (2002-03-21)。「デモシーンにおけるリアルタイム視覚化手法」CESCG-2002ウィーン工科大学2015 年 5 月 2 日に取得
  5. ^ sourceforge.comAVS
  6. ^「iTunesについて」 - iTunes 8.0.0.35 クレジット
  7. ^ 「Apple iTunesチームがMagnetosphere visualiserを買収」 9to5mac 2008年9月11日。
  8. ^ 「聴覚障害者のための音楽制作」 ScienceDaily . 2019年4月9日閲覧
  9. ^ Nanayakkara, S.; Taylor, E.; Wyse, L.; Ong, SH (2009年4月4日). 「聴覚障害者のための強化された音楽体験:音楽ディスプレイと触覚椅子の設計と評価」. SIGCHI ヒューマンファクターズ・イン・コンピューティング・システム会議論文集. pp.  337– 346. doi : 10.1145/1518701.1518756 . ISBN 978-1-60558-246-7. S2CID  3185792 .
  10. ^ Varrasi, John (2014年7月25日). 「視覚情報は聴覚障害児の『聞く』力をどのように助けるか」 . Live Science . 2019年4月9日閲覧
  11. ^人文科学コンピュータ支援研究センター (1992).音楽学におけるコンピューティング 第8巻. 人文科学コンピュータ支援研究センター. ISBN 978-0-936943-06-0
  12. ^ 「PCのiTunesで視覚効果をオンにする」Appleサポート2023年6月10日閲覧
  13. ^ 「Macのミュージックで視覚効果をオンにする」 Appleサポート。 2023年6月10日閲覧