音は色で表現できる！　周囲の音を可視化する技術

生活の中で聞こえる音

日常生活にはさまざまな音が存在しています。こうした音全般は「音環境」と呼ばれており、分析のための技術開発が行われています。音環境を理解できれば、その場所の雰囲気や、より心地よい音環境を作る方法が考えられます。課題の一つがプライバシーの保護です。音環境には人の会話も含まれているため、分析結果から個人情報が漏れるのではないかとの不安から、実験許可がなかなか下りません。そこで別のアプローチから音環境を探る手法として、「音模様」という技術が開発されました。音の発生源や特徴のみに注目して、音環境を「色」で可視化します。

音環境を色で表す

音模様ではマイクロフォンアレイというセンサで採集した音データを、デジタル上で色を表現するときに使うRGB値に置き換えます。R（赤）には音の大きさ、G（緑）には周波数、B（青）には同じような音が続いていることを示す単一性が割り当てられました。これらの特徴ごとに収集したデータをRGB値に変換すると、さまざまな色が出てきます。例えばお経のような、起伏の少ない音が長く続いているときは青に近い色で表現されました。
音模様ではRGBに割り当てた特徴のみを分析するため、会話の内容には踏み込みません。そのためショッピングモールや商店街など、プライバシー保護の観点からハードルが高かった施設でも実験許可が下りやすいのです。

音から推測する「場の雰囲気」

音模様からは、赤に近い色のときは会話音の大きさが目立つなど、音が鳴っていたときの「場の雰囲気」も推測可能と考えられています。さらにマイクロフォンアレイを設置するスペースを細かく区切り、各マスを音模様で色分けすれば、細かな場の雰囲気がわかります。
音模様が実用化されれば、イベント会場の盛り上がりを評価したり、授業や会議などの状況を分析して双方向のやりとりを活発にするための方法を考えたりと、幅広い場面で役立つと期待されています。音の内容をより正確に反映した色作りをするための研究が継続中です。

※夢ナビ講義は各講師の見解にもとづく講義内容としてご理解ください。

※夢ナビ講義の内容に関するお問い合わせには対応しておりません。

先生情報 / 大学情報

宇都宮大学データサイエンス経営学部データサイエンス経営学科教授河本満先生

興味が湧いてきたら、この学問がオススメ！

ウェブ情報学、サービス情報学

メッセージ

世の中にあふれているオープンデータをうまく使えば、イノベーションを起こせるかもしれません。そのためには社会にはどのような課題があり、どうすれば問題を解決できるのかを考えることが大切です。しかし社会課題は複雑なので、一つの分野の知識だけでは解決が難しいはずです。まずは高校の授業をフル活用して、幅広い分野を学んでおくとよいでしょう。また、一人だけの考えでは限界があるので、仲間との協力も必要です。ぜひ仲間とのコミュニケーションも大切にして、学生生活を送ってほしいです。

宇都宮大学に関心を持ったあなたは

宇都宮大学は、地域デザイン科学部、国際学部、共同教育学部、工学部、農学部、データサイエンス経営学部からなる総合大学で、宇大スピリット＝「3C精神」を大切にしています。これは明るい未来の開拓のために「Challenge」＝主体的に挑戦し、「Change」＝時代の変化に対応して自らを変え、「Contribution」＝広く社会に貢献するという意味を込めた言葉です。これを大学の空気として醸成し、学生と教職員が一体で未来を開拓していく強い決意を込めています。宇都宮大学で学び、共に未来を開拓しましょう！