Analytics of Ambient

Analytics of Ambient

Analytics of Ambient

音にはまだまだ我々が捉え、扱いきれていない情報があるとして、2019年から音と形、印象の相関性を究明し、実用できる形とするための研究を続けてきました。

その研究成果として、音場を通した雰囲気解析ツールの開発を行いました。

音場環境にいる際に受け取ることのできる情報には、言葉以上に複雑な個人の記憶を通したバイアス情報がノイズとして発生するため、イメージの一致に至らず共通言語の喪失が発生しディスコミュニケーションを引き起こしやすく、定量的な評価が難しいため音を素材として取り扱うことが民主的に行われず、一部の界隈のみでの取り扱いに留まっていました。

本ツールは、音を誰しもが平等に自由に取り扱うための入り口として位置づけています。
そのため、本ツールで使用する機器は生活必需品であるスマートフォンの動画撮影機能とインターネットへの接続によって完結し、特別なアプリケーションなどのインストールは一切不要なシステムとなっています。
また、youtubeを通した解析動画アーカイブをオープンにすることで様々な場所・個別の観点を通した音場へのアクセスを行うことが出来ます。

解析された音場は現状の場について共通の認識を持ち、より深いコミュニケーションを生むことが期待されます。
例えば、建築家が再現したい雰囲気が施工が終わったあと本当に達成されているのか？その際の直感的な判別ツールとして活かされるはずです。
再設計やオペレーションの変更など、音を起点とすることで生まれ出るクリエイティブには無限の可能性と柔軟性を孕んでいます。

音という誰しもが取り扱える素材を発想のスタート地点とすることで、世に眠る可能性を掘り起こし領域に囚われない様々なプレイヤーたちが玉石混交となり新たなるクリエイティブカオスの創出を目指します。

Since 2019, we have been investigating the correlation between sound, form, and impression, and have been working to make it practical.

As a result of this research, we have developed a tool to analyze the atmosphere through the sound field.

The information we receive when we are in a sound field environment contains bias information as noise through personal memory, which is more complex than words, so it is easy to lose a common language and cause discommunication without reaching an image match. Since it is difficult to evaluate quantitatively, handling sound as a material has not been done democratically, and it has been handled only in some circles.

This tool is positioned as a gateway for everyone to handle sound equally and freely.
For this reason, the device used in this tool is a smartphone, which is a necessity in our daily life, and it can be connected to the Internet.
The system does not require any special application to be installed. Also, by opening up the analysis video archive through Youtube, it is possible to access the sound field through various locations and individual perspectives.

It is hoped that the analyzed sound field will create a common understanding of the current field and generate deeper communication.
For example, is the atmosphere that the architect wants to reproduce really achieved after the construction is finished? The system can be used as an intuitive tool to determine whether the atmosphere the architect wants to recreate is really achieved after the construction is completed.
The creativity that emerges from using sound as a starting point for redesigning and changing operations has infinite possibilities and flexibility.

By using sound, a material that anyone can handle, as a starting point for ideas, we aim to uncover the possibilities that lie dormant in the world and create a new creative chaos by bringing together a diverse group of players who are not bound by any one domain.

本作品は、環境音解析ツールとなりますため、パソコン一台あれば動作が可能となります。
解析元となるデータはスマートフォンで撮影した映像のみで完結し、特別な機材を用意する必要はありません。

解析用のプログラムにはtouchdesignerを使用しているため、touchdesignerをDLすることで、自由に解析を行うことができる。
またパソコンが手元になくともデータやり取りをgoogle driveやdropboxなどを使用することによりソフトを持つ人に解析を依頼することも可能であり、音という素材へのアクセスを容易にしました。

▼使用した機材
tochedeshinger
MacBookpro15inch(PCによる制限はありません)
動画撮影が可能なスマートフォン

This work is an environmental sound analysis tool, so it can be run on a single computer.
The data used as the source of the analysis can be completed using only video taken with a smartphone, and there is no need to prepare any special equipment.
Since touchdesigner is used as the program for the analysis, the analysis can be performed freely by DLing touchdesigner.
Also, even if you don't have a computer at hand, you can ask someone with software to analyze your data by using google drive, dropbox, etc., making it easy to access the material of sound.

▼Equipment used
tochedeshinger
MacBookpro15inch(Don't need specific PC for using program)
Smart phone with video recording capability

▶配信イメージ(youtubeチャンネルを通した解析共有) : https://www.youtube.com/watch?v=PDUb3rEhUTY&list=PL1Fp3nqSLrrNeZB6d76IwT383SPPivk-2 ▶実験プロセス : https://miro.com/app/board/o9J_l9jSAOo=/

https://youtu.be/K1mes6RFRZA

https://scrapbox.io/mutti624/Analytics_of_Ambient

本作品において、聴覚情報の可視化にともない、音が見えるという状況を創出することが可能となります。
聴覚障害を持たれる方においては、聴覚情報による情報取得は困難とされ、また補聴器を通した補助もあくまでも補助としての役割を持たず本質的な聴覚情報が持つ形状や色鮮やかさなどを共有することに難があります。

本作品を通して、視覚情報を通した聴覚情報の取得においては、一様に平等な環境下にあり障害を超えたコミュニケーションの質を高めると同時に、まだ未踏であったフィールドへ、界隈によるマスキングがされていない新規プレイヤーが流入し、新たな視点と観点を社会へインストールすることが期待されます。