Sonificación - Sonification

Video de los datos de contaminación del aire de Beijing transmitidos como una pieza musical

La sonificación es el uso de audio que no es de voz para transmitir información o perceptualizar datos. La percepción auditiva tiene ventajas en resolución temporal, espacial, amplitud y frecuencia que abren posibilidades como alternativa o complemento a las técnicas de visualización .

Por ejemplo, la tasa de clic de un contador Geiger transmite el nivel de radiación en las inmediaciones del dispositivo.

Aunque se han explorado muchos experimentos con la sonificación de datos en foros como la Comunidad Internacional de Visualización Auditiva (ICAD), la sonificación se enfrenta a muchos desafíos para su uso generalizado para presentar y analizar datos. Por ejemplo, los estudios muestran que es difícil, pero esencial, proporcionar un contexto adecuado para interpretar la sonificación de datos. Muchos intentos de sonificación se codifican desde cero debido a la falta de una herramienta flexible para la investigación de sonificación y la exploración de datos.

Historia

El contador Geiger , inventado en 1908, es una de las primeras y más exitosas aplicaciones de la sonificación. Un contador Geiger tiene un tubo de gas a baja presión; cada partícula detectada produce un pulso de corriente cuando ioniza el gas, produciendo un clic de audio. La versión original solo era capaz de detectar partículas alfa. En 1928, Geiger y Walther Müller (un estudiante de doctorado de Geiger) mejoraron el contador para que pudiera detectar más tipos de radiación ionizante.

En 1913, el Dr. Edmund Fournier d'Albe de la Universidad de Birmingham inventó el optófono , que utilizaba fotosensores de selenio para detectar la impresión en negro y convertirla en una salida audible. Un lector ciego podría sujetar un libro al dispositivo y sujetar un aparato al área que desea leer. El optophone tocaba un grupo de notas: gc 'd' e 'g' b 'c e . Cada nota se correspondía con una posición en el área de lectura del optophone, y esa nota se silenciaba si se detectaba tinta negra. Por lo tanto, las notas faltantes indicaban las posiciones en las que la tinta negra estaba en la página y se podía usar para leer.

Pollack y Ficks publicaron los primeros experimentos de percepción sobre la transmisión de información a través de la visualización auditiva en 1954. Experimentaron combinando dimensiones del sonido como el tiempo, la frecuencia, el volumen, la duración y la espacialización y encontraron que podían hacer que los sujetos registraran cambios en múltiples dimensiones. En seguida. Estos experimentos no entraron en muchos más detalles que eso, ya que cada dimensión tenía solo dos valores posibles.

John M. Chambers , Max Mathews y FR Moore de Bell Laboratories hicieron el trabajo más temprano sobre gráficos auditivos en su memorando técnico "Inspección de datos auditivos" en 1974. Ellos aumentaron un diagrama de dispersión utilizando sonidos que variaban a lo largo de la frecuencia, el contenido espectral y la modulación de amplitud. dimensiones para usar en la clasificación. No hicieron ninguna evaluación formal de la efectividad de estos experimentos.

En 1976, el filósofo de la tecnología, Don Ihde, escribió: "Así como la ciencia parece producir un conjunto infinito de imágenes visuales para prácticamente todos sus fenómenos, los átomos y las galaxias nos resultan familiares, desde los libros de mesa hasta las revistas científicas; entonces" las músicas 'también podrían producirse a partir de los mismos datos que producen visualizaciones ". Esta parece ser una de las primeras referencias a la sonificación como práctica creativa.

En la década de 1980, los oxímetros de pulso se generalizaron. Los oxímetros de pulso pueden sonificar la concentración de oxígeno de la sangre al emitir tonos más altos para concentraciones más altas. Sin embargo, en la práctica, esta característica particular de los oxímetros de pulso puede no ser ampliamente utilizada por los profesionales médicos debido al riesgo de demasiados estímulos de audio en entornos médicos.

En 1992, Gregory Kramer fundó la Comunidad Internacional de Visualización Auditiva (ICAD) como un foro de investigación sobre visualización auditiva que incluye la sonificación de datos. Desde entonces, ICAD se ha convertido en un hogar para investigadores de muchas disciplinas diferentes interesados ​​en el uso del sonido para transmitir información a través de sus conferencias y actas revisadas por pares.

Algunas aplicaciones y proyectos existentes

  • Altímetro auditivo , también utilizado en paracaidismo
  • Termómetro auditivo
  • Relojes, por ejemplo, con un tic audible cada segundo y con timbres especiales cada 15 minutos
  • Pantallas auditivas en cabina
  • contador Geiger
  • Ondas gravitacionales en LIGO
  • Sonificación interactiva
  • Pantallas auditivas médicas y quirúrgicas
  • Pantallas multimodales (sentido combinado) para minimizar la sobrecarga visual y la fatiga
  • Navegación
  • Física espacial
  • Pulsioximetría en quirófanos y cuidados intensivos
  • Alarma de velocidad en vehículos de motor
  • Sonar
  • Sonificación de tormentas y clima
  • Detección de actividad volcánica
  • Análisis de conglomerados de datos de alta dimensión mediante sonificación de trayectoria de partículas
  • Volumen y valor del promedio industrial Dow Jones
  • Sonificación de imágenes para personas con discapacidad visual
  • CURAT Sonification Game basado en la sonificación psicoacústica
  • Inclinación basada en la sonificación psicoacústica

Técnicas de sonificación

Se pueden alterar muchos componentes diferentes para cambiar la percepción del usuario del sonido y, a su vez, su percepción de la información subyacente que se representa. A menudo, un aumento o disminución en algún nivel de esta información se indica mediante un aumento o disminución en el tono , la amplitud o el tempo , pero también podría indicarse variando otros componentes de uso menos común. Por ejemplo, un precio de mercado de valores podría representarse por un tono ascendente a medida que aumenta el precio de las acciones y un tono más bajo cuando cae. Para permitir al usuario determinar que se estaba representando más de una acción, se pueden usar diferentes timbres o brillos para las diferentes acciones, o se pueden reproducir para el usuario desde diferentes puntos en el espacio, por ejemplo, a través de diferentes lados de sus auriculares. .

Se han realizado muchos estudios para tratar de encontrar las mejores técnicas para presentar varios tipos de información y, hasta el momento, no se ha formulado un conjunto concluyente de técnicas para su uso. Como todavía se considera que el área de la sonificación está en su infancia, los estudios actuales están trabajando para determinar el mejor conjunto de componentes de sonido para variar en diferentes situaciones.

Se pueden clasificar varias técnicas diferentes para la representación auditiva de datos:

  • Sonificación acústica
  • Audificacion
  • Sonificación basada en modelos
  • Mapeo de parámetros
  • Sonificación basada en flujo

Un enfoque alternativo a la sonificación tradicional es la "sonificación por reemplazo", por ejemplo, Procesamiento afectivo melódico pulsado (PMAP). En PMAP, en lugar de sonificar un flujo de datos, el protocolo computacional son los datos musicales en sí mismos, por ejemplo, MIDI. El flujo de datos representa un estado no musical: en PMAP un estado afectivo. Luego, los cálculos se pueden hacer directamente en los datos musicales y los resultados se pueden escuchar con la mínima traducción.

Ver también

Referencias

enlaces externos