Sonificación - Sonification
La sonificación es el uso de audio que no es de voz para transmitir información o perceptualizar datos. La percepción auditiva tiene ventajas en resolución temporal, espacial, amplitud y frecuencia que abren posibilidades como alternativa o complemento a las técnicas de visualización .
Por ejemplo, la tasa de clic de un contador Geiger transmite el nivel de radiación en las inmediaciones del dispositivo.
Aunque se han explorado muchos experimentos con la sonificación de datos en foros como la Comunidad Internacional de Visualización Auditiva (ICAD), la sonificación se enfrenta a muchos desafíos para su uso generalizado para presentar y analizar datos. Por ejemplo, los estudios muestran que es difícil, pero esencial, proporcionar un contexto adecuado para interpretar la sonificación de datos. Muchos intentos de sonificación se codifican desde cero debido a la falta de una herramienta flexible para la investigación de sonificación y la exploración de datos.
Historia
El contador Geiger , inventado en 1908, es una de las primeras y más exitosas aplicaciones de la sonificación. Un contador Geiger tiene un tubo de gas a baja presión; cada partícula detectada produce un pulso de corriente cuando ioniza el gas, produciendo un clic de audio. La versión original solo era capaz de detectar partículas alfa. En 1928, Geiger y Walther Müller (un estudiante de doctorado de Geiger) mejoraron el contador para que pudiera detectar más tipos de radiación ionizante.
En 1913, el Dr. Edmund Fournier d'Albe de la Universidad de Birmingham inventó el optófono , que utilizaba fotosensores de selenio para detectar la impresión en negro y convertirla en una salida audible. Un lector ciego podría sujetar un libro al dispositivo y sujetar un aparato al área que desea leer. El optophone tocaba un grupo de notas: gc 'd' e 'g' b 'c e . Cada nota se correspondía con una posición en el área de lectura del optophone, y esa nota se silenciaba si se detectaba tinta negra. Por lo tanto, las notas faltantes indicaban las posiciones en las que la tinta negra estaba en la página y se podía usar para leer.
Pollack y Ficks publicaron los primeros experimentos de percepción sobre la transmisión de información a través de la visualización auditiva en 1954. Experimentaron combinando dimensiones del sonido como el tiempo, la frecuencia, el volumen, la duración y la espacialización y encontraron que podían hacer que los sujetos registraran cambios en múltiples dimensiones. En seguida. Estos experimentos no entraron en muchos más detalles que eso, ya que cada dimensión tenía solo dos valores posibles.
John M. Chambers , Max Mathews y FR Moore de Bell Laboratories hicieron el trabajo más temprano sobre gráficos auditivos en su memorando técnico "Inspección de datos auditivos" en 1974. Ellos aumentaron un diagrama de dispersión utilizando sonidos que variaban a lo largo de la frecuencia, el contenido espectral y la modulación de amplitud. dimensiones para usar en la clasificación. No hicieron ninguna evaluación formal de la efectividad de estos experimentos.
En 1976, el filósofo de la tecnología, Don Ihde, escribió: "Así como la ciencia parece producir un conjunto infinito de imágenes visuales para prácticamente todos sus fenómenos, los átomos y las galaxias nos resultan familiares, desde los libros de mesa hasta las revistas científicas; entonces" las músicas 'también podrían producirse a partir de los mismos datos que producen visualizaciones ". Esta parece ser una de las primeras referencias a la sonificación como práctica creativa.
En la década de 1980, los oxímetros de pulso se generalizaron. Los oxímetros de pulso pueden sonificar la concentración de oxígeno de la sangre al emitir tonos más altos para concentraciones más altas. Sin embargo, en la práctica, esta característica particular de los oxímetros de pulso puede no ser ampliamente utilizada por los profesionales médicos debido al riesgo de demasiados estímulos de audio en entornos médicos.
En 1992, Gregory Kramer fundó la Comunidad Internacional de Visualización Auditiva (ICAD) como un foro de investigación sobre visualización auditiva que incluye la sonificación de datos. Desde entonces, ICAD se ha convertido en un hogar para investigadores de muchas disciplinas diferentes interesados en el uso del sonido para transmitir información a través de sus conferencias y actas revisadas por pares.
Algunas aplicaciones y proyectos existentes
- Altímetro auditivo , también utilizado en paracaidismo
- Termómetro auditivo
- Relojes, por ejemplo, con un tic audible cada segundo y con timbres especiales cada 15 minutos
- Pantallas auditivas en cabina
- contador Geiger
- Ondas gravitacionales en LIGO
- Sonificación interactiva
- Pantallas auditivas médicas y quirúrgicas
- Pantallas multimodales (sentido combinado) para minimizar la sobrecarga visual y la fatiga
- Navegación
- Física espacial
- Pulsioximetría en quirófanos y cuidados intensivos
- Alarma de velocidad en vehículos de motor
- Sonar
- Sonificación de tormentas y clima
- Detección de actividad volcánica
- Análisis de conglomerados de datos de alta dimensión mediante sonificación de trayectoria de partículas
- Volumen y valor del promedio industrial Dow Jones
- Sonificación de imágenes para personas con discapacidad visual
- CURAT Sonification Game basado en la sonificación psicoacústica
- Inclinación basada en la sonificación psicoacústica
Técnicas de sonificación
Se pueden alterar muchos componentes diferentes para cambiar la percepción del usuario del sonido y, a su vez, su percepción de la información subyacente que se representa. A menudo, un aumento o disminución en algún nivel de esta información se indica mediante un aumento o disminución en el tono , la amplitud o el tempo , pero también podría indicarse variando otros componentes de uso menos común. Por ejemplo, un precio de mercado de valores podría representarse por un tono ascendente a medida que aumenta el precio de las acciones y un tono más bajo cuando cae. Para permitir al usuario determinar que se estaba representando más de una acción, se pueden usar diferentes timbres o brillos para las diferentes acciones, o se pueden reproducir para el usuario desde diferentes puntos en el espacio, por ejemplo, a través de diferentes lados de sus auriculares. .
Se han realizado muchos estudios para tratar de encontrar las mejores técnicas para presentar varios tipos de información y, hasta el momento, no se ha formulado un conjunto concluyente de técnicas para su uso. Como todavía se considera que el área de la sonificación está en su infancia, los estudios actuales están trabajando para determinar el mejor conjunto de componentes de sonido para variar en diferentes situaciones.
Se pueden clasificar varias técnicas diferentes para la representación auditiva de datos:
- Sonificación acústica
- Audificacion
- Sonificación basada en modelos
- Mapeo de parámetros
- Sonificación basada en flujo
Un enfoque alternativo a la sonificación tradicional es la "sonificación por reemplazo", por ejemplo, Procesamiento afectivo melódico pulsado (PMAP). En PMAP, en lugar de sonificar un flujo de datos, el protocolo computacional son los datos musicales en sí mismos, por ejemplo, MIDI. El flujo de datos representa un estado no musical: en PMAP un estado afectivo. Luego, los cálculos se pueden hacer directamente en los datos musicales y los resultados se pueden escuchar con la mínima traducción.
Ver también
Referencias
enlaces externos
- Comunidad internacional para la visualización auditiva
- Sonification Report (1997) proporciona una introducción al estado del campo y las agendas de investigación actuales.
- El Manual de sonificación , un libro de acceso abierto que ofrece una presentación introductoria completa de las áreas de investigación clave en sonificación y visualización auditiva.
- Diseño de información auditiva , tesis doctoral de Stephen Barrass 1998, Enfoque centrado en el usuario para diseñar sonificaciones.
- Mozzi: sonificación de sensor interactivo en microprocesador Arduino.
- Informe preliminar sobre la justificación del diseño, la sintaxis y la semántica de LSL: un lenguaje de especificación para la auralización de programas, D. Boardman y AP Mathur, 1993.
- Un lenguaje de especificación para la auralización de programas, D. Boardman, V. Khandelwal y AP Mathur, 1994.
- Tutorial de sonificación
- Entorno de sonificación general SonEnvir
- Sonification.de proporciona información sobre sonificación y visualización auditiva, enlaces a eventos interesantes y proyectos relacionados
- Sonificación para análisis de datos exploratorios , tesis doctoral de Thomas Hermann 2002, desarrollo de sonificación basada en modelos.
- Sonificación de comunicaciones móviles e inalámbricas
- Sonificación interactiva un centro de noticias y próximos eventos en el campo de la sonificación interactiva
- asociación espacio-tiempo cero
- CodeSounding : un marco de sonificación de código abierto que hace posible escuchar cómo "suena" cualquier programa Java existente , asignando instrumentos y tonos a declaraciones de código (if, for, etc.) y tocándolos a medida que se ejecutan en tiempo de ejecución. De esta manera, el flujo de ejecución se reproduce como un flujo de música y su ritmo cambia según la interacción del usuario.
- LYCAY , una biblioteca de Java para la sonificación del código fuente de Java
- WebMelody , un sistema de sonificación de actividad de servidores web.
- Sonificación de un conjunto de Cantor [1]
- Sonification Sandbox v.3.0 , un programa Java para convertir conjuntos de datos en sonidos, GT Sonification Lab, Escuela de Psicología, Instituto de Tecnología de Georgia .
- Programe la sonificación usando Java , un capítulo en línea (con código) que explica cómo implementar la sonificación usando síntesis de voz, generación de notas MIDI y clips de audio.
- [2] Sonificación en vivo del oleaje oceánico