¿Cómo traducirías el sonido en imagen? ¿O ondas mecánicas en ondas EM?

La conversión más cercana de un sonido a una imagen es el espectrograma.

En términos de procesamiento de señal, un sonido es una señal unidimensional, mientras que una imagen es bidimensional (si considera imágenes en color, es tridimensional). Un espectrograma es una representación bidimensional de un sonido.

Si [math] x [n] [/ math] es una señal de sonido, el espectrograma de [math] x [n] [/ math], denotado por [math] X (m, \ omega) [/ math] está definido como:

[matemática] X (m, \ omega) = \ sum_ {n = – \ infty} ^ {\ infty} x [n] w [nm] e ^ {- j \ omega n} [/ math]

Aquí [math] \ omega [/ math] es la frecuencia, y [math] w [/ math] es una ventana (típicamente una ventana de Hamming / Hanning).

En términos simples, para obtener un espectrograma, corte la señal dada en trozos más pequeños y apile la magnitud de los coeficientes de Fourier en una matriz grande. Así es como se ve el espectrograma para una señal de voz “Ella tuvo su traje oscuro en agua de lavado grasienta todo el año”:

PD: ¡Hay algunas personas en la comunidad de procesamiento de señales de voz que pueden “leer” lo que se ha dicho mirando el espectrograma! ¿Ahora que tan genial esta eso?

Transducción.

El sonido se puede digitalizar con una configuración de micrófono + rpi. Coge tu serpiente mascota favorita (Python) y puedes convertir esos conjuntos de voltaje en magia. Tal vez cada valor corresponde al color o algo.

La onda mecánica tiene que ser un poco más personalizada, pero la idea es la misma. Puede adjuntar un imán a lo que ondula y hacer que perturbe algún campo. Digamos que tienes un resorte con un imán al final. El imán (la dirección de polarización es importante) podría moverse en una carcasa de bobina de cobre que está en circuito con un LED.

Trataré de dar un ejemplo físico. Las ondas de agua son ondas mecánicas. Ahora use la onda de agua para mover un flotador hacia arriba y hacia abajo. Esto podría hacer girar una manivela que podría girar una rueda que podría ser el rotor de un generador que podría encender una bombilla.

QEF.

Sí, pero esos dispositivos usan algún tipo de codificación, aergo alguien ha decidido que, como usted dice, “cada valor corresponde al color o algo”, lo que suena terriblemente aleatorio.
Imagine que la onda EM es una palabra de un idioma, ¿cómo la traduciría al idioma que la otra onda `habla`? ¿Porque son fundamentalmente diferentes?