¿Cómo funciona reacTable?

• ¿Quieres saber cómo funciona este instrumento musical multitouch? Sigue leyendo…
• Si quieres saber más sobre reacTable, ¡Haz clic aquí!

Por Lys C. Romero Magallanes

Ya leímos qué es este instrumento, pero, ¿cómo funciona?

Si reacTable fuese una voz, su modo de propagación serían las cuerdas vocales; el equivalente para este aparato son los componentes mediante los cuáles se crea sonido. Así pues, está conformado por la mesa multitouch, piezas fiduciales tangibles, una cámara, un proyector, software Open Source reacTIVision y una aplicación TUIO, explicados más adelante.

El reacTIVision es un software de código abierto, es decir, corresponde a las instrucciones lógicas que dan una función específica a algún sistema computarizado. Fue creado por Martin Kaltenbrunner especialmente para apoyar la lectura del reacTable, aunque puede emplearse en general para cualquier  interfaz o mesa tangible. Logra “…un entorno para el reco­nocimiento rápido y efectivo de patrones en tiempo real.” (Instituto Universitario Nacional de Arte, 2008: 68).

Esta aplicación envía mensajes OSC (Open Sound Control), “un protocolo de comunicación entre computadoras, sintetizadores de sonido y otros aparatos multimedia.” (Berkeley Center for New Music and Audio Technology, 2004)* a través de otro protocolo TUIO diseñado para transmitir la posición de cada una de las piezas. Una vez leído el estado de los objetos por este último, manda la imagen procesada proyectándola sobre la mesa. Es decir, decodifica el lenguaje contenido por casa pieza (“amiba”) y lo envía hacía el proyector para mostrar las frecuencias sobre el tablero traslúcido. Del mismo modo, es capaz de identificar la posición de las manos humanas, -incluso de sus huellas digitales-, y lograr con ello el concepto de “touch”. Protocolo TUIO permite la transmisión de una descripción abstracta entre interfaces interactivas incluyendo los elementos tangibles. Codifica información de control de una aplicación y lo manda a una aplicación cliente capaz de decodificar. En este caso el decodificador sería el proyector. Basado en el OSC busca la interacción de cualquier plataforma que utilice el Open Sound Control.

El proyector sirve únicamente para hacer visibles la interacción de frecuencias entre los objetos “amiba” sobre la superficie de la mesa traslúcida.

Registro vocal

El funcionamiento de reacTable “…está profundamente inspirada (sic) en los sintetizadores modulares análogos como los desarrollados por Bob Moog en los 60’s” (Reactable Systems, 2009)*. Un objeto “amiba” representa los bloques construidos de la música electrónica; cada uno de ellos posee diferentes funciones en generación de sonido. La novedad con respecto a los antiguos sintetizadores radica en la conexión de las piezas, pues anteriormente, éstas debían conectarse por medio de cables al modulador antes de cada presentación. Así pues, en reacTable esto se hace automáticamente basándose en los tipos, afinidades y distancia que tengan entre sí los objetos. Como resultado se pueden crear configuraciones específicas con simplemente mover y/o girar las piezas acercándolas unas con otras. El resultado de su interacción será decodificado y proyectado sobre la mesa tangible, esto las hará visibles ante los usuarios y mostrará una representación de las distintas formas de ondas sonoras que viajan de un objeto a otro.

Los generadores de sonido pueden ser modificados mediante filtros que incluyen frecuencias bajas oscilatorias o pasos secuenciados, bits por minuto, etc. Esto se refiere a la velocidad con la que se escucha un sonido y el ritmo al que se produce. Todos estos cambios pueden lograrse con mover las piezas de su lugar. Así pues, se colocan los objetos tangibles “amiba” sobre el tablero, la cámara lee la información contenida en cada una y manda los datos a la aplicación TUIO que decodifica el mensaje para posteriormente enviarlo al proyector que a su vez los muestra sobre la mesa traslúcida.

* Traducción de Lys Romero

* Traducción de Lys Romero

REFERENCIAS:

Burns, Ken (Productor y Director). (2001). JAZZ [Cinta cinematográfica]. Estados Unidos: British Broadcast Corporation (BBC)

Kaltenbrunner M., (2005) reacTIVision: A Computer-Vision Framework for Table-

Based Tangible Interaction [Versión electrónica] Recuperado el 5 de julio de 2009, de http://mtg.upf.es/reactable/pdfs/reactivision_tei2007.pdf

reacTIVision 1.4, a tangible multi-touch interaction framework [Versión electrónica] Recuperado el 2 de julio de 2009, de http://reactivision.sourceforge.net/

Bencina, R. & Kaltenbrunner, M. “The Design and Evolution of Fiducials for the reacTIVision System”, Recuperado el 28 de junio de 2009, del sitio Web del Music Technology Group del Instituto Pompeu Fabra: http://www.reactable.com/reactable/technology/

Open Sound Control (2004) Recuperado del 28 de junio de 2009, de http://opensoundcontrol.org/introduction-osc

Center for new music and audio technologies (s.f.) Recuperado el 27 de julio de 2009, de http://cnmat.berkeley.edu/

Godwin, J. (2000).  Armonías Del Cielo Y De La Tierra. La Dimensión Espiritual De La Música Desde La Antigüedad Hasta La Vanguardia. México, D.F. Paidos

Instituto Universitario Nacional de Arte (2008) Revista de Investigación Multimedia (año II No. II). Buenos Aires, Argentina. Recuperado el 28 de junio de 2009 de:
http://www.iuna.edu.ar/departamentos/multimedia/investiga/publicaciones/rim2.pdf