Componer Audiovisualmente
Una guía completa de contenido de sonido y diseño
MF : Felicitaciones por su nuevo libro, Componiendo Audiovisualmente Perspectivas sobre prácticas y relaciones audiovisuales . ¿Podría dar un resumen 'en pocas palabras' de lo que se trata, solo como una introducción rápida para los lectores?
LH : El libro trata sobre lo que significa componer en el ámbito audiovisual; entonces, ¿cómo abordamos la composición cuando pensamos en el sonido y la imagen simultáneamente? ¿Cómo desarrollamos un lenguaje en torno a ese proceso? ¿Cómo lo enseñamos? Y, lo que es más importante, ¿cómo entendemos y discutimos nuestras respuestas a las obras audiovisuales como miembros de la audiencia? ¿Qué estamos haciendo realmente cuando nos encontramos con una obra audiovisual?
MF : ¿Cuáles considera que son los principales lugares de presentación y recepción de composiciones audiovisuales como las que comenta en el libro?
LH : ¡Eso es complicado, y depende mucho del trabajo que se esté discutiendo! Muchos están basados en pantalla, por lo que podrían estar (¡y están!) en cualquier lugar donde pueda acceder a ellos en las pantallas. Otros requieren una interpretación en concierto, como Hitchcock Etudes de Nicole Lizee, o grandes formatos de reproducción multicanal, como Open Air de Grayson Cooke, o realización específica del sitio, como Pebbles de Michele Spanghero o Cinechine de Mariska de Groot .. Cada una de estas obras que sostengo son composiciones audiovisuales —cada una representa un proceso compositivo que se ocupa tanto de lo que vemos como de lo que escuchamos como de igual importancia perceptiva— pero el formato en el que existen es muy diverso y, a menudo, distinto del trabajo individual. Supongo que esa es una de las cosas que discuto en el libro: que componer audiovisualmente a menudo se trata más del proceso y el enfoque que del formato de reproducción.
MF : La siguiente pregunta puede parecer un poco pedante, pero la haré de todos modos porque su intención es principalmente práctica. El archivo académico es un vasto lugar de datos. ¿Cuáles serían los términos de búsqueda clave que alguien podría usar para encontrar la literatura más relevante relacionada con lo que usted describe como composición audiovisual? Incluso para los no académicos, todos pueden acceder a Google Scholar o Researchgate, y saber exactamente qué buscar entre los millones de fuentes puede ser un desafío para cualquiera que desee ampliar su base de conocimientos.
LH : Suelo animar a mis alumnos a que empiecen con la música visual, ya que es un buen lugar para empezar a pensar en las relaciones sonido/imagen en igualdad de condiciones. También es un término/campo bastante establecido ahora con un cuerpo en desarrollo de literatura relevante, pero todavía solo define realmente una colección de enfoques bastante específicos. Gran parte del trabajo audiovisual del que hablo en el libro proviene de las tradiciones intermedia o fluxus, así que ese es otro comienzo útil, o del cine expandido. Creo que el término 'composición audiovisual' también está comenzando a tener más vigencia, y ahora hay recursos relevantes que se pueden encontrar bajo ese título.
MF : ¿Cuáles son las principales herramientas y tecnologías que ve que se utilizan en los cursos universitarios que enseñan habilidades y conocimientos de composición audiovisual? ¿Y son iguales o diferentes para los profesionales?
LH : Esto a menudo depende del académico que dirija el programa :) pero a menudo max, procesamiento, touchdesigner (cada vez más), adobe creative cloud, reaper, logic, ableton... Creo que hay cierta superposición con la práctica profesional, pero también en mi universidad, por ejemplo. tratamos de utilizar herramientas de código abierto o herramientas que sean más asequibles para los estudiantes en lugar de optar por las cosas estándar de la industria. A menudo, el flujo de trabajo y las habilidades básicas son iguales/similares, por lo que sigues enseñando habilidades aplicables, pero no necesariamente en los mismos programas.
FM: Tengo que admitir que a menudo me siento decepcionado por el diseño visual de una gran cantidad de procesamiento de video en vivo que a menudo puede acompañar a las orquestas portátiles, las interpretaciones de controladores MIDI, etc. La razón de esta experiencia decepcionante es que siento que a menudo hay muy poca sensación de cultura visual o educación detrás de estas imágenes que a menudo se ven iguales, porque obtienes una gran cantidad de efectos de 'variación de una forma' donde es solo una forma geométrica simple o garabatos que se reproducen aleatoriamente con cambios de valores paramétricos. Parece haber una falta de conocimiento de las artes visuales en general que sería útil para hacer que estas imágenes sean más atractivas, ya que la experiencia principal suele estar en el lado de la programación de audio. ¿Qué tipo de planes de estudio prevén que harían que los componentes de audio y visual de algunos de estos populares formatos de presentación fueran una experiencia más completa u holística? O, ¿siempre vamos a enfrentar las resistencias de los jóvenes estudiantes que piensan que el viejo material experimental es irrelevante, porque es viejo, y por eso no necesitan historia del arte?
LH : Aquí me acuerdo de Jeff Goldblum en Jurassic Park: "Sí, pero sus científicos estaban tan preocupados por si podían o no , que no se detuvieron a pensar si debían hacerlo". Conozco exactamente el tipo de actuaciones decepcionantes de las que habla, y en lugar de una falta de conocimiento, familiaridad, experiencia con las artes visuales y el vocabulario, etc., la mayoría de las veces creo que son el resultado de solo pensar 'Oh, agreguemos algunas imágenes ' en lugar de pensar en para qué están ahí esas imágenes , por quéestán allí, qué están haciendo en el trabajo y cómo se relacionan con los materiales sonoros, particularmente si los trabajos comenzaron como solo audio. Esto es algo sobre lo que paso mucho tiempo hablando con mis alumnos: ¿cómo se relacionan entre sí la forma, la forma, la estructura, el movimiento, el color, el timbre del sonido y la imagen? ¿Cuál es la relación real que estás articulando? Hay muchos sistemas de visualización que pueden convertir el audio en sistemas de partículas danzantes o formas geométricas, pero a menos que hayas pensado bien por qué un sonido se ve de cierta manera y viceversa, estás perdido. Esa es la base de lo que describo en el libro como pensar audiovisualmente: ver a los dos como parte de un artefacto creativo interconectado, no como entidades perceptivas separadas.
MF : Hay mucha presión sobre las unidades de educación superior en estos días para enmarcar sus cursos y programas en términos de habilidades 'relevantes para el trabajo', por ejemplo, en este caso, tal vez algo así como 'tecnologías creativas' y así sucesivamente. ¿Le ha resultado difícil enseñar composición audiovisual en un contexto académico, o el clima es más acogedor, o a veces tiene que presentar este material como "gráficos en movimiento" a los administradores que pueden entender las habilidades de una manera más simplificada?
LH : En realidad, ha estado bien: lo principal que dirijo en UofG es nuestra Maestría en Diseño de Sonido y Prácticas Audiovisuales, por lo que el componente audiovisual está justo ahí en el nombre. Creo que tratamos de ser realmente claros sobre lo que hacemos, y de hecho lo que no hacemos, y lo que distingue al programa es que enseña habilidades relevantes para el trabajo de una manera que fomenta la exploración y la experimentación creativas. En el libro, hablo un poco sobre las expectativas que los estudiantes suelen tener al ingresar al módulo de composición audiovisual, pero las abordamos específicamente y dedicamos un tiempo a discutir qué significa realmente la composición audiovisual y cómo se relaciona con su práctica más amplia. Así que tengo mucha suerte en ese sentido.
MF : ¿Cuáles son sus pensamientos acerca de las relaciones de sonido e imagen que pueden estar informados por fuentes o estéticas no occidentales? Creo que en este mundo globalizado nuestro, es esencial dar algunos pasos fuera del canon o la tradición occidental, pero cuando lo hagas, probablemente serás un novato total o un aficionado al respecto. Por ejemplo, asigné una lectura a los estudiantes de diseño de sonido, " Sugerencias estéticas en el pensamiento chino: una sinfonía de metafísica y estética ".”, como instructor con prácticamente cero formación académica en arte o filosofía china. Sin embargo, siento que uno tiene que 'intentar' algún tipo de compromiso intercultural, porque la alternativa es el no compromiso, lo que parece irresponsable cuando el alumnado es tan diverso hoy en día (por ejemplo, mis cursos en Vancouver promedian 2/3 estudiantes de Asia oriental).
LH: Primero, parece un artículo realmente fascinante, así que gracias por señalarme. Creo que tienes toda la razón, y para ser honesto, lucho con las mejores maneras de abordar esto: en el libro, he tratado de relacionarme con artistas cuya herencia no está puramente dentro de la tradición occidental, pero esto es complicado. (Caso en cuestión: los artistas fueron elegidos a partir de las respuestas del cuestionario, el cuestionario se distribuyó inicialmente a mi red profesional inmediata y luego se envió más, pero sospecho que la mayoría de los encuestados eran occidentales). Supongo que todo lo que podemos hacer es intentarlo y reconocer nuestra ingenuidad y la falta de un contexto más amplio. Particularmente con mis estudiantes internacionales, siempre los animo a traer su propia cultura y herencia a lo que hacen,
FM: ¿Piensa que la investigación en esta área se ve obstaculizada por la naturaleza textual de los libros y las revistas? No puedo decir que veo mucho interés en las publicaciones de investigación que son realmente ricas en medios, ya que los requisitos académicos generalmente envían uno a las revistas que generalmente publican archivos PDF con muros de pago. Incluso las revistas de código abierto dan formato a los artículos como PDF o HTML con un contenido multimedia mínimo. Puede haber un enlace o algunos en un artículo en el que se puede hacer clic en la sección de Notas, pero siempre me ha parecido un obstáculo que uno no pueda escribir en medio de contenido de medios enriquecidos, por ejemplo, videos incrustados de Vimeo o enlaces de Soundcloud, o incluso imágenes en color, etc. (¡obviamente esto es mucho de lo que hago con este blog!). ¿Debería haber un movimiento académico 'rico en medios' que pretenda utilizar todas las posibilidades de la web para un enfoque menos logocéntrico de la investigación y creación de medios?
LH : en resumen, ¡sí! Luché con esto con el libro, pero como dices, este es el sistema en el que trabajamos. El catálogo de investigación está haciendo algunas cosas interesantes aquí, pero es complicado. Estoy muy abierto a sugerencias sobre esto, y es algo que he discutido con los estudiantes (particularmente los estudiantes de doctorado que buscan trabajo basado en la práctica y luchan por adaptar lo que hacen a los formatos impresos tradicionales). Creo que llegará, y se están dando pasos en esa dirección.
MF : Hoy, con toda la moda de NFT y las plataformas de transmisión de arte como Loupe Art, ha habido una especie de revitalización del arte basado en el movimiento, lo que algunos curadores llaman "pinturas en movimiento" que reproducen una imagen en movimiento de algún tipo durante períodos cortos. Los criptoinversionistas y los especuladores han hecho del arte digital un producto de moda. ¿Ha visto estudiantes interesados en estos desarrollos? ¿Has pensado en composiciones audiovisuales de formato corto basadas en bucles que podrían funcionar en estos nuevos contextos de presentación en línea de arte digital?
LH : Nuestros estudiantes definitivamente están interesados, sí, aunque más desde una perspectiva conceptual que realmente involucrarse con esas formas como un proceso de arte. Se siente un poco tangencial a lo que hacemos, para ser honesto, así que no lo he pensado demasiado (¡aunque sin duda lo necesitaré en los próximos años!). Dirijo un pequeño laboratorio de investigación en la Universidad llamado Digital Departures Lab con Tim Barker (estudioso de cine) y Sarah Cook (curadora) y es algo que está empezando a surgir como un tema de investigación para nosotros, aunque, para ser honesto, también se siente como todo en ese campo se está moviendo demasiado rápido para que la academia se mantenga al día.
MF : ¿Podría proporcionar un resumen sucinto de 'atención transperceptual' para los lectores? Ese es un concepto central en su libro.
LH :
La forma en que desgloso el término en el libro, y mis razones para hacerlo, son las siguientes:
'Trans': como prefijo, que significa a través, más allá o a través
'Perceptivo': es decir, la capacidad de percibir, tomar conciencia o interpretar a través de los sentidos
'Atención: es decir, el acto o el poder de pensar, escuchar u observar detenidamente a alguien o algo: aviso, interés o conciencia
Encontrar obras audiovisuales no es la misma experiencia perceptiva que escuchar una obra sonora o ver una obra visual, sino que es una experiencia transperceptiva, enraizada en sus dos modos sensoriales individuales pero que también se mueve a través, más allá y/o a través de los espacios entre esos modos y los efectos que esos modos tienen entre sí. Al usar el término atención para describir esta forma de compromiso, intento deliberadamente eludir términos como 'observar' o 'escuchar', tan cargados de ideas preconcebidas como experiencias sensoriales, y trato de encontrar un término que pueda hablar de experiencias sensoriales activas. participación en más de un modo de percepción.
¡Pero usted pidió una versión sucinta! Así que supongo que la atención transperceptiva es el acto de prestar atención a una experiencia que se mueve a través y entre los modos perceptuales (en este caso, encontrar una obra audiovisual), pero también prestar atención a esa experiencia, convirtiéndola en un acto aperceptivo, considerando no solo la experiencia en sí misma, sino las cosas que traemos a esa experiencia que influyen en cómo la encontramos.
MF : Gran parte de su discusión sobre la composición se centra en lo que a menudo se conoce como elementos 'formales' (por ejemplo, línea, forma, color, etc.) en el arte visual. Estos elementos, a nivel de composiciones completas, también se denominan 'no objetivos' en relación con su opuesto, 'representación', y la categoría intermedia 'abstracto' (tema reconocible pero altamente formalizado). ¿Podría resumir sus ideas sobre el sonido y las imágenes representacionales (o miméticas, o incluso semióticas) en relación con la composición audiovisual?
LH : Creo que para mí, al menos en mi propia práctica, esto ha cambiado con el tiempo. Cuando comencé a hacer obras audiovisuales, evité deliberadamente cualquier cosa abiertamente figurativa: recuerdo haber hecho una versión en 3D de una pieza construida alrededor de círculos simples, y una vez que estaba en 3D, comencé a verlos como burbujas, canicas o incluso bayas, y eso cambió por completo mi forma de entender la relación audiovisual. Con el tiempo, sin embargo, creo que me alejé un poco de eso y me preocupé menos de cómo son los aspectos representativos/abstractos/miméticos de los materiales de audio o visuales y me preocupé más por las formas en que construyen significado en su combinación. — que creo que es de lo que se trata la atención transperceptiva, ya que se ocupa de la creación de significado individual, no a través de los materiales sino a través de la interpretación.
MF : ¿Tiene algún trabajo audiovisual en línea que pueda insertar a continuación, para brindarles a los lectores un acceso más directo a sus trabajos?
LH :
Artículos relacionados
Sonido para imágenes en movimiento: las cuatro áreas de sonido | una entrevista con Neil Hillman
Entrevista con el fundador de Sinevibes, Artemiy Pavlov
Entrevista con Graham Yeadon de GVST Plugins
Entrevista con Melda Producción
Entrevista con Steve Duda de Xfer Records
Estados Alterados de Conciencia en Música Electrónica y Medios Audiovisuales
Una entrevista con el Dr. Jonathan Weinel
Imagen y Sonido | Entrevista con el Dr. Andrew Knight-Hill
Diseño de audiolibros: una entrevista con la Dra. Emma Rodero

![¿Qué es una lista vinculada, de todos modos? [Parte 1]](https://post.nghiatu.com/assets/images/m/max/724/1*Xokk6XOjWyIGCBujkJsCzQ.jpeg)



































