Um guia de conteúdo completo para som e design

MF : Parabéns pelo seu novo livro, Composing Audiovisually Perspectives on audiovisual practices and related . Você poderia dar um resumo 'resumido' do que se trata, apenas como uma introdução rápida para os leitores?

LH : O livro é sobre o que significa compor no reino audiovisual - então, como abordamos a composição quando pensamos em som e imagem simultaneamente? Como desenvolvemos uma linguagem em torno desse processo? Como o ensinamos? E, crucialmente, como entendemos e discutimos nossas respostas a obras audiovisuais como membros da audiência – o que estamos realmente fazendo quando encontramos uma obra audiovisual?

MF : O que você considera como os principais espaços de apresentação e recepção de composições audiovisuais do tipo que você aborda no livro?

LH : Isso é complicado e depende muito do trabalho que está sendo discutido! Muitos são baseados em telas, então podem estar (e estão!) em qualquer lugar onde você possa acessá-los nas telas. Outros requerem performance de concerto – como Hitchcock Etudes de Nicole Lizee – ou grandes formatos de reprodução multicanal – como Open Air de Grayson Cooke – ou realização específica do local, como Pebbles de Michele Spanghero ou Cinechine de Mariska de Groot. Cada uma dessas obras, eu argumento, são composições audiovisuais — cada uma representa um processo de composição que se preocupa tanto com o que vemos quanto com o que ouvimos como sendo de igual importância perceptiva — mas o formato em que elas existem é muito diverso e muitas vezes distinto para o trabalho individual. Acho que essa é uma das coisas que estou discutindo no livro – que compor audiovisual geralmente é mais sobre processo e abordagem do que formato de reprodução.

MF : Esta próxima pergunta pode parecer um pouco pedante, mas vou perguntar de qualquer maneira porque sua intenção é principalmente prática. O arquivo acadêmico é um vasto local de dados. Quais seriam os principais termos de pesquisa que alguém poderia usar para encontrar a literatura mais relevante relacionada ao que você descreve como composição audiovisual? Mesmo para não acadêmicos, todos podem acessar o Google Scholar ou Researchgate, e saber exatamente o que procurar entre milhões de fontes pode ser um desafio para quem deseja expandir sua base de conhecimento.

LH : Costumo encorajar meus alunos a começar com a música visual, pois é um bom lugar para começar a pensar sobre as relações som/imagem em um campo de atuação equilibrado. Também é um termo/campo bastante estabelecido agora com um corpo em desenvolvimento de literatura relevante, mas ainda define apenas uma coleção de abordagens bastante específicas. Muito do trabalho audiovisual que discuto no livro vem das tradições intermedia ou fluxus, então esse é outro começo útil, ou do cinema expandido. Acho que o termo 'composição audiovisual' também está começando a ter mais aceitação, e há recursos relevantes a serem encontrados sob esse título agora.

MF : Quais são as principais ferramentas e tecnologias que você vê sendo usadas em cursos universitários que ensinam habilidades e conhecimentos de composição audiovisual? E estes são os mesmos ou diferentes para os praticantes profissionais?

LH : Isso geralmente depende do acadêmico que lidera o programa :), mas geralmente max, processing, touchdesigner (cada vez mais), adobe creative cloud, reaper, logic,ableton… Acho que há alguma sobreposição com a prática profissional, mas igualmente na minha universidade, por exemplo tentamos usar ferramentas de código aberto ou ferramentas que sejam mais acessíveis para os alunos, em vez de usar o material padrão da indústria. Freqüentemente, o fluxo de trabalho e as habilidades básicas são os mesmos/semelhantes, então você ainda está ensinando habilidades aplicáveis, mas não necessariamente nos mesmos programas.

MF: Devo admitir que muitas vezes fico desapontado com o design visual de muitos processamentos de vídeo ao vivo que podem acompanhar orquestras de laptop, apresentações de controladores MIDI etc. cultura visual ou educação por trás desses visuais que muitas vezes parecem os mesmos, porque você obtém muitos efeitos de 'variação de uma forma' onde é apenas uma forma geométrica simples ou rabisco aleatoriamente reproduzindo mudanças de valor paramétrico. Parece haver uma falta de conhecimento de arte visual em geral que seria útil para tornar esses recursos visuais mais envolventes, já que a especialização principal geralmente está no lado da programação de áudio. Que tipo de currículos vislumbramos tornariam os componentes de áudio e visual de alguns desses formatos de apresentação populares uma experiência mais completa ou holística? Ou vamos sempre enfrentar as resistências de jovens estudantes que acham que o velho material experimental é irrelevante, porque é velho e, portanto, não precisa de história da arte?

LH : Aqui me lembro de Jeff Goldblum em Jurassic Park — “Sim, mas seus cientistas estavam tão preocupados se poderiam ou não , que não pararam para pensar se deveriam”. Eu sei exatamente o tipo de desempenho abaixo do esperado que você está discutindo e, em vez de falta de conhecimento, familiaridade, experiência com artes visuais e vocabulário etc., na maioria das vezes acho que isso resulta apenas de pensar 'oh, vamos adicionar alguns recursos visuais ' em vez de pensar sobre para que servem esses recursos visuais - por queeles estão lá, o que estão fazendo no trabalho e como eles se relacionam com os materiais sonoros, principalmente se os trabalhos começaram apenas com áudio. Isso é algo sobre o qual passo muito tempo conversando com meus alunos - como a forma, a estrutura, o movimento, a cor, o timbre do som e da imagem se relacionam entre si? Qual é a relação real que você está articulando? Existem muitos sistemas de visualização que podem transformar o áudio em sistemas de partículas dançantes ou formas geométricas, mas, a menos que você tenha pensado por que um som parece de uma certa maneira e vice-versa, você está perdido. Essa é a base do que descrevo no livro como pensamento audiovisual – ver os dois como parte de um artefato criativo interconectado, não como entidades perceptivas separadas.

MF : Há muita pressão sobre as unidades de ensino superior hoje em dia para enquadrar seus cursos e programas em termos de habilidades 'relevantes para o trabalho', por exemplo, neste caso, talvez algo como 'tecnologias criativas' e assim por diante. Você achou difícil ensinar composição audiovisual em um contexto acadêmico, ou o clima é mais acolhedor, ou às vezes você precisa apresentar esse material como 'gráficos em movimento' para administradores que podem entender as habilidades de maneira mais simplificada?

LH : Na verdade, está tudo bem - a principal coisa que administro na UofG é nosso mestrado em Sound Design e práticas audiovisuais, então o componente audiovisual está logo ali no nome. Acho que tentamos ser muito claros sobre o que fazemos - e, de fato, o que não fazemos - e o que é diferenciado sobre o programa é que ele ensina habilidades relevantes para o trabalho de uma forma que incentiva a exploração criativa e a experimentação. No livro, falo um pouco sobre as expectativas que os alunos geralmente têm ao entrar no módulo de composição audiovisual, mas abordamos especificamente essas expectativas e passamos algum tempo discutindo o que a composição audiovisual realmente significa e como ela se relaciona com sua prática mais ampla. Então, tenho muita sorte nesse aspecto.

MF : Quais são seus pensamentos sobre as relações de som e imagem que podem ser informadas por fontes ou estética não-ocidentais? Acho que neste nosso mundo globalizado é essencial dar alguns passos fora do cânone ou da tradição ocidental, mas quando você fizer isso, provavelmente será um novato ou amador. Por exemplo, eu designei uma leitura para estudantes de design de som, “ Sugestão Estética no Pensamento Chinês: Uma Sinfonia de Metafísica e Estética”, como um instrutor com praticamente zero treinamento acadêmico em arte ou filosofia chinesa. No entanto, sinto que é preciso 'dar uma facada' em algum tipo de envolvimento intercultural, porque a alternativa é o não envolvimento, o que parece irresponsável quando o corpo estudantil é tão diversificado hoje (por exemplo, meus cursos em Vancouver têm uma média de 2/3 estudantes do Leste Asiático).

LE: Primeiro - parece um artigo realmente fascinante, então obrigado por me indicar. Acho que você está absolutamente certo e luto com as melhores maneiras de fazer isso, para ser honesto - no livro, tentei me envolver com artistas cuja herança não é puramente da tradição ocidental, mas isso é complicado. (caso em questão - os artistas foram escolhidos a partir de respostas ao questionário, o questionário foi inicialmente divulgado para minha rede profissional imediata e depois enviado para mais adiante, mas suspeito que a maioria dos entrevistados era ocidental). Acho que tudo o que podemos fazer é tentar - e reconhecer nossa ingenuidade e falta de contexto mais amplo. Particularmente com meus alunos internacionais, sempre os encorajo a trazer sua própria cultura e herança para o que fazem,

MF: Você acha que a pesquisa nessa área é prejudicada pela natureza texturizada dos livros e periódicos? Não posso dizer que vejo muito interesse em publicações de pesquisa que são realmente ricas em mídia, uma vez que os requisitos acadêmicos normalmente enviam um para periódicos que geralmente publicam PDFs por meio de acesso pago. Mesmo periódicos de código aberto formatam artigos como PDFs ou como HTML com conteúdo de mídia mínimo. Pode haver um link ou poucos em um artigo em que se possa clicar na seção Notas, mas sempre achei um obstáculo não poder escrever no meio de conteúdo de mídia avançada, por exemplo, vídeos incorporados do Vimeo ou links do Soundcloud ou até imagens coloridas, etc. (obviamente, isso é muito do que faço com este blog!). Deveria haver um movimento acadêmico “rico em mídia” que vise usar todas as possibilidades da web para uma abordagem menos logocêntrica da pesquisa-criação de mídia?

LH : resumindo, sim! Lutei com isso com o livro, mas como você diz, esse é o sistema com o qual trabalhamos. Catálogo de pesquisa está fazendo algumas coisas interessantes aqui, mas é complicado. Estou muito aberto a sugestões sobre isso, e é algo que discuti com os alunos (principalmente os alunos de doutorado que buscam um trabalho baseado na prática que lutam para encaixar o que fazem nos formatos impressos tradicionais). Acho que vai acontecer – e passos estão sendo dados nessa direção.

MF : Hoje, com toda a mania do NFT e plataformas de streaming de arte como a Loupe Art, houve uma espécie de revitalização da arte baseada em movimento, o que alguns curadores chamam de 'pinturas em movimento' que exibem algum tipo de movimento visual em curtas durações. Cripto-investidores e especuladores fizeram da arte digital uma mercadoria quente. Você já viu alunos interessados ​​nesses desenvolvimentos? Você já pensou em composições audiovisuais curtas baseadas em loop que podem funcionar nesses novos contextos de apresentação online de arte digital?

LH : Nossos alunos estão definitivamente interessados, sim, embora mais de uma perspectiva conceitual do que realmente se envolver com essas formas como um processo artístico. Parece um pouco tangencial ao que fazemos, para ser honesto, então não pensei muito nisso (embora sem dúvida precise nos próximos anos!). Dirijo um pequeno laboratório de pesquisa na Universidade chamado Digital Departures Lab com Tim Barker (estudioso de cinema) e Sarah Cook (curadora) e é algo que está começando a emergir como um tema de pesquisa para nós - embora, para ser honesto, também pareça tudo nesse campo está se movendo rápido demais para a academia acompanhar.

MF : Você poderia fornecer um resumo sucinto de 'atenção transperceptiva' para os leitores? Esse é um conceito central em seu livro.

LE :

A maneira como decomponho o termo no livro e minhas razões para fazê-lo são as seguintes:

'Trans' - como um prefixo, significando além, além ou através

'Perceptual' - significando a capacidade de perceber, tornar-se consciente ou interpretar através dos sentidos

'Atenção - significando o ato ou poder de pensar cuidadosamente, ouvir ou observar alguém ou algo: atenção, interesse ou consciência

O encontro com obras audiovisuais não é a mesma experiência perceptiva que ouvir uma obra sonora ou ver uma obra visual, mas sim uma experiência transperceptiva, enraizada em ambos os seus modos sensoriais individuais, mas também movendo-se através, além e/ou através dos espaços entre esses modos e os efeitos que esses modos têm uns sobre os outros. Ao usar o termo atenção para descrever essa forma de engajamento, estou tentando deliberadamente evitar termos como 'observar' ou 'escutar', tão carregados de preconceitos como experiências sensoriais, e tentando encontrar um termo que possa falar com engajamento em mais de um modo perceptivo.

Mas você pediu uma versão sucinta! Então eu acho que a atenção transperceptiva é o ato de prestar atenção a uma experiência que se move através e entre os modos perceptivos (neste caso, encontrar uma obra audiovisual), mas também prestar atenção a essa experiência, tornando-a um ato aperceptivo - considerando não apenas o experiência em si, mas as coisas que trazemos para essa experiência que influenciam em como a encontramos.

MF : Grande parte da sua discussão sobre composição se concentra no que costuma ser chamado de elementos 'formais' (por exemplo, linha, forma, cor, etc.) nas artes visuais. Esses elementos, no nível de composições inteiras, também são chamados de 'não-objetivos' em relação ao seu oposto, 'representação', e a categoria intermediária 'abstrato' (assunto reconhecível, mas altamente formalizado). Você poderia resumir suas ideias sobre sons e visuais representacionais (ou miméticos, ou mesmo semióticos) em relação à composição audiovisual?

LH : Acho que para mim, pelo menos na minha prática, isso mudou com o tempo. Quando comecei a fazer obras audiovisuais, evitei deliberadamente qualquer coisa abertamente representacional - lembro-me de fazer uma versão 3D de uma peça construída em torno de círculos simples, e uma vez que era 3D comecei a vê-los como bolhas, ou berlindes, ou mesmo bagas, e isso mudou completamente a forma como eu entendia a relação audiovisual. Com o tempo, porém, acho que me afastei um pouco disso e me preocupei menos com a forma como os aspectos representacionais/abstratos/miméticos dos materiais de áudio ou visuais são e mais preocupado com as maneiras pelas quais eles constroem significado em sua combinação - que eu acho que é o que a atenção transperceptiva é, pois está preocupada com a criação de significado individual, não por meio de materiais, mas por meio da interpretação.

MF : Você tem alguma obra audiovisual online que eu possa incorporar abaixo, para dar aos leitores um acesso mais direto às suas obras?

LE :

Artigos relacionados

Som para imagens em movimento: as quatro áreas de som | uma entrevista com Neil Hillman

Entrevista com o fundador do Sinevibes, Artemiy Pavlov

Entrevista com Graham Yeadon da GVST Plugins

Entrevista com Melda Produção

Entrevista com Steve Duda da Xfer Records

Estados alterados de consciência na música eletrônica e na mídia audiovisual

Uma entrevista com o Dr. Jonathan Weinel

Som & Imagem | Entrevista com o Dr. Andrew Knight-Hill

Design de audiolivro: uma entrevista com a Dra. Emma Rodero