Musique spatiale et réalité augmentée

Un guide de contenu complet pour le son et le design
Les développements technologiques ont longtemps influencé les façons dont la musique est composée et distribuée, la disponibilité de nouveaux instruments et les moyens dont nous disposons pour les enregistrer. Il est donc fascinant que - même avec l'avènement des stations de travail audio numériques et des instruments numériques - les changements sismiques que la plupart des gens ont connus au cours des deux dernières décennies consistent à remodeler la façon dont la musique est distribuée, mais pas à modifier notre perception de ce que la musique peut être. . La majeure partie de notre musique enregistrée reste à peu près la même qu'il y a 50 ans, vécue sous forme de compositions linéaires, stéréo et de durée fixe pouvant être lues dans des écouteurs ou des haut-parleurs traditionnels. La plus récente tentative pour changer cela peut se situer dans l'espace qui nous entoure.

En 2014, j'ai eu la chance de passer une semaine à expérimenter le système 4DSOUND à Amsterdam - une série de piliers géants connectés d'enceintes qui utilisaient une science avancée pour faire apparaître différents sons comme s'ils provenaient de n'importe où dans la pièce. La possibilité de placer et de déplacer des sons dans un espace comme celui-ci peut ouvrir des pratiques de composition entièrement nouvelles - mais était malheureusement limitée à ceux qui avaient accès au système coûteux. Une myriade d'efforts pour utiliser le GPS pour composer de la musique spatiale étaient à peu près simultanés, permettant aux auditeurs d'utiliser uniquement leurs smartphones et leurs écouteurs pour parcourir des parties du monde pour lesquelles les musiciens avaient écrit de la musique spécifiquement. Les efforts de groupes comme BLUEBRAIN et Matmos, par exemple, permettait aux utilisateurs de télécharger leurs applications, d'accéder à des endroits spécifiques dans le monde (comme Central Park à New York) et de découvrir de la musique en "mélangeant" les différents sons en fonction de leur emplacement.
Ces efforts, bien qu'enthousiasmants, étaient limités dans leur accessibilité à la fois pour les autres compositeurs, qui avaient des moyens limités pour composer comme celui-ci, et pour le public, qui devait se rendre dans des endroits spécifiques pour entendre les œuvres.
En 2016, mon collaborateur et moi avons lancé une équipe de développement/création, TCW, qui propose des guides open source permettant aux musiciens d'utiliser une technologie GPS similaire pour créer leurs propres applications, mais plus important encore, nous avons commencé à explorer comment les emplacements spatiaux des utilisateurs et des sons peuvent fondamentalement modifier le processus de composition. Par exemple, trois notes soutenues qui composent un accord peuvent être arrangées dans un placement de style diagramme de Venn. Lorsqu'un auditeur marche, il peut entendre une seule note, deux des notes ou les trois notes de l'accord selon l'endroit où il se tient. Imaginez ce type de chevauchement se répandre pour créer tous les types de chemins dissonants et mélodiques alors qu'un auditeur se déplace dans différentes directions dans un espace. De plus, imaginez que la vitesse de l'auditeur ou même son orientation puisse commencer à contrôler des choses comme les niveaux de distorsion et les niveaux de réverbération, déclencher de nouveaux sons, et plus encore. L'auditeur n'aura peut-être pas besoin de bouger pour entendre de la musique, mais cela changera radicalement s'il le fait.
DÉMONSTRATION VIDÉO : placement du diagramme de Venn
Ce type d'approche de composition spatiale rompt avec de nombreuses racines des pratiques de composition du XXe siècle. La composition commence souvent non pas par des paroles ou une ligne de basse disposées temporellement, mais par une carte et un dessin, avec différentes ambiances ou sentiments attribués à différentes parties d'un espace. En tant que compositeurs, nous commençons de tout cœur à adopter la mentalité de « jardinage » adoptée par le pionnier de la musique ambiante Brian Eno, qui a déclaré :
« Mon sujet est le passage d'« architecte » à « jardinier », où « architecte » signifie « quelqu'un qui porte une image complète de l'œuvre avant qu'elle ne soit réalisée », à « jardinier » qui signifie « quelqu'un qui plante des graines et attend pour voir exactement ce qui va arriver ». Je soutiendrai que les compositeurs d'aujourd'hui sont plus souvent des « jardiniers » que des « architectes » et, en outre, que la métaphore du « compositeur en tant qu'architecte » était une anomalie historique transitoire. » -Brian Eno, Edge.org numéro 11.10.11
Nous nous trouvons maintenant au bord du précipice de cette technologie étant disponible pour tout le monde. En 2017, notre groupe a utilisé une toute nouvelle technologie de réalité augmentée pour établir des paysages sonores similaires n'importe où. Les auditeurs peuvent télécharger une application, comme le premier album de réalité augmentée Year One, et se retrouvent instantanément au milieu d'une composition spatiale en évolution, les capteurs et les caméras de leurs smartphones suivant leur mouvement dans l'espace qui les entoure. Ce modèle "app as music" permet non seulement de nouvelles façons de composer et d'expérimenter la musique, mais modifie la nomenclature autour de ce qu'est la "musique" - offrant une expérience qui ne peut pas être contrôlée dans Spotify ou Pandora, et restituant ainsi au musicien le contrôle de la tarification, de la distribution et de la conservation de l'expérience qui a longtemps échappé aux musiciens.
Bien qu'enthousiasmant, ce type d'expérience romanesque est actuellement souvent déroutant pour les premiers auditeurs. En grande partie, ils ne sont peut-être pas prêts à consommer de la musique via des applications dédiées et ne comprennent peut-être pas tout à fait comment interagir avec la musique. L'industrie de la musique peut alors être confrontée à un défi d'adoption et d'acceptation. Pour tirer des leçons de défis similaires, nous pouvons nous tourner vers un domaine qui travaille sur l'adoption de la RA depuis des années : le journalisme. Graham Roberts, l'ancien directeur de la narration immersive au New York Times (NYT), parle souvent de l'approche du NYT pour favoriser l'adoption de la réalité augmentée. De nombreux lecteurs n'étaient pas prêts à plonger dans la technologie AR pour eux-mêmes, mais lorsque AR a été utilisé de manière sélective dans le cadre du type d'expérience que les lecteurs connaissaient déjà (l'application New York Times), ils se sont engagés de manière sélective avec le contenu AR quand il était le plus bénéfique, apprenant lentement ses règles comme ils l'ont choisi. La composition musicale peut également suivre cette voie, les musiciens donnant des performances enregistrées ou en direct similaires au passé tout en encourageant l'engagement avec un contenu spatial ou génératif supplémentaire lorsqu'il ajoute à l'expérience musicale. Pour ce faire, il est essentiel que les musiciens pensent au-delà des moyens traditionnels de distribution de la musique et se tournent vers la création de leurs propres écosystèmes musicaux grâce à des programmes, des applications et des appareils qui permettent ce genre de possibilités. Ce n'est qu'en renversant la tendance à la distribution de musique par le biais de services traditionnels - et en élargissant collectivement notre compréhension traditionnelle de la «musique» et des albums - que nous pourrons favoriser ce type de culture créative. La composition musicale peut également suivre cette voie, les musiciens donnant des performances enregistrées ou en direct similaires au passé tout en encourageant l'engagement avec un contenu spatial ou génératif supplémentaire lorsqu'il ajoute à l'expérience musicale. Pour ce faire, il est essentiel que les musiciens pensent au-delà des moyens traditionnels de distribution de la musique et se tournent vers la création de leurs propres écosystèmes musicaux grâce à des programmes, des applications et des appareils qui permettent ce genre de possibilités. Ce n'est qu'en renversant la tendance à la distribution de musique par le biais de services traditionnels - et en élargissant collectivement notre compréhension traditionnelle de la «musique» et des albums - que nous pourrons favoriser ce type de culture créative. La composition musicale peut également suivre cette voie, les musiciens donnant des performances enregistrées ou en direct similaires au passé tout en encourageant l'engagement avec un contenu spatial ou génératif supplémentaire lorsqu'il ajoute à l'expérience musicale. Pour ce faire, il est essentiel que les musiciens pensent au-delà des moyens traditionnels de distribution de la musique et se tournent vers la création de leurs propres écosystèmes musicaux grâce à des programmes, des applications et des appareils qui permettent ce genre de possibilités. Ce n'est qu'en renversant la tendance à la distribution de musique par le biais de services traditionnels - et en élargissant collectivement notre compréhension traditionnelle de la «musique» et des albums - que nous pourrons favoriser ce type de culture créative. il est essentiel que les musiciens pensent au-delà des moyens traditionnels de distribution de la musique et se tournent vers la création de leurs propres écosystèmes musicaux grâce à des programmes, des applications et des appareils qui permettent ce genre de possibilités. Ce n'est qu'en renversant la tendance à la distribution de musique par le biais de services traditionnels - et en élargissant collectivement notre compréhension traditionnelle de la «musique» et des albums - que nous pourrons favoriser ce type de culture créative. il est essentiel que les musiciens pensent au-delà des moyens traditionnels de distribution de la musique et se tournent vers la création de leurs propres écosystèmes musicaux grâce à des programmes, des applications et des appareils qui permettent ce genre de possibilités. Ce n'est qu'en renversant la tendance à la distribution de musique par le biais de services traditionnels - et en élargissant collectivement notre compréhension traditionnelle de la «musique» et des albums - que nous pourrons favoriser ce type de culture créative.
NEW YORK TIMES RÉALITÉ AUGMENTÉE
Les lecteurs intéressés par l'expérience des applications de musique spatiale peuvent visiter le site Web de TCW pour en savoir plus sur Year One , le premier album de réalité augmentée ; Spatial Orchestra , une expérience orchestrale en réalité augmentée ; ou nos compositions GPS. Les musiciens y trouveront également des guides pratiques pour créer des applications audio spatiales d'applications AR et GPS. Vous pouvez en savoir plus sur : www.tcwav.com