El arte del sonido en juegos de rol

Krzysztof Lipka, diseñador de sonido sénior en CD PROJEKT RED, uno de los estudios de desarrollo de juegos AAA más grandes de Polonia, habla sobre el enfoque único del sonido de su equipo y nos ofrece información sobre su trabajo en The Witcher 3: Wild Hunt, uno de los más aclamados títulos de juegos de rol de acción en la historia de la industria.

Cuéntanos un poco sobre ti y tu trabajo como diseñador de sonido en la industria de los juegos.

Actualmente, soy diseñador de sonido sénior en CD PROJEKT RED, uno de los estudios de desarrollo de juegos AAA más grandes de Polonia. Junto con un equipo de diseñadores de sonido internos super talentosos, soy responsable de proporcionar todo el contenido de audio para satisfacer nuestras necesidades actuales. También soy responsable de su implementación técnica. Además, me encargo de desarrollar y modernizar nuestras instalaciones de sonido internas.

Comencé a trabajar profesionalmente con audio hace casi 15 años, en un pequeño estudio, grabando principalmente bandas de indie rock. Hace alrededor de 7 años me mudé a la industria de los juegos cuando me uní a CD PROJEKT RED. Desde entonces, tuve el placer de trabajar en casi todos los títulos de esta compañía, incluidos The Witcher 2: Assassins of Kings (PC y X360), The Witcher 3: Wild Hunt (incluidas ambas expansiones: Hearts of Stone y Blood and Wine) , GWENT: The Witcher Card Game y, en adelante, Cyberpunk 2077.

Fuera de CD PROJEKT RED, de 2012 a 2014, fui Audio Lead en la división Varsovia de Techland, donde trabajé en proyectos como Dead Island: Riptide, Hellraid y Dying Light (diseño de sonido adicional).

Mientras tanto, también produje audio para producciones de estudios de 11 bits como This War of Mine y Anomaly Defenders (diseño de sonido adicional).

Fue fascinante ver el proceso de desarrollo desde adentro, ser golpeado por desafío tras desafío. Tener un trabajo que combinaba mi hobby y mi pasión era un sueño hecho realidad.

¿Cuándo supiste que te apasionaba el sonido? ¿Hubo un momento en que te diste cuenta de que tenías un interés particular en el audio del juego?

Creo que mi amor por los juegos de computadora vino primero, cuando era solo un niño. Todo comenzó cuando mis padres me compraron un Commodore 64. Recuerdo haber jugado un montón de juegos con mis amigos y ¡esto fue lo mejor!

Un poco más tarde, en algún lugar a mitad de la escuela secundaria, me fascinó la música de guitarra que me presentó uno de mis amigos. No puedo recordar exactamente la banda o el álbum; Solo recuerdo que hubo una temporada allí cuando comencé rápidamente a devorar grandes cantidades de música grunge y rock clásico. Simplemente estaba hipnotizado por artistas como Pearl Jam, Soundgarden, King Crimson y Jimmy Hendrix, por nombrar algunos. Una cosa llevó a la otra y mis padres me compraron mi primera guitarra eléctrica. Curiosamente, me dieron una opción: la guitarra eléctrica o las lecciones de manejo. No creo que haya enfrentado una decisión más fácil. Tengo la sensación de que de alguna manera ese momento me llevó a donde estoy ahora.

Así que comencé a pasar una gran cantidad de tiempo tratando de dominar la guitarra eléctrica. Después de un tiempo, toda esa pasión se intensificó … a un gran interés en grabar y mezclar música. Me uní a una banda y conocí a muchos músicos interesantes. Uno de ellos era dueño de un pequeño estudio local. Para resumir, me dio mi primer concierto real de estudio. Un poco más tarde, cuando completé mi licenciatura en Derecho, nuestra banda (de la que aún era miembro) tuvo un duro momento y sufrió una sacudida. Llámalo casualidad, ¡pero la nueva alineación en realidad incluía un gran bajista que estaba trabajando en CD PROJEKT RED en ese momento! Un poco más tarde, me hizo saber que había una oportunidad para un diseñador de sonido. Así que solicité, hice mi mejor esfuerzo en las pruebas de audio, tuve mi entrevista y conseguí el trabajo.

Entonces, para responder a su segunda pregunta, la verdad sea dicha, desarrollé un interés real en el audio del juego tan pronto como comencé a trabajar en CD PROJEKT RED. Fue fascinante ver el proceso de desarrollo desde adentro, ser golpeado por desafío tras desafío. Tener un trabajo que combinaba mi hobby y mi pasión era un sueño hecho realidad.

Mirando hacia atrás ahora, ese parece ser el cliché más grande de la historia. Con suerte, alguien algún día lo hará peor; si no, ¡estoy condenado!

¿Qué hay en tu bolsa de grabación? ¿Alguna pieza de equipo favorita?

Grabadoras: Dispositivos de sonido 702T; Fostex FR-2LE o dispositivos de sonido 788T
Micrófonos: par estéreo Sennheiser MKH 8040; Sennheiser MKH 416; Accesorios estéreo AKG 414XLS
Accesorios: Rycote WS AE ORTF Kit (MZL), Rycote Duck AE, 4x Rycote Baby Ball Gag (para configuración IRT cross surround), trípode Slik Pro DX340

Para tareas regulares de estudio utilizo:

Interfaz / Monitores: RME UFX, Adam A7x o A5x junto con preamplificadores Adam Sub8
: 2x Neve 1073N, Helios Type 69 1R, 2x Api512C, 2x AEA RPQ500, 2x
micrófonos Shadow Hills Mono Gama : par estéreo Sennheiser MKH 8040, 2x Royer 121, Par estéreo AKG 414XLS, par estéreo Oktava MK-012, 2x Shure SM57, Sennheiser MD 421, Sennheiser MKH 416,
fueraborda Audix D6 : Manley Massive Passive, Manley Vari-Mu Mastering, Kush Clariphonic, 2x Empirical Labs EL8-X Distressor
Accesorios: Rycote Mini Wind Screen Special 105 (para R121s), 2x Rycote INV-6 (para mi par Sennheiser MKH 8040), 4x Rycote INV-7 HG MKIII, Triad Orbit IO-Vector

Mi plataforma favorita para grabaciones de campo es un par estéreo de Sennheiser MKH 8040 con una grabadora Sound Devices 702T. Ocasionalmente, alquilamos un Sound Devices 788T si necesitamos más canales. Principalmente uso los parabrisas Rycote y los amortiguadores, ya que funcionan mejor para mí. También me gusta mucho usar el AKG 414XLS cuando el clima lo permite. La desventaja es que no absorben bien la humedad y no hay protección contra el viento dedicada, por lo que debe tener mucho cuidado con ellos.

Sin embargo, si soy honesto, me entusiasman francamente los accesorios excelentes, como soportes de micrófono livianos pero duraderos, montajes de choque, barras estéreo, etc. Recientemente compré la barra estéreo IO-Vector de Triad-Orbit y es simplemente un cambio de juego. Finalmente, puedo tener un ‘árbol’ de diferentes micrófonos en un solo soporte que es fácil de transportar.

Ya no me veo obligado a elegir un solo equipo, ya sea una configuración MS u ORTF, para ser práctico. En el pasado, la simple idea de tener que desmontar los parabrisas de las bases de micrófonos o incluso los micrófonos en los parabrisas me dieron ganas de gritar. Ahora, el mecanismo de bloqueo rápido me permite cambiar parabrisas enteros, con micrófonos, casi en ningún momento. Me encanta tener la opción de usar múltiples micrófonos, solo por sus diferentes texturas, respuesta fuera del eje o por un posicionamiento ligeramente diferente.

¡La mejor parte es que con brazos de brazo adicionales puede tener un soporte envolvente súper duradero que no agota su billetera! Realmente son esos pequeños y discretos equipos los que hacen que todo el proceso de grabación sea mucho más agradable y creativo.

¿Hay algún desafío en particular específico para el audio del juego del que te gustaría hablar? Quizás diferentes enfoques del sonido: ¿cómo se captura, procesa y manipula?

¡El audio en el juego, especialmente para juegos de rol AAA de mundo abierto a gran escala, presenta muchos desafíos! De hecho, abarca tantas peculiaridades interesantes que es difícil señalar una cosa en particular. E incluso si lo hiciera, discutir algo brevemente implicaría una simplificación excesiva o ni siquiera arañaría la superficie. Pero hay algunos problemas que vale la pena mencionar brevemente.

Contar una historia profunda y madura, y apoyarlo con el tipo correcto de diseño de audio y sonido, ha sido el mayor desafío que he enfrentado hasta ahora: especialmente con juegos que apuntan alto con su narrativa. ¡Es un verdadero desafío y todavía necesita mucha I + D! Esto se debe a que el audio del juego no se detiene en el punto donde los sonidos encajan bien con las escenas o el contexto. El audio tiene que ser más como una extensión del mundo virtual que se está creando, para no sacar a los jugadores del juego en ningún momento. Además, los fragmentos narrativos y de juego tienen que combinarse sin problemas. El audio es el mortero que los une.

Dado ese contexto, es realmente difícil diseñar un audio que cumpla ambos propósitos, un audio que sea tanto interactivo como suficientemente ‘narrativo’. Paradójicamente, el aspecto interactivo de los juegos a menudo nos impide aplicar los tratamientos de audio más eficientes y pulidos, es decir, todos esos contrapuntos, contrastes u otros métodos de narración de audio comunes.

Para ilustrar, imagine una escena no interactiva como una escena cortada o un video pre-renderizado, en el que vemos al protagonista caminando en cámara lenta. En la pantalla lo vemos de cintura para abajo, luego acercamos sus botas. Las cámaras y la línea de tiempo son fijas: es una toma simple y enfocada. Naturalmente, esto requiere algo extraordinario en el audio, porque los pasos normales y el sonido ambiental no sonarían muy convincentes, ¿verdad? La mayoría de los diseñadores de sonido probablemente usarían una gran cantidad de reverberación, sonidos agudos, etc. En algunos sentidos, eso no es tan difícil de ejecutar en un juego, artística y técnicamente.

Ahora imagine que la misma escena «se ve» y se siente exactamente igual, pero es completamente interactiva. El jugador controla los movimientos del protagonista: ¡incluso puede correr en cualquier dirección, incluso sobre diferentes superficies! No hay una línea de tiempo fija, y la cámara está enfocada, hasta cierto punto, en la cintura del protagonista. Lo suficientemente desafiante? Ah, por cierto: no puedes usar la música para ocultar cosas. Solo se permite el diseño de sonido, y a menudo eso implica ‘gimnasia creativa’. Por último, imagina esa misma escena, completamente interactiva … y en realidad virtual. Esperemos que sea suficiente para mostrar que el audio del juego es algo especial, una forma de arte en sí misma.

Mezclar audio del juego también es un poco más desafiante que mezclar audio para otros medios. Puede ser extremadamente complicado para juegos de rol de mundo abierto a gran escala o juegos de acción multijugador como shooters. Nuevamente, la complicación es simplemente un subproducto de la interactividad y la no linealidad de tales títulos.

Se necesita una gran cantidad de tiempo y un análisis cuidadoso de todos los contextos posibles, por no mencionar una gran cantidad de otras limitaciones técnicas, para hacer la mezcla para un juego de este tipo correctamente. Prever qué sonidos se reproducirán en contrapunto con otros sonidos es muy impredecible. Por lo tanto, mezclar juegos a menudo requiere un enfoque más lógico. Lo peculiar es que la gestión del volumen se realiza principalmente a través del enrutamiento de bus adecuado y, además, a través de la configuración de prioridad de parámetros en tiempo real o grupos de sonido (a veces sistemas HDR o encadenamiento avanzado). Lo que complica aún más las cosas es que los buses podrían usarse para configuraciones de lógica de comportamiento compartido, o la optimización de la asignación de recursos, por lo que las oportunidades para aplicar cambios podrían ser limitadas.

No hace falta decir que se necesita mucha prueba y error. La mayoría de las veces, trabajar en el audio del juego es más como resolver un gran rompecabezas lógico. Aunque eso puede parecer la pesadilla de un tipo sano a primera vista, en realidad es la mejor parte de esto a veces. A la larga, le enseña a usar todas las herramientas de mezcla disponibles de manera eficiente y creativa. ¡Y nunca se vuelve aburrido!

Nuestro enfoque para grabar audio no difiere mucho de, digamos, lo que se usa en la industria del cine, aunque en cada proyecto las cosas pueden diferir significativamente. En un nivel muy básico, estas diferencias están determinadas por los aspectos técnicos de la implementación de sonido: es decir, qué tipo de ‘granularidad’ de fuente se necesita. El audio del juego a menudo requiere la creación de un conjunto de sonido completo para entidades u objetos que tienen subentidades (los granos más pequeños a menudo controlados por parámetros separados: por ejemplo, automóvil> motor; automóvil> escape; automóvil> neumáticos). El proceso de grabación debe tener esto en cuenta.

Si el proyecto es una producción AAA, la atención al detalle será mayor. En estos casos, es realmente beneficioso:

  • Registre más fuentes ‘directas’ o separadas en lugar de ‘paquetes’ (el ejemplo del automóvil mencionado anteriormente ilustra esto bien)
  • Grabar muchas más variaciones
  • Grabe tanto en mono como en estéreo, o con configuraciones compatibles con mono (LCR / MS), la razón aquí es que la mayoría de los motores de juegos mezclan los sonidos a mono si van a ser panoramizados en 3D. Además, el reproductor puede tener la opción de cambiar la posición de la cámara, por lo que el sonido también debe ser panorámico
  • Grabe más sonidos ‘secos’, ya que todas las reverberaciones se manejan en tiempo real. Dado que un elemento de sonido normalmente se reproducirá en diferentes entornos, la reverb de fuente complica esto significativamente

Lo interesante es que el audio del juego puede impulsar nuevos desarrollos en la grabación envolvente, si, es decir, la popularidad de la tecnología VR crece en el futuro.

he Witcher 3: Wild Hunt fue el Juego del año 2015. Es uno de los títulos más aclamados por la crítica en la historia de la industria, y recibió varios premios por su sonido. ¿Hubo desafíos de audio específicos para este proyecto con los que tu equipo tuvo que lidiar?

Sabíamos desde el principio que The Witcher 3: Wild Hunt tenía que ser una experiencia muy especial y muy inmersiva para los jugadores. Tenía que ser algo que no habían experimentado previamente con otros juegos, ¡así que establecimos un nivel muy alto desde el principio!

Nuestro enfoque fue único en dos aspectos: la dirección artística peculiar y arenosa que adoptamos, y la gran escala de atención al detalle que queríamos lograr en cada aspecto del paisaje sonoro. El carácter eslavo del juego, el énfasis en la narración de historias, una gran cantidad de contenido de sonido muy detallado, orgánico y creíble: esos fueron nuestros valores centrales, nuestro credo, para The Witcher 3: Wild Hunt.

El sonido ambiental presentó el mayor desafío. Una de las características principales en las que nos centramos al principio del proceso fue el sistema climático dinámico. Cuando creamos las primeras iteraciones de The Witcher 3, rápidamente se hizo evidente que los ambientes estáticos, sin movimientos o cambios climáticos, simplemente no eran lo suficientemente buenos.

Entonces, ponemos una gran cantidad de recursos en la creación de sistemas complejos, o más bien, matrices complejas de parámetros en tiempo real que imitarían el comportamiento de la naturaleza. Curiosamente, adoptamos un enfoque diferente al utilizado para la mayoría de los juegos en el mercado en ese entonces. En lugar de producir archivos WAV estáticos, quemados, con ruido de fondo fijo para interiores y exteriores, creamos capas ambientales globales. Lo más crucial fue la capa de viento. Estuvo presente, reproduciendo, en todo momento y ocluido por cambios de ubicación, generando así un ruido de fondo continuo y creíble en interiores y exteriores.

Luego aplicamos los mismos principios a las capas de lluvia y truenos, y finalmente mezclamos los ruidos de fondo estáticos solo para mejorar un poco el ambiente. Paweł Daudzward, nuestro diseñador de sonido sénior que supervisa la creación de ambientes y su implementación técnica, no se detuvo allí. Al principio, comenzó a salir al aire libre para grabar sonidos naturales en vivo en toda Polonia, tratando de capturar tantas fuentes de sonido individuales como fuera posible. También hizo todo lo posible para estudiar el comportamiento de la vida real de la fauna y la flora en nuestra parte del mundo: los tipos de animales que viven en Europa Central y Oriental, sus hábitos y hábitats, todo el ecosistema. Trabajó muy duro para crear un sistema donde esas capas climáticas centrales influirían en el comportamiento animal y humano.

A través de ese control en tiempo real de los entornos, logramos cambios dinámicos sin precedentes y le otorgamos al mundo un fuerte sentido de continuidad. Solo un par de ejemplos: cuando ingresa a un interior, obtiene un sangrado constante del ambiente exterior real (no solo otra muestra estática activada); cuando llueve o durante una tormenta eléctrica, todos los animales se callan; y cuando el jugador se acerca a algunos pájaros, también se quedan callados.

Hay desventajas en este enfoque también. Era prácticamente imposible saber cómo sería el clima durante los momentos cruciales de la historia, momentos llenos de sonidos importantes que a veces incluso impulsaron la narrativa. Entonces la mezcla se volvió un poco impredecible. Mantener y depurar el sistema siempre que fuera necesario un ‘arreglo rápido’ también era bastante complicado.

Una cosa llevó a la otra, y logramos mejorar el sistema de ambiente para que sea fácil de anular. ¡Esta característica solo nos tomó casi 2 años para configurarla correctamente! A pesar del tiempo que tomó, valió la pena la molestia.

¿Cómo lidiar con las malas condiciones climáticas al grabar efectos de sonido?

Hasta ahora, todavía tengo que trabajar en condiciones climáticas extremas y muy duras. En realidad, la grabación de sonidos para juegos rara vez requiere o incluso lo permite: las limitaciones de tiempo son demasiado grandes.

No obstante, he encontrado condiciones climáticas difíciles de vez en cuando. En mi experiencia, manejarlos básicamente se reduce a la selección adecuada del micrófono: no se pueden elegir micrófonos que sean susceptibles a la humedad y las temperaturas extremas, y se debe tener una excelente protección del parabrisas. También es vital mantener adecuadamente los soportes de micrófonos, trípodes y agarres de cables, y reemplazar aquellos que producen cualquier tipo de ruido de traqueteo o manipulación. Por supuesto, también ayuda usar el entorno natural para su ventaja. En todo tipo de terreno, la cubierta le permite reposicionar su equipo para que no quede expuesto al clima. Además de eso, siempre llevo una herramienta multiuso y bolsas de cordura Sea to Summit, en caso de que necesite desmontar el equipo muy rápido para protegerlo del clima severo.

Con el tiempo tuve la oportunidad de probar un par de plataformas diferentes. Para mí, ¡un par estéreo de Sennheiser MKH 8040s con un kit de parabrisas Rycote WS AE ORTF (MZL) funciona mejor! Además, si intento capturar sonidos de lluvia, generalmente llevo mi Rycote Duck Raincover AE conmigo, es indispensable. Hasta ahora, esta plataforma funcionó maravillosamente durante múltiples caminatas muy ventosas y lluviosas en las montañas Tatra, así como en sesiones de ambiente urbano húmedo y caluroso en Tokio, Shanghai o Guangzhou. También funcionó muy bien durante un par de sesiones de invierno de Foley. Lo recomendaría en cualquier momento a cualquiera que esté buscando una manera eficiente, liviana y ultra confiable de lidiar con las malas condiciones climáticas.

¿Qué crees que depara el futuro para el audio del juego?

El futuro del audio del juego se ve brillante y brillante, dado que la tecnología parece programada para continuar su rápido desarrollo.

En primer lugar, hay un gran impulso para mejorar las herramientas de gestión de dinámica existentes. En los últimos años, estas herramientas han recibido mucho énfasis: HDR, cadena lateral, enrutamiento / envío avanzado de señales o procesadores dinámicos DSP en tiempo real. Creo que todavía están en aumento, aún en desarrollo, y el siguiente paso natural consistirá en la introducción de un procesamiento avanzado de control de dinámica basado en programas (de acuerdo con los estándares ITU o EBU). También espero más opciones de procesador de señal paralela.

En segundo lugar, el soporte adecuado de la superficie de control seguramente ocurrirá en el futuro cercano.
La mezcla de juegos en tiempo de ejecución aún no se ha optimizado. Hasta ahora solo hemos visto una implementación poco entusiasta de MCU o HUI. EUCON aún está por venir. Además, no me sorprendería ver un soporte mejorado entre los DAW más comunes y el middleware de audio del juego. Definitivamente hay margen de mejora allí.

En tercer lugar, esperaría que las reverberaciones híbridas avanzadas sean el próximo hito importante para la industria. Ya podemos usar reverberaciones de convolución o DSP de reverberación algorítmica de alta calidad. Aún está por venir una opción por la cual estos serían modificados por la geometría del juego y los parámetros de profundidad en tiempo real. Diseñar una propagación de sonido adecuada utilizando la reverb es algo que realmente estoy deseando.

En cuarto lugar, las plataformas de próxima generación mejorarán aún más los presupuestos de memoria y audio de la CPU. Este ha visto una evolución constante en el tiempo. Hoy en día no es raro ver presupuestos de 250 MB o más solo para sonido (en 2010, normalmente se espera que alcance la marca de 30 MB). Podremos usar activos de mejor calidad, reducir las relaciones de compresión de formato y simplemente empacar juegos con cantidades ridículas de gran contenido.

Por último, un buen camino en el futuro me gustaría ver a la industria expandirse en áreas o aventurarse en direcciones que antes se consideraban técnicamente imposibles, es decir, controlar la física del juego con sonido, adaptar la mezcla al estilo de juego de un jugador determinado, etc.

Como puede ver, ¡hay muchas cosas buenas por venir!

Muchas gracias por su tiempo Krzysztof, fue un placer hablar con usted.

Deja una respuesta