Audio para juegos
| Tema | Descripción |
|---|---|
En este tema, proporcionamos una lista de las características de programación de audio de XAudio2. |
|
En este tema, explicamos los conceptos clave de XAudio2, las versiones de XAudio2 y el formato de audio RIFF. |
|
En este tema se proporciona una descripción general de los conceptos comunes de audio que un desarrollador de audio debería conocer. |
|
En este tema, incluimos una descripción general de las voces de XAudio2, que se usan para submezclar, operar y procesar datos de audio. |
|
En este tema, explicamos las devoluciones de llamadas de XAudio2, que se usan para prevenir interrupciones en la reproducción de audio. |
|
En este tema se explican los gráficos de procesamiento de audio de XAudio2, que toman un conjunto de secuencias de audio del cliente como entrada, las procesan y entregan el resultado final en un dispositivo de audio. |
|
En este tema, describimos los efectos de audio de XAudio2, que toman datos de audio entrantes y realizan operaciones en esos datos (como un efecto de reverberación) antes de pasarlos. |
|
En este tema, abordamos la transmisión de audio con XAudio2. |
|
En este tema, hablamos sobre X3DAudio, una API usada en conjunto con XAudio2 para crear una ilusión de sonido desde un punto en el espacio 3D. |
|
Esta sección contiene la referencia completa para las API de XAudio2. |
Recursos "cómo" de XAudio2
| Tema | Descripción |
|---|---|
Aprende a inicializar XAudio2 para la reproducción de audio, al crear una instancia del motor XAudio2 y una voz de procesamiento. |
|
Aprende a rellenar las estructuras necesarias para reproducir datos de audio en XAudio2. |
|
Aprende a reproducir datos de audio cargados previamente en XAudio2. |
|
Aprende a establecer grupos de voces para enviar su salida a la misma voz de submezcla. |
|
Aprende a usar devoluciones de llamadas de voces de origen en XAudio2. |
|
Aprende a usar devoluciones de llamadas de motores en XAudio2. |
|
Aprende a crear un gráfico de procesamiento de audio, construido a partir de una sola voz de procesamiento y una sola voz de origen. |
|
Cómo: agregar o quitar voces de un gráfico de audio dinámicamente |
Aprende a agregar o quitar voces de submezcla de un gráfico que se ha creado siguiendo los pasos de Cómo: crear un gráfico de procesamiento de audio básico. |
Aprende a aplicar un efecto en cadena a una voz para permitir el procesamiento personalizado de los datos de audio para esa voz. |
|
Aprenda a implementar IXAPO para crear un objeto de procesamiento de audio XAudio2 (XAPO). |
|
Cómo: agregar compatibilidad con parámetros en tiempo de ejecución en un XAPO |
Aprenda a agregar compatibilidad con parámetros en tiempo de ejecución a un XAPO mediante la implementación de la interfaz IXAPOParameters. |
Aprende a usar un efecto implementado como XAPO en una cadena de efectos de XAudio2. |
|
Aprende a usar uno de los efectos incluidos en XAPOFX en una cadena de efectos de XAudio2. |
|
Aprende a transmitir datos de audio en XAudio2, creando un subproceso independiente para leer un búfer de audio, y cómo usar devoluciones de llamadas para controlar ese subproceso. |
|
Aprende a usar X3Audio para proporcionar los valores de volumen y tono de las voces de XAudio2, así como los parámetros para el efecto de reverberación integrado en XAudio2. |
|
Cómo: agrupar métodos de audio como un conjunto de operaciones |
Aprende a usar conjuntos de operaciones de XAudio2 para hacer que un grupo de llamadas a métodos tengan efecto al mismo tiempo. |
Aprende a establecer el nivel de registro de depuración para XAudio2. |
Recursos de Media Foundation
Media Foundation (MF) en una plataforma de medios para transmitir reproducciones de audio y vídeo. Puedes usar las API de Media Foundation para transmitir audio y vídeo codificados y comprimidos con una variedad de algoritmos. No está diseñado para juegos en tiempo real, pero proporciona eficaces herramientas y una amplia compatibilidad con códecs para una captura y presentación más lineales de componentes de audio y vídeo.
| Tema | Descripción |
|---|---|
Esta sección incluye información general sobre las API de Media Foundation y las herramientas disponibles que las admiten. |
|
En este tema, introducimos algunos conceptos que necesitas comprender antes de escribir una aplicación de Media Foundation. |
|
Esta sección describe el diseño general de Microsoft Media Foundation, así como los primitivos de medios y canalización de procesamiento que usa. |
|
En este tema, describimos cómo usar Microsoft Media Foundation para realizar capturas de audio y vídeo. |
|
En este tema, describimos cómo implementar la reproducción de audio y vídeo en la aplicación. |
|
En este tema, mostramos los formatos de medios que Microsoft Media Foundation admite de forma nativa. (Es posible que terceros admitan formatos adicionales si escriben complementos personalizados). |
|
En este tema, describimos cómo usar Microsoft Media Foundation para la codificación de audio y vídeo, y para crear archivos multimedia. |
|
En este tema, describimos cómo usar las características de audio y códecs de vídeo de Windows Media para producir y consumir flujos de datos comprimidos. |
|
Esta sección contiene información de referencia para las API de Media Foundation. |
|
Esta sección muestra aplicaciones de muestra del uso de Media Foundation. |
Tipos de medios XAML de Windows Runtime
Si usa la interoperabilidad DirectX-XAML,puede incorporar las API multimedia XAML de Windows Runtime en sus aplicaciones para UWP mediante DirectX con C++ para escenarios de juegos más sencillos.
| Tema | Descripción |
|---|---|
Elemento XAML que representa un objeto que contiene audio, vídeo o ambos. |
|
Aprende a incorporar audio y vídeo básicos en tu aplicación para la Plataforma universal de Windows (UWP). |
|
Aprende a reproducir archivos multimedia almacenados localmente en tu aplicación para UWP. |
|
Aprende a transmitir un archivo multimedia con latencia baja en tu aplicación para UWP. |
|
Aprende a usar el contrato de Reproducir en para transmitir multimedia de tu aplicación para UWP a otro dispositivo. |
Referencia
Temas relacionados
Aprende a desarrollar e incorporar música y sonidos en un juego DirectX, y a procesar las señales de audio para crear sonidos dinámicos y posicionales.
Para la programación de audio, se recomienda usar la biblioteca XAudio2 en DirectX o las API Windows gráficos de audio en tiempo de ejecución. Aquí usamos XAudio2. XAudio2 es una biblioteca de audio de bajo nivel que proporciona una base para el procesamiento y la mezcla de señales para juegos, y que es compatible con varios formatos.
También puedes implementar una reproducción sencilla de sonidos y música con Microsoft Media Foundation. Microsoft Media Foundation está diseñado para reproducir archivos multimedia y secuencias, tanto de audio como de vídeo, pero también se puede usar en juegos, y es particularmente útil para escenas cinematográficas o componentes no interactivos de tu juego.
Conceptos de un vistazo
Aquí presentamos unos pocos conceptos de programación de audio que usaremos en esta sección.
- Las señales son la unidad básica de programación de sonido, análogas a los píxeles en los gráficos. Los procesadores digitales de señales (DSP) que las procesan son los equivalentes de sombreadores de píxeles en el audio para juegos. Pueden transformar señales, combinarlas o filtrarlas. Al programar para los DSP, es posible alterar los efectos sonoros y la música de tu juego con el grado de complejidad que necesites.
- Las voces son composiciones submezcladas de dos o más señales. Hay 3 tipos de objetos de voz XAudio2: voces de origen, de submezcla y de procesamiento. Las voces de origen operan en datos de audio proporcionados por el cliente. Las voces de origen y de submezcla envían su resultado a una o más voces de submezcla o de procesamiento. Las voces de submezcla y de procesamiento mezclan el audio de todas las voces que les alimentan y trabajan con el resultado. Las voces de procesamiento escriben datos de audio en un dispositivo de audio.
- Mezclar es el proceso de combinar varias voces discretas, como los efectos sonoros y el audio de fondo que se reproducen en una escena, en una sola secuencia. Submezclar es el proceso de combinar varias señales discretas, como los sonidos de componente del ruido de un motor, y crear una voz.
- Formatos de audio. La música y los efectos de sonido pueden almacenarse en diferentes formatos digitales para tu juego. Existen formatos no comprimidos, como WAV, y formatos comprimidos como MP3 y OGG. Cuanto más comprimida esté una muestra (normalmente designada por su velocidad de bits; a menor velocidad de bits, más pérdidas de información tendrá la compresión), peor fidelidad tendrá. La fidelidad puede variar entre esquemas de compresión y velocidades de bits, así que experimenta con ellas para averiguar qué es lo que funciona mejor para tu juego.
- Velocidad de muestra y calidad. Los sonidos se pueden muestrear a diferentes velocidades, y los sonidos muestreados a una velocidad menor tienen una fidelidad mucho más pobre. La velocidad de muestra para una calidad de CD es de 44,1 Khz (44100 Hz). Si no necesitas alta fidelidad para un sonido, puedes elegir una menor velocidad de muestra. Las velocidades más altas pueden ser apropiadas para aplicaciones de audio profesionales, pero probablemente no las necesites a menos que tu juego requiera un sonido con fidelidad profesional.
- Emisores de sonido (u orígenes). En XAudio2, los emisores de sonido son ubicaciones que emiten un sonido, bien sea el mero pitido de un ruido de fondo o una ruidosa pista de rock reproducida en una máquina de discos del juego. Los emisores se especifican por coordenadas globales.
- Escuchas de sonido. Una escucha de sonido suele ser el jugador, o quizás una entidad de IA en un juego más avanzado, que procesa los sonidos recibidos por una escucha. Puedes submezclar ese sonido en la secuencia de audio para reproducción para el jugador, o usarlo para llevar una acción específica dentro del juego, como despertar a un guardia de IA marcado como escucha.
Consideraciones de diseño
El audio es una parte tremendamente importante del diseño y desarrollo de juegos. Muchos jugadores recuerdan un juego mediocre elevado a la categoría de leyenda debido simplemente a una banda sonora memorable, o un gran trabajo de voz y mezcla de sonido, o a una producción de audio estelar. La música y el sonido definen la personalidad de un juego y establecen el motivo principal que lo define y lo hace destacar frente a juegos similares. El esfuerzo que dediques a diseñar y desarrollar el perfil de audio de tu juego merecerá la pena.
El audio 3D posicional puede agregar un nivel de envolvimiento que va más allá del que proporcionan los gráficos en 3D. Si estás desarrollando un juego complejo que simula un mundo, o que requiere un estilo cinematográfico, piensa en la posibilidad de usar técnicas de audio posicional 3D para atraer realmente al jugador.
Guía básica para el desarrollo de audio en DirectX
Recursos generales de XAudio2
XAudio2 es la biblioteca de mezcla de audio para DirectX y su objetivo principal es desarrollar motores de audio de alto rendimiento para juegos. Para los desarrolladores de juegos que quieren agregar efectos de sonido y música de fondo a sus juegos modernos, XAudio2 ofrece un motor de mezcla de gráfico de audio con baja latencia y compatibilidad con búferes dinámicos, reproducción sincrónica fiel a la muestra y conversión implícita de velocidad de origen.