VJing y Vídeo DJ: Configuración de Resolume Arena, Codecs DXV3/HAP, Aceleración GPU y Salidas de Vídeo

Introducción al VJing y Vídeo DJing

La integración de estímulos visuales en las actuaciones de música electrónica ha evolucionado desde la mera proyección estática hacia un ecosistema complejo de interacción en tiempo real. Dentro de esta disciplina existen dos enfoques conceptuales y técnicos bien diferenciados:

1. VJing tradicional (Visual Performance): Consiste en la improvisación, mezcla y manipulación creativa de contenidos visuales (clips pre-renderizados, generadores procedimentales, cámaras en directo y efectos de vídeo) por parte de un artista visual (VJ) que interpreta la energía y estructura de la música de forma independiente pero coordinada.
2. Vídeo DJing (Audio-Visual DJing): Implica que el propio DJ sincroniza o dispara contenido de vídeo asociado directamente a cada pista musical desde su cabina, integrando la señal de audio y vídeo mediante automatizaciones, faders o software unificado.

Ambos enfoques dependen de un pilar fundamental: la capacidad del ordenador para decodificar simultáneamente múltiples flujos de vídeo en alta definición (1080p, 4K) con latencia cero y sin experimentar caídas de fotogramas (frame drops).

---

Arquitectura de Resolume Arena y Avenue

Resolume es el servidor de medios (media server) de referencia en la industria de eventos en vivo y VJing. Su arquitectura interna se organiza jerárquicamente en:

• Clips: Archivos multimedia o fuentes generativas asignados a celdas dentro de una rejilla (matrix).
• Capas (Layers): Canales de reproducción independientes que disponen de controles de volumen visual (opacidad), modos de fusión (blend modes como Add, Multiply, Screen, Luma Key) y cadenas de efectos dedicadas.
• Composición (Composition): La suma global de todas las capas mezcladas en un lienzo (canvas) con una resolución máster determinada.
• Advanced Output: El motor de enrutamiento que permite cortar la composición en secciones (slices) y enviarlas a múltiples salidas físicas (pantallas LED, proyectores, monitores de referencia o tarjetas SDI).

Para mantener una tasa constante de 60 fotogramas por segundo (FPS) con decenas de capas activas, Resolume delega el procesamiento gráfico a la GPU (Graphics Processing Unit). Sin embargo, el cuello de botella más habitual no es la potencia bruta de la tarjeta gráfica, sino la elección del códec de vídeo.

---

Códecs Intraframe Descompresos en GPU: DXV3 vs HAP vs ProRes vs H.264

Compresión Interframe vs Intraframe

Los códecs de vídeo de consumo (como H.264 o H.265 / HEVC) están diseñados para minimizar el espacio en disco mediante compresión interframe. Estos códecs almacenan un fotograma completo clave (I-frame) cada cierto intervalo y, en los fotogramas intermedios (P-frames y B-frames), solo guardan los cambios vectoriales de movimiento.

• Impacto negativo en directo: Si se intenta reproducir un clip en H.264 hacia atrás, cambiar la velocidad bróscamente o hacer scratching, la CPU debe descomprimir decenas de fotogramas anteriores para reconstruir una sola imagen. Esto colapsa el procesador y genera tirones inaceptables.

Los servidores de medios profesionales exigen códecs intraframe, donde cada fotograma se comprime como una imagen independiente. Además, para maximizar el rendimiento, se emplean códecs cuya descompresión no la realiza la CPU, sino los núcleos de cómputo de la GPU.

Tabla Comparativa de Códecs para Vídeo en Directo

Códec	Tipo de Compresión	Decodificación	Canal Alpha (Transparencia)	Caso de Uso Recomendado
DXV3 Normal	Intraframe (GPU)	GPU	Opcional	Uso estándar en Resolume (máximo rendimiento).
DXV3 High Quality	Intraframe (GPU)	GPU	Opcional	Gráficos con degradados finos (evita banding).
HAP / HAP Alpha	Intraframe (GPU)	GPU	Sí (HAP Alpha)	Estándar multiplataforma (TouchDesigner, Modul8).
HAP Q	Intraframe (GPU)	GPU	No	Máxima fidelidad de color en compresión GPU.
Apple ProRes 422/4444	Intraframe (CPU)	CPU	Sí (ProRes 4444)	Renderizado intermedio o edición en macOS.
H.264 / H.265	Interframe (GOP)	CPU / ASIC	No	PROHIBIDO para VJing fluido en directo.

El códec DXV3 (propietario de Resolume) utiliza algoritmos que permiten a la tarjeta gráfica cargar las texturas comprimidas directamente en VRAM y descomprimirlas en paralelo usando la arquitectura de sombreadores (shaders), liberando a la CPU de cualquier carga de trabajo sustancial.

---

Resolución Nativa, Escalado, Refresco y Latencia Visual

Frecuencia de Refresco y VSync

La fluidez de la transmisión visual se mide en fotogramas por segundo (FPS). En entornos profesionales de espectáculos, el estándar de refresco es de 60 Hz (60 FPS) o 59.94 Hz en entornos broadcast SDI.

• Tearing (Rasgado): Ocurre cuando la GPU envía un nuevo fotograma a la pantalla mientras esta se encuentra a mitad del ciclo de barrido horizontal. Se manifiesta como una línea horizontal de discontinuidad.
• VSync (Sincronización Vertical): Fuerza a la GPU a esperar al impulso de sincronización vertical del monitor antes de intercambiar los búferes de imagen (framebuffers). Es imprescindible activar VSync para eliminar el tearing en pantallas gigantes.

Latencia de Cadena Visual (Input Lag)

La latencia total desde que el DJ o VJ dispara un evento hasta que los fotones impactan en la pantalla se compone de:

$$\text{Latencia Total} = \text{Latencia de Entrada (MIDI/OSC)} + \text{Latencia de Renderizado GPU} + \text{Latencia del Procesador LED/Proyector}$$

Para mantener una sincronización rítmica precisa, la latencia de renderizado de la GPU en Resolume debe mantenerse por debajo de 16.6 ms (un fotograma a 60 FPS).

---

Asignación de GPU Dedicada y Configuración de Salidas de Vídeo

Gestión de GPU en Portátiles y Torres

En ordenadores con procesadores que integran gráficos gráficos secundarios (p.ej., Intel Iris Xe o AMD Radeon Graphics) junto a una GPU dedicada (NVIDIA GeForce/RTX o AMD Radeon Pro), el sistema operativo puede asignar por defecto el renderizado a la gráfica integrada para ahorrar energía.

1. Windows: Es obligatorio acceder a Configuración de Pantalla > Gráficos, seleccionar Avenue.exe o Arena.exe y forzar el modo Alto Rendimiento asignado a la GPU dedicada NVIDIA/AMD.
2. NVIDIA Control Panel: En Manage 3D Settings, establecer el procesador gráfico preferido en Nvidia High-Performance Processor y desactivar tecnologías de ahorro de energía (Power Management Mode = Prefer Maximum Performance).

Conexiones de Salida Física: HDMI, DisplayPort y SDI

• DisplayPort 1.4 / 2.1: Salida nativa en tarjetas de escritorio. Permite transmitir resoluciones 4K a 120Hz o 8K a 60Hz. Cuando se convierten a HDMI para conectar procesadores LED, deben utilizarse adaptadores activos DisplayPort a HDMI (los adaptadores pasivos limitan la resolución y la estabilidad del reloj de píxeles).
• HDMI 2.0 / 2.1: Estándar común en portátiles y consolas de vídeo. Soporta 4K 60Hz (HDMI 2.0) o 4K 120Hz (HDMI 2.1). Susceptible a desconexiones físicas si no se usan cables con bloqueo mecánico.
• 3G-SDI / 12G-SDI: Estándar profesional broadcast con conectores BNC de fijación por bayoneta. Permite tiradas de cable de hasta 100 metros sin pérdida de señal. Requiere tarjetas de salida de vídeo dedicadas como las gamas Blackmagic DeckLink (PCIe) o UltraStudio (Thunderbolt 3).

---

Gestión de EDID y Switchers de Matriz de Vídeo

En montajes de festivales y salas, conectar y desconectar pantallas puede hacer que el sistema operativo reorganice dinámicamente las pantallas conectadas, desconfigurando el mapeo de Resolume.

• EDID (Extended Display Identification Data): Información que la pantalla envía a la tarjeta gráfica notificando su resolución nativa, frecuencias de refresco admitidas y espacio de color.
• EDID Emulators / Passthrough: Dispositivos de hardware (o funciones integradas en tarjetas NVIDIA Quadro/RTX Enterprise y procesadores Novastar) que simulan la presencia constante de una pantalla conectada con un EDID fijo. Esto garantiza que aunque se desenchufe el cable HDMI principal, la GPU siga enviando la señal al puerto con la resolución y frecuencia fijadas, impidiendo que el lienzo de Resolume colapse.
• Switchers de Matriz de Vídeo: Equipos de hardware (como Blackmagic ATEM o Roland XS series) que permiten alternar ruteos entre la señal del VJ, el ordenador de reserva (backup) y las cámaras en directo con conmutación limpia sin fotogramas en negro (seamless switching).