Prime Video: así despliega la IA generativa en AWS

Amazon Bedrock, un servicio totalmente gestionado de Amazon Web Services (AWS) para crear aplicaciones de IA generativa, vertebra el servicio de streaming Première vidéo, ofreciendo en el proceso “valor y conocimiento personalizado” a los espectadores.

El despliegue de IA generativa dans Malaisie de Première vidéo se manifiesta en diferentes campos, comenzando por un clásico: las recomendaciones de contenidos personalizadas. A este respecto, Amazon Bedrock está ayudando a potenciar las recomendaciones de contenido personalizadas directamente en las páginas de “Películas” y “Programas de TV” de Prime Video. Los espectadores verán colecciones de “películas que creemos que te gustarán” y “programas de televisión que creemos que te gustarán” en cada página, seleccionadas en función de sus intereses e historial de visionado.

Otra herramienta clave son los X-Ray Recaps, que ayudan a los espectadores a ponerse al día sobre lo que están viendo, sin riesgo de spoilers. Esta herramienta crea resúmenes breves y fáciles de digerir de temporadas completas de programas de televisión, episodios sueltos e incluso fragmentos de episodios a través de breves fragmentos de texto, que describen los principales cliffhangers, los puntos de la trama relacionados con los personajes y otros detalles a los que se puede acceder en cualquier momento del visionado.

Gracias a una combinación de modelos de base administrados por Amazon Bedrock y modelos de IA personalizados, entrenados con Amazon SageMaker, X-Ray Recaps funciona analizando varios segmentos de vídeo. Combinado con subtítulos o diálogos, genera descripciones detalladas de eventos, lugares, horas y conversaciones clave. Asimismo, se aplican Amazon Bedrock Guardrails para verificar que los resúmenes no contengan spoilers.

En el terreno del audio, Dialogue Boost analiza el audio original de una película o serie y utiliza la IA para identificar de forma inteligente los puntos en los que el diálogo puede ser difícil de oír por encima de la música de fondo y los efectos. A continuación, la función aísla los patrones del habla y mejora el audio para que el diálogo sea más claro. Para potenciar Dialogue Boost, Prime Video utiliza diversos servicios de AWS, como AWS Batch con Amazon Elastic Container Registry (Amazon ECR), Amazon Elastic Container Service (Amazon ECS), AWS Fargate, Amazon Simple Storage Service (Amazon S3), Amazon DynamoDB y Amazon CloudWatch, entre otros. Lanzado inicialmente en inglés, Dialogue Boost es ahora compatible con otros seis idiomas, entre ellos francés, italiano, alemán, español, portugués e hindi.

Deporte en directo mejorado

Las últimas temporadas de Thursday Night Football (TNF) de la NFL y los eventos de NASCAR en Prime Video marcaron el debut de varios nuevos Prime Insights: mejoras de transmisión impulsadas por IA diseñadas específicamente para acercar a los fans a la acción que fueron creadas gracias a una colaboración de productores de Prime Sports, ingenieros, analistas en directo y expertos en IA con un equipo de AWS que utiliza Amazon Bedrock.

Prime Insights ilustra aspectos ocultos del juego et pronostica momentos cruciales antes de que sucedan. Por ejemplo, la función “Vulnerabilidad defensiva” de TNF se basa en un modelo propio de aprendizaje automático. Emplea miles de puntos de datos para analizar las formaciones defensivas y ofensivas y destacar dónde intentará ,o debería intentar, atacar el ataque. Por otro lado, la “Burn Bar” de NASCAR utiliza un modelo de IA en Amazon Bedrock, combinado con datos de seguimiento en directo y señales de telemetría de los coches. Analiza el consumo y la eficiencia del combustible de todos los coches de la carrera, identificando qué pilotos están ahorrando combustible y cuáles lo están quemando rápidamente para llegar a la línea de meta y capturar la bandera a cuadros.

Aussi Rapid Recap, que también funciona con AWS utilizando Amazon Bedrock, es una función que ayuda a los aficionados a ponerse al día rápidamente después de unirse a un evento que ya está en marcha. La herramienta compila automáticamente un resumen completo de los momentos más destacados de hasta dos minutos de duración.

Comprensión de vídeo mejorada

Los activos de marketing de Prime Video se almacenan en sistemas dispares, con metadatos a veces insuficientes. Esto dificulta que los equipos descubran, rastreen derechos, verifiquen el control de calidad, analicen y moneticen sus contenidos de forma eficaz. Gracias a la IA generativa, las usuarios de AWS pueden comprender mejor sus activos multimedia extrayendo metadatos y añadiendo incrustaciones vectoriales, lo que se conoce como comprensión de vídeo.

Para solucionarlo, Prime Video comenzó a utilizar la guía Media2Cloud dans Malaisie, que ofrece un análisis completo de los medios a nivel de fotograma, plano, escena y audio. La guía ayuda a enriquecer los metadatos de los activos (como celebridad, texto en pantalla, moderación, detección de estado de ánimo y transcripción). Con la tecnología de Amazon Bedrock, Amazon Nova, Amazon Rekognition y Amazon Transcribe, Media2Cloud permite una comprensión más rápida y precisa del vídeo para mejorar la gestión de contenidos, las capacidades de búsqueda y la participación de la audiencia.

Los metadatos de los activos multimedia de Prime Video se envían automáticamente a un socio de AWS, Iconik, para la gestión de activos multimedia (MAM). Como resultado, Prime Video ha enriquecido cientos de miles de activos y ha mejorado la capacidad de descubrimiento en su archivo de marketing.