Prime Video : c'est ainsi que l'IA générative est déployée dans AWS pour améliorer la qualité de visionnage

Amazon Bedrock, un service entièrement géré Amazon Web Services (AWS) pour créer des applications d'IA génératives, l'épine dorsale du service de streaming Vidéo principale, offrant « de la valeur et des connaissances personnalisées » aux téléspectateurs dans le processus.

Le déploiement de IA générative dans AWS de Vidéo principale se manifeste dans différents domaines, à commencer par un classique : recommandations de contenu personnalisées. À cet égard, Amazon Bedrock contribue à proposer des recommandations de contenu personnalisées directement sur les pages « Films » et « Émissions de télévision » de Prime Video. Les téléspectateurs verront des collections de « films que nous pensons que vous aimerez » et d'« émissions de télévision que nous pensons que vous aimerez » sur chaque page, organisées en fonction de leurs intérêts et de leur historique de visionnage.

Un autre outil clé est Récapitulatifs des radiographies, qui aident les téléspectateurs à rattraper ce qu'ils regardent, sans risque de spoilers. Cet outil crée des résumés courts et faciles à digérer de saisons complètes d'émissions de télévision, d'épisodes uniques et même d'extraits d'épisodes via de courts extraits de texte, décrivant les principaux cliffhangers, les points de l'intrigue liés aux personnages et d'autres détails accessibles à tout moment pendant le visionnage.

Grâce à une combinaison de modèles de base gérés par Socle amazonien et des modèles d'IA personnalisés, formés avec Amazon SageMaker, X-Ray Recaps fonctionne en analysant plusieurs segments vidéo. Combiné avec des sous-titres ou des dialogues, il génère des descriptions détaillées d'événements, de lieux, d'heures et de conversations clés. De plus, Amazon Bedrock Guardrails est appliqué pour vérifier que les résumés ne contiennent pas de spoilers.

Dans le domaine de l'audio, Renforcement du dialogue Analyse l'audio original d'un film ou d'une série et utilise l'IA pour identifier intelligemment les points où les dialogues peuvent être difficiles à entendre sur la musique de fond et les effets. La fonctionnalité isole ensuite les modèles de parole et améliore l’audio pour rendre le dialogue plus clair. Pour améliorer Renforcement du dialogue, Prime Video utilise divers services AWS, tels que AWS Batch avec Amazon Elastic Container Registry (Amazon ECR), Amazon Elastic Container Service (Amazon ECS), AWS Fargate, Amazon Simple Storage Service (Amazon S3), Amazon DynamoDB et Amazon CloudWatch, entre autres. Initialement publié en anglais, Dialogue Boost prend désormais en charge six autres langues, dont le français, l'italien, l'allemand, l'espagnol, le portugais et l'hindi.

Sport en direct amélioré

Les dernières saisons de Football du jeudi soir (TNF) de la NFL et des événements NASCAR sur Prime Video a marqué le début de plusieurs nouveaux Prime Insights : des améliorations de streaming basées sur l'IA spécialement conçues pour rapprocher les fans de l'action, créées grâce à une collaboration de producteurs, d'ingénieurs, d'analystes à l'antenne et d'experts en IA de Prime Sports avec une équipe AWS utilisant Amazon Bedrock.

Illustration Prime Insights aspects cachés du jeu oui prédit les moments cruciaux avant qu'ils n'arrivent. Par exemple, la fonctionnalité « Vulnérabilité défensive » de TNF est basée sur un modèle propriétaire d'apprentissage automatique. Il utilise des milliers de points de données pour analyser les formations défensives et offensives et mettre en évidence les endroits où l’offensive tentera ou devrait tenter d’attaquer. En revanche, le «Barre de brûlure"NASCAR utilise un modèle d'IA dans Amazon Bedrock, combiné avec des données de suivi en direct et des signaux de télémétrie des voitures. Il analyse la consommation de carburant et l'efficacité de toutes les voitures de la course, identifiant quels pilotes économisent du carburant et lesquels le brûlent rapidement pour atteindre la ligne d'arrivée et capturer le drapeau à damier.

En outre, Récapitulatif rapide, qui est également alimenté par AWS à l'aide d'Amazon Bedrock, est une fonctionnalité qui aide les fans à se mettre rapidement au courant après avoir rejoint un événement déjà en cours. L'outil compile automatiquement un résumé complet des faits saillants d'une durée maximale de deux minutes.

Compréhension vidéo améliorée

Les actifs marketing de Prime Video sont stockés sur des systèmes disparates, avec des métadonnées parfois insuffisantes. Il est donc difficile pour les équipes de découvrir, suivre efficacement les droits, vérifier le contrôle qualité, analyser et monétiser leur contenu. Grâce à l'IA générative, les utilisateurs d'AWS peuvent mieux comprendre vos actifs médiatiques extraction métadonnées et en ajoutant incrustations vectorielles, connue sous le nom de compréhension vidéo.

Pour y remédier, Prime Video a commencé à utiliser le guide Média2Cloud dans AWS, qui propose un Analyse complète des médias au niveau de l'image, du plan, de la scène et de l'audio. Le guide permet d'enrichir les métadonnées des actifs (telles que la célébrité, le texte à l'écran, la modération, la détection de l'humeur et la transcription). Propulsé par Amazon Bedrock, Amazon Nova, Amazon Rekognition et Amazon Transcribe, Media2Cloud permet une compréhension plus rapide et plus précise de la vidéo pour améliorer la gestion du contenu, les capacités de recherche et l'engagement du public.

Les métadonnées des ressources multimédias Prime Video sont automatiquement envoyées à un partenaire AWS, Iconique, pour la gestion des actifs multimédias (MAM). En conséquence, Prime Video a enrichi des centaines de milliers d'actifs et amélioré la visibilité dans ses archives marketing.