如何为电视创建深度伪造？ United Unknown 的工具和机会

谢尔盖，视觉艺术家集体的一部分 联合未知，打破了 Deepfake 的技术和挑战，这是一种视听技术，可以改变（或从头开始创建）图像来取代人，并创造出从未能够（或将能够）发生的前所未有的情况或演讲。

他 深度伪造 这是一个广泛的概念，受到以下技术的滋养： 人工智能 哦 深度学习。其应用有 无限 就像任何技术进步一样，它们可以代表一种手段 娱乐 或对于 艺术创作，或一个 社会、政治、文化和经济抹黑的工具。它最常见的具体化是 更换面部特征， 包括 表情、反应甚至声音，给别人的。正如人们可以想象的那样，这种可能性将提醒任何专门从事这一领域的法学家。 自己形象的权利 或 荣誉权。

这种技术被用于欺诈目的的案例有数十起。在美国，操纵政客的视频，例如 巴拉克·奥巴马, 唐纳德·特朗普 哦 伯尼·桑德斯 他们垄断了数千名北美选民的 WhatsApp 群组和 Facebook 个人资料。也曾出现过这样的情况 语音操控 已用于 欺骗，由收集 华尔街日报。面对这种情况，一些地区开始推出 立法 关于深度伪造；并联， 核查工作组 努力做到完美 技术工具 可以确定视频何时 已（或未）修改。像这样的解决方案至关重要：既要否认深度造假，又要检查将来是否有人用上述技术为自己的行为找借口。

撇开这种技术的阴暗面不谈，事实是 深度伪造 这是一座金矿 视听娱乐业。有很多电影正在被使用 源自该技术的所有类型的技术 复活 已故角色 甚至可以把 与退休人士一起工作，就像最近的案例一样 布鲁斯·威利斯，谁把自己的形象给了公司 深饼 用于公司广告活动 梅根·冯。

在音频领域，工作室如 六月 他们已经表达了开始合作的意图，目的是处理演员的声音文件，将其叠加在专业演员上，实现与口译员声音颜色相同的配音。

联合未知 是一个位于西班牙的视听团体，众所周知 利用 Deepfake 的相关性，即使这不是一种趋势，在上面留下他的特殊签名 讽刺视频制作。自2010年以来，他通过互联网传播他的“视觉行动主义（……）作为大规模颠覆的武器”，传播到制作公司、电视台和杂志，例如 RTVE、Movistar+、Mediapro、Atresmedia、TV3、El Terrat、Premios Ondas、Mongolia 或 Los40 Classic，或具体格式，例如 迟到的动机，后天, 佩雷斯档案 哦 APM？。 谢尔盖，United Unknown 的 Panorama Audiovideo 对话者在此次进军 Deepfake 领域的过程中，揭示了 技术和工艺 这令人着迷的 技术。

---

United Unknown 中 Deepfake 的起源

视听制作 联合未知 它可以追溯到十多年前，但直到 2015 年，他们才开始通过手动替换面孔和头部来制作讽刺视频。这首先意味着 工艺品 它仍然是对 经典漫画 这伴随着整个历史上的幽默和政治运动。在有重叠之前 嘴, 拼贴画 蒙蒂·派森 (Monty Python) 沉浸式拍摄技术的化妆。现在，技术工具允许 不同的方法 并取得了一些成果 更现实。

谢尔盖记得，当时，该小组正在寻找 网上的主角视频, 稳定并修剪头部 通过手动动态观察，然后 他们在想要替换的内容之上添加了动画：“这是一项非常手工且有时乏味的工作，但我们真的很高兴看到结果。” 2018 年，一切都发生了变化：United Unknown 首次看到了我们今天所知的深度造假，他们“对这项技术及其可能性感到惊讶”。

---

演变和工作流程

自 2019 年创建第一个 Deepfake 以来，United Unknown 一直没有改变 工作方法论 当接近这种技术时。 Sergey 提供了更多详细信息：“工作流程始终相同： 有要替换的角色，寻找要引入的角色的资源，提取脸部，创建蒙版并开始模型计算。然后等待结果，这需要几天时间，然后执行 最终调整 在视频编辑程序中。”

幸运的是，技术进步正在简化 Deepfakes 的生产和最终结果：“显卡越好，结果的质量就越好，计算时间也就越短。”除此之外还有大量的解决方案 特定软件 简化了创建过程，例如 机器视频编辑器 哦 Xseg。同时，United Unknown团队依靠人工智能应用进行图像制作，例如 黄玉 哦 GPEN。

---

Deepfacelab：关键工具

的完美 深度伪造 不仅需要经验，还需要 无数的应用程序 允许授予 结果非常接近现实。然而，该软件 深脸实验室 它是该行业的关键解决方案。这个软件， 免费和开源，为创作者在进行这种对现实的特殊修改时提供了多种可能性。 “凭借 Python 知识，甚至可以对其进行定制以扩展和修改其某些功能，”Sergey 说。

深脸实验室，一个承诺“具有高保真度的电影质量结果”的工具，其最显着的功能之一是可以 更换主角的脸, 使主题焕发活力, 更换整个头部 哦 操纵所选择的人的嘴唇。

尽管流程得到了简化，但谢尔盖认为 挑战仍然相同：拥有良好的源和目标材料，因为“很多时候，战斗都是针对某些图像和视频质量差的。”

---

音频处理

一旦挑战 Deepfake创作的可及性 en los aspectos visuales del personaje, comienza una profunda carrera para dominar y extender la utilización del audio. United Unknown reconoce su interés en este tema y apunta que “la tecnología ya existe, pero no es accesible para todos los usuarios. “Hay disponibles aplicaciones de “text to speech” (de texto a voz), pero no de “speech to speech” (deepfake de voz a voz)”, añade.

En la actualidad, varias empresas se dedican a ofrecer avatares digitales y voces clonadas, cuenta Sergey, pero lo cierto es que “existen muchas reticencias a ofrecer este tipo de software sin restricciones”. “Las voces clonadas podrían ser utilizadas de forma fraudulenta para estafas, por lo que se ofrecen voces estándar”, apunta el representante de United Unknown.

La única vía disponible para clonar una voz concreta requiere el permiso de la persona, y, como apunta Sergey, “las empresas que ofrecen el servicio revisan cada petición de forma individual”. No obstante, y dejando de lado las cuestiones legales de un ámbito sin apenas jurisprudencia específica, existen herramientas colaborativas que están comenzando a crear bancos artesanales de voces similares a los de personalidades. Pero, ¿sería adecuado utilizar estas herramientas o comercializar ciertos vídeos sin la aprobación de terceros?

---

Broadcasters: un interés creciente

他 深度伪造 puede ser una herramienta de acción política, pero también una fantástica vía para la sátira humorística en televisión. Los deepfake, en la actualidad, ocupan segmentos en diferentes formatos aportando espectacularidad, crítica y diversión。

这 gran oportunidad de United Unknown vino de la mano de un veterano de la industria televisiva: “En 2015, Andreu Buenafuente estaba preparando el estreno de 迟来的动机 en Movistar+, tuvimos la suerte de que vio dos de nuestros primeros vídeos que se hicieron virales: Rajoy en el Club de la comedia y Los ángeles de Charlie, y nos invitó a colaborar en su programa, que finalizó en 2021”. En este formato, el equipo de United Unknown pudo conocer a Raúl Pérez, “un auténtico crack de las imitaciones”, con quien colaboraron tanto en 迟来的动机 como en formatos paralelos como 佩雷斯档案， 这 Gala de los Ondas 2021 哦 后天. En la actualidad, al margen del interés que les han manifestado diferentes productoras y cadenas para proyectos concretos, United Unknown colabora recurrentemente con el programa humorístico Alguna Pregunta Més? (APM?) 的 TV3 en el que parodian programas de otras cadenas, anuncios, películas o vídeos musicales。

---

Un vistazo al futuro del deepfake

他 深度伪造 se encuentra en una fase de desarrollo inicial. Apenas hemos visto sus primeras materializaciones y se espera que, en pleno auge de las herramientas de 深度学习 或的 人工智能, se puedan resolver los tres grandes retos que implica: la mejora en la calidad de la imagen, la velocidad, y el calculo a tiempo real en directo. Otro punto a superar, desgrana Sergey, son límites del análisis y la detección de caras, que actualmente son el perfil de la cabeza: “La detección se basa en la identificación de las facciones de la cara: los dos ojos, cejas, nariz, boca y barbilla. Cuando se pierden de vista estos elementos, la detección de la cara falla. Imaginamos que con nuevas herramientas basadas en IA se podría superar esta limitación”.

Frente a estos desafíos, el mundo continúa creando pruebas de concepto y aplicaciones de gran interés del 深度伪造 que podrían servir de ventana para ver lo que está por venir. Hace poco, Chris Ume, uno de los principales creadores de deepfake del mundo, quedó finalista en America’s Got Talent con un show de 深度伪造 en directo con Elvis Presley cantando:

https://twitter.com/Metaphysic_ai/status/1569931839971655680

Y, por otro lado, el propio Mark Zucherberg publicó un vídeo con su avatar, un desarrollo inicialmente dirigido a su desarrollo de 梅塔韦尔索, pero que permite arrojar luz sobre las posibilidades que podría implicar la creación de un doble virtual generado en tiempo real. Como se puede ver, la propuesta de Meta brinda una completa libertad a la hora de realizar diferentes expresiones faciales y brinda la posibilidad de que el avatar interactúe con elementos como fuentes de luz：

The avatar quality here is quite amazing pic.twitter.com/PgY38mXCJq

— Chris Fralic (@chrisfralic) October 12, 2022

El futuro está por escribir, pero todo apunta a que el 深度伪造, que vemos cada vez con más y más frecuencia en nuestras pantallas, ha llegado para ocupar un papel predominante 合而为一 industria broadcast liberada por la tecnología 和一个 电影业 cada vez más volcada en recordar (e inmortalizar) a sus grandes estrellas.

塞尔吉奥·朱利安·戈麦斯的报告