Deepfakes Jay-Z rapea el meme copypasta de Navy SEAL para escuchar música de jazz en vivo



Mi editor en jefe me retó a sacar un montón de temas al azar de un sombrero y escribir una historia tecnológica convincente sobre ellos. Esto es lo que obtuve: Jay-Z, redes neuronales, los Navy SEAL de EE. UU. Y música de jazz.

Afortunadamente para mí, me encontré con este video con un grupo de talentosos músicos de jazz que interpretan una versión de Jay-Z generada por Deepfake AI rapeando el infame Navy SEAL copypasta meme. Natch

Adam Neely, un popular YouTuber de música con más de un millón de suscriptores, lanzó el video como parte de un Curiosidad documental. Presenta una búsqueda muy humana para interpretar un rap acapella generado por computadora.

Jay-Z es un objetivo fantástico para una IA de Deepfakes porque, a diferencia de la mayoría de los raperos, ha lanzado muchas pistas oficiales de acapella con calidad de estudio. Esto permite a los desarrolladores de IA entrenar una red neuronal en su voz y estilo de rap sin preocuparse por eliminar música o extraer voces.

En teoría, esto debería significar que podemos «transferir el estilo» del flujo de Jay, pero no es así como funcionan las cosas. Como explica Neely en el video, hay un «valle extraño» para la música al igual que para las imágenes visuales. La forma en que esto funciona para la música es que, en algún momento, las voces generadas por computadora comienzan a ser algo lindas. Piense «Aún vivo» por GLaDOS:

Pero cuanto más te acercas a marcar con una voz humana «real», más extraño se vuelve. No es tan notable cuando estás viendo un Deepfake donde el presidente Barrack Obama da un discurso, pero cuando realmente profundizas en la forma en que suenan las cosas, como decir cuando tratas de hacer música nueva, los defectos en el sistema comienzan a mostrarse.

[[Leer: Esta espeluznante IA de Deepfake imita a docenas de celebridades y políticos]

Para empezar, Neely tuvo que recurrir a músicos de jazz profesionales para que lo ayudaran a hacer cara o cruz las pistas vocales de faux-Z. En el video, dice:

No tenía ninguno de los aspectos musicales que normalmente encontraríamos en la música hip hop, a saber, un pulso constante y cualquier tipo de rima o esquemas rítmicos. Pero hay algo musical o rítmico al respecto. Al menos así es como lo escucho.

Parte del problema es que el falso Jay-Z está usando un copypasta como letra en lugar de algo escrito a un ritmo. Esto significa que no sigue ningún patrón normal de conversación y eso hace que sea increíblemente difícil de transponer a la música. En otras palabras: es poco probable que la generación actual de Deepfakes produzca un nuevo álbum de Tupac o Biggie Smalls en el corto plazo. Pueden copiar la voz lo suficientemente bien como para parodiar, pero la musicalidad aún no está allí.

Neely no se iba a descarrilar por el hecho de que los robots apestan al rapear. Cuando recurrió a sus amigos en el negocio de la música de jazz, fueron capaces de convertir las expresiones de Deepfake que cantaban como scat en una canción de jazz tan convincente con un Jay-Z generado por IA como probablemente sea humanamente posible.

Mira el video completo arriba para más detalles.

Publicado el 4 de agosto de 2020 – 18:08 UTC





Fuente: TNW

Compartir:

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

Esta web utiliza cookies, puedes ver aquí la Política de Cookies