ElevenLabs ya ofrece versiones de música y voces humanas generadas por IA. Ahora, dejará la gente crea efectos de sonido también para podcasts, películas o juegos. El nuevo Herramienta de efectos de sonido puede generar hasta 22 segundos de sonidos basados en las indicaciones del usuario que se pueden combinar con la plataforma de voz y música de la compañía, y ofrece a los usuarios al menos cuatro opciones de clips de audio descargables.
La compañía dice que trabajó con la plataforma de medios de stock Shutterstock para construir una biblioteca y entrenar su modelo en sus clips de audio. Shutterstock ha licenciado sus bibliotecas de contenido a muchas empresas de IA, incluidas OpenAI, Meta y Google.
Sound Effects es de uso gratuito, pero los niveles pagos pueden usar los clips de audio generados con licencias comerciales, mientras que los usuarios gratuitos «deben atribuir a ElevenLabs incluyendo 'elevenlabs.io' en el título». Los usuarios de ElevenLabs tienen un límite establecido de caracteres al escribir mensajes, y los usuarios gratuitos obtienen 10.000 caracteres por mes. Para efectos de sonido, ElevenLabs dice en su página de preguntas frecuentes que se tomarán 40 caracteres por segundo de la asignación si los usuarios configuran ellos mismos la duración del clip de audio. Si utiliza la duración de audio predeterminada, a cada solicitud de aviso se le cobrarán 200 caracteres.
Ya existen en el mercado bibliotecas con clips de efectos de sonido para creadores, cineastas y desarrolladores de videojuegos. Pero a veces, estos pueden ser costosos o tener problemas para generar el tipo de sonido correcto. ElevenLabs dice en su blog que diseñó efectos de sonido «para generar paisajes sonoros ricos e inmersivos de forma rápida, asequible y a escala».
Otros desarrolladores de IA también están desarrollando sus propios generadores de texto a sonido. Lanzamiento de la IA de estabilidad Audio estable el año pasadoque crea clips de audio de música y efectos de sonido, y Modelos AudioCraft de Meta generar sonido natural (piense en ruidos de fondo como el viento o el tráfico).