Adobe Firefly se expande al audio con IA: bandas sonoras y herramientas de voz ahora en versión Beta

7

Adobe presentó esta semana actualizaciones significativas para su suite Firefly AI, con un enfoque importante en las capacidades de generación de audio. Las nuevas funciones, Generar banda sonora y Generar voz, tienen como objetivo agilizar la creación de contenido al ofrecer soluciones de voz y música impulsadas por IA. Estas herramientas se encuentran actualmente en versión beta y prometen a los creadores un mayor control y flexibilidad sobre el audio generado por IA.

Licencias de música AI simplificadas

Una ventaja clave de Generate Soundtrack de Firefly es su licencia universal. Adobe garantiza que cualquier música creada a través de la herramienta es gratuita para uso comercial, de forma indefinida. Esto aborda un problema importante para los creadores que a menudo enfrentan restricciones de licencias de música complejas y costosas. Según el jefe de audio AI de Adobe, Jay LeBoeuf, el objetivo es “eliminar la confusión” que rodea a los derechos musicales en la era digital. La IA está diseñada para evitar problemas de derechos de autor mediante la capacitación sobre contenido con licencia, evitando posibles retiradas o huelgas en plataformas como YouTube.

El sistema también incluye salvaguardias; por ejemplo, las indicaciones que hacen referencia a artistas específicos (como Taylor Swift) se rechazan para evitar la replicación no autorizada de material protegido por derechos de autor.

Creación de bandas sonoras de IA: un enfoque paso a paso

Generate Soundtrack funciona analizando los videos subidos y sugiriendo indicaciones. La IA genera indicaciones basadas en la vibra, el estilo y el propósito del video, lo que permite a los creadores refinar estas sugerencias según sea necesario. Los usuarios pueden ajustar el tempo, los niveles de energía y la duración para que coincidan con su contenido. En cuestión de minutos, Firefly ofrece cuatro variaciones instrumentales adaptadas a la duración del vídeo (hasta cinco minutos).

Para empezar:

  1. Abra Firefly en la web.
  2. Haga clic en “Generar” y luego en “Generar banda sonora”.
  3. Sube tu vídeo.
  4. Revise o edite el mensaje generado por IA.
  5. Ajusta la energía, el tempo y la duración.
  6. Genera y descarga la banda sonora.

Se requieren planes de Adobe para acceder a Firefly, a partir de $10 por mes.

Generación de voz con IA: ajuste para lograr realismo

La herramienta Generar voz de Firefly ofrece un alto grado de personalización. Los usuarios pueden ingresar texto (hasta 7500 caracteres) y elegir entre 50 voces diversas, incluidas opciones no binarias, en 20 idiomas. La herramienta va más allá de la simple conversión de texto a voz al permitir a los usuarios agregar pausas, ajustar el tono y corregir la pronunciación mediante una función de desglose fonético.

Adobe enfatiza la importancia de un discurso realista para los creadores que tal vez no se sientan cómodos grabando sus propias voces en off. LeBoeuf explica que el objetivo es capacitar a “propietarios de pequeñas empresas, educadores y a todos los que realmente tienen una historia que contar”.

Ampliación de asociaciones para la innovación en IA

Además de sus propios desarrollos, Adobe está ampliando sus asociaciones con empresas de inteligencia artificial como ElevenLabs (para generación de voz multilingüe) y Topaz Labs, integrando aún más modelos de inteligencia artificial de terceros en su plataforma. La compañía también está lanzando un modelo de imagen Firefly de quinta generación con fotorrealismo mejorado y edición basada en indicaciones, junto con un editor de video Firefly beta que presenta una línea de tiempo multipista para la compilación de clips de IA.

La expansión de Adobe hacia el audio con IA marca un paso significativo en la democratización de la creación de contenido, proporcionando herramientas que abordan los problemas de licencia y mejoran el control creativo. El compromiso de la empresa con las asociaciones sugiere un futuro en el que la producción de medios impulsada por IA será cada vez más accesible y eficiente.