Adobe Firefly breidt zich uit naar AI Audio: soundtrack- en spraakhulpmiddelen nu in bèta

24

Adobe heeft deze week belangrijke updates onthuld voor zijn Firefly AI-suite, met een grote focus op mogelijkheden voor het genereren van audio. De nieuwe functies, Genereer soundtrack en Genereer spraak, zijn bedoeld om de creatie van inhoud te stroomlijnen door AI-aangedreven muziek- en voice-overoplossingen aan te bieden. Deze tools bevinden zich momenteel in de bètafase en beloven makers meer controle en flexibiliteit over door AI gegenereerde audio.

AI-muzieklicenties vereenvoudigd

Een belangrijk voordeel van Firefly’s Generate Soundtrack is de universele licentie. Adobe zorgt ervoor dat alle muziek die via de tool wordt gemaakt, voor onbepaalde tijd gratis is voor commercieel gebruik. Hiermee wordt een groot pijnpunt aangepakt voor makers die vaak te maken krijgen met complexe en dure beperkingen op het gebied van muzieklicenties. Volgens Adobe’s hoofd van AI-audio, Jay LeBoeuf, is het doel om “de verwarring weg te nemen” rond muziekrechten in het digitale tijdperk. De AI is ontworpen om auteursrechtproblemen te voorkomen door training te geven in gelicentieerde inhoud en mogelijke verwijderingen of stakingen op platforms zoals YouTube te voorkomen.

Het systeem omvat ook waarborgen; Zo worden aanwijzingen die verwijzen naar specifieke artiesten (zoals Taylor Swift) afgewezen om ongeoorloofde replicatie van auteursrechtelijk beschermd materiaal te voorkomen.

AI-soundtracks maken: een stapsgewijze aanpak

Genereer soundtrack werkt door geüploade video’s te analyseren en aanwijzingen voor te stellen. De AI genereert aanwijzingen op basis van de sfeer, stijl en het doel van de video, waardoor makers deze suggesties indien nodig kunnen verfijnen. Gebruikers kunnen het tempo, het energieniveau en de duur aanpassen aan hun inhoud. Binnen enkele minuten levert Firefly vier instrumentale variaties, afgestemd op de lengte van de video (maximaal vijf minuten).

Om te beginnen:

  1. Open Firefly op internet.
  2. Klik op ‘Genereren’ en vervolgens op ‘Soundtrack genereren’.
  3. Upload je video.
  4. Bekijk of bewerk de door AI gegenereerde prompt.
  5. Pas energie, tempo en duur aan.
  6. Genereer en download de soundtrack.

Voor toegang tot Firefly zijn Adobe-abonnementen vereist, vanaf $ 10 per maand.

AI-spraakgeneratie: fijnafstemming voor realisme

Firefly’s Generate Speech-tool biedt een hoge mate van maatwerk. Gebruikers kunnen tekst invoeren (tot 7.500 tekens) en kiezen uit 50 verschillende stemmen, inclusief niet-binaire opties, in 20 talen. De tool gaat verder dan eenvoudige tekst-naar-spraak, doordat gebruikers pauzes kunnen toevoegen, de toon kunnen aanpassen en uitspraken kunnen corrigeren met behulp van een functie voor fonetische analyse.

Adobe benadrukt het belang van levensechte spraak voor makers die zich misschien niet op hun gemak voelen bij het opnemen van hun eigen voice-overs. LeBoeuf legt uit dat het doel is om “eigenaren van kleine bedrijven en docenten, te empoweren voor iedereen die eigenlijk alleen maar een verhaal te vertellen heeft.”

Partnerschappen voor AI-innovatie uitbreiden

Naast de eigen ontwikkelingen breidt Adobe de partnerschappen uit met AI-bedrijven zoals ElevenLabs (voor het genereren van meertalige spraak) en Topaz Labs, waarbij AI-modellen van derden verder in het platform worden geïntegreerd. Het bedrijf introduceert ook een Firefly Image Model van de vijfde generatie met verbeterd fotorealisme en promptgebaseerde bewerking, samen met een bèta-Firefly-video-editor met een multitrack-tijdlijn voor AI-clipcompilatie.

De uitbreiding van Adobe naar AI-audio markeert een belangrijke stap in het democratiseren van contentcreatie, door tools te bieden die licentieproblemen aanpakken en de creatieve controle vergroten. De toewijding van het bedrijf aan partnerschappen suggereert een toekomst waarin AI-aangedreven mediaproductie steeds toegankelijker en efficiënter wordt.