Adobe Firefly rozszerza funkcjonalność AI w audio: narzędzia do tworzenia ścieżki dźwiękowej i mowy w testach beta

22

W tym tygodniu firma Adobe zaprezentowała istotne aktualizacje pakietu Firefly opartego na sztucznej inteligencji, ze szczególnym naciskiem na możliwości generowania dźwięku. Nowe funkcje Utwórz ścieżkę dźwiękową i Utwórz mowę mają na celu uproszczenie procesu tworzenia treści poprzez oferowanie rozwiązań muzycznych i lektorskich opartych na sztucznej inteligencji. Narzędzia te są obecnie w fazie beta, co zapewnia twórcom większą elastyczność i kontrolę nad dźwiękiem generowanym przez sztuczną inteligencję.

Uproszczenie licencjonowania muzyki generowanej przez sztuczną inteligencję

Kluczową zaletą Firefly Generate Soundtrack jest jego licencja uniwersalna. Adobe gwarantuje, że każda muzyka stworzona za pomocą tego narzędzia może być wykorzystywana do celów komercyjnych bez żadnych ograniczeń czasowych. Rozwiązuje to ważny problem twórców, którzy często borykają się ze złożonymi i kosztownymi ograniczeniami licencyjnymi na muzykę. Według szefa sztucznej inteligencji audio w firmie Adobe, Jaya LeBoeufa, celem jest „wyeliminowanie nieporozumień” dotyczących praw do muzyki w erze cyfrowej. Sztuczna inteligencja została zaprojektowana tak, aby unikać problemów z prawami autorskimi, ponieważ jest szkolona w zakresie licencjonowanych treści, zapobiegając potencjalnym usunięciom lub skargom na platformach takich jak YouTube.

System zawiera również mechanizmy bezpieczeństwa: na przykład prośby odnoszące się do konkretnych artystów (takich jak Taylor Swift) są odrzucane, aby zapobiec nieuprawnionemu kopiowaniu materiałów chronionych prawem autorskim.

Tworzenie ścieżek dźwiękowych AI: podejście krok po kroku

Funkcja Generuj ścieżkę dźwiękową działa na zasadzie analizy przesłanych filmów i oferowania sugestii. Sztuczna inteligencja generuje sugestie na podstawie atmosfery, stylu i celu filmu, umożliwiając twórcom udoskonalanie tych sugestii w razie potrzeby. Użytkownicy mogą dostosować tempo, poziom energii i czas trwania, aby dopasować je do treści. Firefly w ciągu kilku minut udostępnia cztery wariacje instrumentalne, dostosowane do długości filmu (do pięciu minut).

Aby rozpocząć:

  1. Otwórz Firefly w swojej przeglądarce internetowej.
  2. Kliknij „Utwórz”, a następnie „Utwórz ścieżkę dźwiękową”.
  3. Prześlij swój film.
  4. Wyświetl lub edytuj wskazówkę wygenerowaną przez sztuczną inteligencję.
  5. Dostosuj energię, tempo i czas trwania.
  6. Wygeneruj i pobierz ścieżkę dźwiękową.

Dostęp do Firefly wymaga subskrypcji Adobe już od 10 USD miesięcznie.

Generowanie mowy AI: strojenie pod kątem realizmu

Narzędzie Firefly Generate Speech oferuje wysoki stopień dostosowania. Użytkownicy mogą wprowadzać tekst (do 7500 znaków) i wybierać spośród 50 różnych głosów, w tym opcji neutralnych pod względem płci, w 20 językach. Narzędzie wykracza poza proste przekształcanie tekstu na mowę i umożliwia użytkownikom dodawanie pauz, dostosowywanie tonu i poprawianie wymowy za pomocą funkcji analizy fonetycznej.

Firma Adobe podkreśla znaczenie realistycznej mowy dla twórców, którzy mogą nie czuć się komfortowo nagrywając własne narracje. LeBoeuf wyjaśnia, że ​​celem jest wzmocnienie pozycji „właścicieli małych firm, nauczycieli, a właściwie każdego, kto ma historię, którą chce się podzielić”.

Rozszerzanie partnerstw na rzecz innowacji w zakresie sztucznej inteligencji

Oprócz własnego rozwoju firma Adobe rozszerza współpracę z firmami zajmującymi się sztuczną inteligencją, takimi jak ElevenLabs (do generowania wielojęzycznej mowy) i Topaz Labs, umożliwiając dalszą integrację modeli sztucznej inteligencji innych firm ze swoją platformą. Firma wprowadza także piątą wersję Firefly Image Model z ulepszonym fotorealizmem i edycją opartą na zapytaniach, a także wersję beta Firefly Video Editor z wielościeżkową osią czasu do kompilacji klipów AI.

Ekspansja firmy Adobe na sztuczną inteligencję audio to znaczący krok w demokratyzacji tworzenia treści, zapewniający narzędzia rozwiązujące problemy licencyjne i zwiększające kontrolę nad kreacją. Zaangażowanie firmy w partnerstwa przewiduje przyszłość, w której produkcja medialna oparta na sztucznej inteligencji stanie się coraz bardziej dostępna i wydajna.