Adobe Firefly review: Zijn de drie nieuwe AI-gestuurde audiotools de moeite waard?

---

• Adobe introduceert drie nieuwe audiotools Met kunstmatige intelligentie Binnen Firefly
• Makers kunnen nu gebruikmaken van Muziek genereren, Spraak genereren en Geluidseffecten genereren.
• Ik heb het getest om te zien hoe het werkt bij het maken van video's.

---

Na een periode van bètatesten heeft Adobe Firefly nu drie nieuwe, door AI aangedreven audiotools uitgebracht, die "geluid van studiokwaliteit" beloven en beschikbaar zijn voor alle makers. Ik heb ze alle drie getest om te zien of de resultaten de verwachtingen waarmaken – en over het algemeen wel, op een paar kleine problemen na.

Muziek genereren, geluidseffecten genereren en spraak genereren zijn de nieuwste audiofuncties die beschikbaar zijn gekomen op Adobe's browsergebaseerde AI-platform (hun functies spreken voor zich).

Uit mijn ervaring met alle drie de tools blijkt dat Generate Music er echt uitspringt; het is veel beter dan ik had verwacht en ik denk dat marketeers en makers er enorm veel baat bij zullen hebben. Je kunt het zelf proberen door hier te klikken.

Wat is er nieuw?

Drie AI-tools zijn nu voor iedereen beschikbaar. Hun functies spreken grotendeels voor zich, maar hier is wat je moet weten:

• Muziek genereren Het stelt je in staat om gelicentieerde muzieknummers te creëren die qua lengte en sfeer aansluiten bij je video's.
• Spraak genereren Geschreven teksten worden omgezet in gesproken commentaar.
• Geluidseffecten genereren Het genereert – zoals je al vermoedde – geluidseffecten die aansluiten bij de beweging en timing van de video.

Maar is het echt zo goed?

Ik heb eerder al geschreven over mijn scepsis ten opzichte van kunstmatige intelligentie in het algemeen, en mijn zorgen over het gebruik ervan in creatieve werken. Het is immers slechts een simulatie van kunst.

De tools van Adobe maakten echter indruk op zelfs de meest fervente AI-sceptici in mijn team – met name functies zoals Generative Extend in hun videobewerkingssoftware. En aangezien ik een ruimdenkend persoon ben, besloot ik deze tools zelf uit te proberen om te zien hoe ze echt werkten.

De focus ligt hier, in ieder geval voorlopig, op het versnellen van de creatieve workflow voor zowel marketeers als contentmakers .

Muziek maken met kunstmatige intelligentie

Ik begon met de tool 'Muziek genereren' , waarmee je vrijelijk tekstcommando's kunt invoeren of een videoclip kunt uploaden, waarna de AI probeert te raden welk type muziek je wilt. Ik gebruikte een korte clip van 27 seconden die ik had opgenomen voor mijn review van de reMarkable Paper Pure (omdat die nog in mijn downloadmap stond).

Op basis hiervan stelde Firefly een scriptopdracht voor: "een rustig, diep, sfeervol elektronisch nummer voor een productpresentatie."

Ik drukte op de knop 'Genereren' en binnen enkele seconden – de snelheid was werkelijk verbluffend – kreeg ik vier nummers te zien waaruit ik kon kiezen, allemaal verschillend maar met dezelfde sfeer. Ze waren… acceptabel. Een beetje generiek, maar ze zouden prima kunnen volstaan ​​in geval van nood, of om een ​​project snel af te ronden. (Lees voor meer informatie over de impact van AI op de muziekindustrie ons artikel over Apple Music dat artiesten verplicht om AI-muziek te taggen .)

Ik besloot om nog wat termen aan het scriptcommando toe te voegen, zoals 'jazz' en 'cinematisch', voor gebruik in de 'vlog' en 'trailer'. Ik veranderde de 'Energie'-instelling van 'laag' naar 'gemiddeld'. Het resultaat was veel beter.

Net als bij alle AI-tools geldt: hoe preciezer de tekstcommando's, hoe beter het resultaat. Je hebt ook de mogelijkheid om zelf de sfeer, stijl en het doel te beschrijven als je een specifiek idee hebt.

Je kunt hier muziek en video downloaden, of alleen muziek.

Het creëren van door AI gegenereerde voice-overs

Wat de tool 'Spraak genereren' betreft , heb ik eerst via de zijbalk het te gebruiken AI-model geselecteerd; op het moment van schrijven waren er het commercieel veilige Firefly-model van Adobe en het partner-model ElevenLabs Multilingual V2 beschikbaar.

Vervolgens koos ik een spreker uit een lijst van 45 opties, die elk op verschillende manieren werden omschreven als man, vrouw, non-binair, jong, van middelbare leeftijd, bejaard, enzovoort.

Ten slotte plakte ik mijn tekst in het tekstveld; Firefly kan de taal die ik gebruik herkennen, maar je hebt de mogelijkheid om deze zelf te kiezen. Ik gebruikte het gedicht "Ozymandias" (met mijn oprechte excuses aan Shelley).

Wat ik hier prettig vond, is dat je, nadat je je tekst hebt ingevoerd, extra tekst kunt toevoegen of de AI kunt instrueren om op bepaalde plekken te stoppen.

Om de audio daadwerkelijk te beluisteren, moest ik de hele clip selecteren en het contextmenu gebruiken; daar kun je ook de uitspraak corrigeren en de toonhoogte aanpassen.

Met al die praat over het versnellen van workflows, lijkt me dit een vergissing. Het enige wat nodig is, is een startknop onderaan het scherm.

Ik moest de pauze-intervallen aanpassen om de tekst wat ademruimte te geven, en nadat ik ze had ingesteld, kon ik de timing wijzigen door op de pauzeknop in het voorbeeldscherm te klikken. Om de een of andere reden was het het woord 'land' dat de AI in de war bracht, die het uitsprak als ' lan '.

Het creëren van AI-gestuurde geluidseffecten (SFX)

Voor deze test gebruikte ik opnieuw een video die ik had opgenomen voor mijn review van de reMarkable – ditmaal een clip van 12 seconden waarin de reMarkable 2 en Paper Pure met elkaar werden vergeleken.

Dit proces is veel complexer, wat betekent dat de AI niet zal raden wat de mogelijke geluidseffecten (SFX) zijn. Ik moest handmatig beschrijven wat ik wilde. Vervolgens klikte ik op "Prompt verbeteren", waardoor er meer beschrijvingen werden toegevoegd.

En zo kregen we een "glijdend fluitje dat soepel naar beneden valt met een zacht, metaalachtig geluid". Door op "Genereren" te klikken, werden er snel vier verschillende, oorverdovende varianten gegenereerd. Ik zal die resultaten niet laten zien. Dat is niet eerlijk tegenover wie dan ook.

In plaats daarvan werd de bewering aangepast naar een zachter "krekelgeluid in een veld" gedurende 12 seconden, om de volledige lengte van de video te vullen.

Het grote voordeel van de optie Geluidseffecten (SFX) is dat je meerdere geluidssporen kunt toevoegen en met behulp van handgrepen hun positie kunt aanpassen.

Doordat er onderaan het scherm een ​​tijdlijn loopt, voelt het meer aan als een echte audio-editor (tenminste tot op zekere hoogte). Versleep de volumeknoppen om het volume aan te passen of een track te verwijderen.

Is het de moeite waard?

Al met al zijn er een aantal aanpassingen aan de gebruikersinterface die ik graag zou zien om de productieworkflow te versnellen.

Ik denk niet dat het op korte termijn professionele geluidsontwerpers, componisten en muzikanten zal vervangen. Maar na mijn werk in de marketing zie ik wel degelijk een plek voor marketeers en voor het dagelijks maken van video's.

Spraak is enorm geëvolueerd sinds de tijd van de robotstemmen zoals die van Microsoft Sam, maar voor een accurate stemweergave gaat er niets boven een professionele spreker in een studio.

Geluidseffecten (SFX) bieden echter een veel groter voordeel. Over een breed scala aan generaties heen kon ik geen onderscheid maken tussen door AI gegenereerde geluiden en geluiden die op een oude SFX-cd stonden die ik bezat.

De echte winnaar hier is de functie "Muziek genereren". Zelfs de meest basale functie produceerde geluid dat niet misplaatst klonk in een productdemonstratie, recensie, zakelijke uitleg of iets dergelijks. En het werd steeds beter naarmate ik meer nummers genereerde.

Het is dus een update die zeker de moeite waard is om te bekijken voor snelle videoproductie.