Adobe Firefly introduceert AI-tools voor muziek en stem

In een recente publicatie beschrijft Adobe hoe het nieuwe generatieve AI-audio-tools heeft gelanceerd binnen Firefly. De tools, genaamd “Generate Soundtrack” en “Generate Speech”, zijn nu beschikbaar in publieke bèta, aldus The Verge.

De tool Generate Soundtrack analyseert een geüploade video en kiest op basis daarvan passende instrumentale muziek. Gebruikers kunnen aangeven of ze een stijl willen zoals lofi, hip-hop of EDM, of een stemming zoals “sentimenteel” of “agressief”. Vervolgens genereert het systeem vier varianten van maximaal vijf minuten per prompt. Adobe zegt dat het model getraind is op gelicenseerde muziek, waardoor commerciële rechten in orde zouden zijn.

Volgens Adobe’s leider generatieve AI, Alexandru Costin, zorgt dit ervoor dat makers muziek krijgen die direct samenwerkt met hun beelden, zonder dat zij zelf langdurig op zoek hoeven naar de juiste soundtrack.

Met de tool Generate Speech kun je tekst omzetten in gesproken audio of voice-overs. Het systeem biedt meer dan 50 stemmen in meer dan 20 talen. Gebruikers kunnen de stem aanpassen qua snelheid, pitch, emotie en zelfs uitspraak. Het idee is dat de tool voice-overs levert die direct bruikbaar zijn in video’s of andere audiovisuele content.

Adobe positioneert deze tools als onderdeel van een bredere inspanning om videoproductie eenvoudiger te maken. Zo is ook een web-gebaseerde Firefly-video-editor in ontwikkeling, waarin deze audio-tools samenkomen met beeldbewerking in één interface.

Voor videomakers en contentcreators kunnen deze tools tijd besparen: in plaats van zelf muziek te componeren of een stemacteur te vinden, kan een creator nu binnen korte tijd een compleet audiovisueel pakket samenstellen.

Tegelijkertijd roept de uitrol van deze technologie-tools ook vragen op. Het feit dat muziek wordt bedacht en stemmen gegenereerd kunnen worden, betekent dat er nieuwe aandacht nodig is voor auteursrecht, ethiek en transparantie. Adobe probeert dit op te vangen door te benadrukken dat hun trainingsdata gelicenseerd is en dat de output “commercieel veilig” gebruikt kan worden. Daarmee onderscheidt het zich van andere diensten die al juridische problemen hebben gehad met hun trainingsdata.

Voor makers blijft het belangrijk om te checken hoe de output gebruikt wordt. Hoewel de tools veel werk uit handen nemen, blijft het nodig kritisch te kijken: past de stem goed bij je doelgroep, is de muziek echt in lijn met je creatieve visie, en welke rechten gelden er precies voor de output?

De introductie van deze audio-AI-tools laat zien dat generatieve AI steeds verder doordringt in creatieve workflows – niet alleen voor beelden of video’s, maar ook voor muziek en spraak. Voor makers kan dit kansen openen, maar het vraagt ook om nieuwe vaardigheden en bewuste keuzes: het opgeven van volledige manuele controle is geen voorwaarde.

Deze tools maken duidelijk hoe snel de technologie vordert, maar ook hoe creativiteit en controle tegelijk opnieuw vorm moeten krijgen. Voor wie video’s maakt, is dit moment er één om te verkennen wat deze tools kunnen, en tegelijkertijd scherp te blijven op kwaliteit, rechten en sturing.