ElevenLabs: De AI Voice Over van de toekomst!

Kunstmatige intelligentie (AI) ontwikkelt zich razendsnel. Voor sommige is het eng en zijn ze bang hun baan te verliezen. Maar andere zien weer kansen. Zo ook wij, bij Strive. Al eerder schreven we over hoe je Chat GPT kunt gebruiken om je video concept proces te versnellen. Maar wist je dat er ook een geweldige (voorlopig) gratis AI Voice Over beschikbaar is? In dit artikel vertellen we je over ElevenLabs, over de AI voice over beta die ze beschikbaar hebben en over hoe wij het inzetten.

Wie is Elevenlabs?

ElevenLabs is opgericht in 2022 door Piotr Dabkowski en Mati Staniszewski. Piotr is een voormalige machine learning-ingenieur bij Google en Mati is een voormalige implementatie strategist bij Palantir. Hun bedrijf wordt gesteund door Credo Ventures, Concept Ventures en andere angel investors, oprichters, strategische operators en voormalige executives uit de branche.

De missie en visie van Elevenlabs

Elevenlabs heeft nieuwe tekst-naar-spraak modellen ontwikkeld die gebruik maken van geavanceerde compressie- en context technieken om menselijke spraak ultra realistisch te laten klinken. Ze bieden ook een reeks tools aan voor het klonen van stemmen en het ontwerpen van synthetische stemmen, gericht op het bieden van nieuwe creatieve mogelijkheden voor gebruikers in de creatieve branche wereldwijd.

Het onderzoek doen ze niet alleen voor eigen gewin, maar draagt ook bij aan het realiseren van het uiteindelijke doel om gesproken audio direct tussen talen te vertalen. De AI-dubbing-tool, die later dit jaar zal worden uitgebracht, stelt gebruikers in staat om automatisch elk audio- of videobestand in een andere taal te laten inspreken, terwijl de oorspronkelijke stem van de spreker behouden blijft.

De missie van Elevenlabs is om on-demand meertalige audiotoepassingen in verschillende sectoren zoals onderwijs, streaming, audioboeken, gaming, films en zelfs real-time gesprekken te realiseren.

Wij van Strive gebruiken de beta van Elevenlabs nu al een tijdje voor onze conceptfases en zijn enorm onder de indruk! Verder op in het artikel leggen we uit hoe je het zelf kunt gebruiken en waarom het interessant is om mee aan de slag te gaan. Maar eerst leggen we je uit wat AI Voice Over Technologie is.

Wat is AI Voice Over Technologie?

AI Voice Over Technologie maakt gebruik van geavanceerde algoritmen voor machinaal leren en natuurlijke taalverwerking om menselijke spraak na te bootsen en audio te genereren die klinkt alsof het door een menselijke spreker is opgenomen. Deze technologie kan bijvoorbeeld worden gebruikt om tekst-naar-spraak-conversies te automatiseren of om audio content te genereren voor verschillende toepassingen, zoals podcasts, video’s en audioboeken.

Door het gebruik van AI Voice Over Technologie kunnen bedrijven audiocontent op grote schaal genereren en opnemen zonder dat er een menselijke spreker aan te pas hoeft te komen. Dit kan de productiviteit verhogen en de kosten verlagen, waardoor het voor meer bedrijven mogelijk wordt om hoogwaardige audiocontent te produceren.

Bovendien kan deze technologie helpen bij het creëren van meertalige content, omdat de stem van een spreker kan worden gekloond en aangepast aan verschillende talen en accenten. AI Voice Over Technologie heeft dus de potentie om een revolutie teweeg te brengen in de manier waarop audio content wordt gecreëerd en geproduceerd.

Wat is het potentiële gevaar van AI Voice Over Technologie?

Net als bij elke technologie en nieuwe ontwikkeling, zijn er ook risico’s en gevaren verbonden aan AI Voice Over Technologie. Hier zijn een paar van de belangrijkste:

1. Misbruik van de technologie: AI Voice Over Technologie kan worden gebruikt om vals materiaal te maken, zoals nep nieuws of misleidende audio-opnames, en kan daarmee een bedreiging vormen voor de integriteit van informatie en betrouwbaarheid van communicatie.
2. Verlies van banen: Omdat AI Voice Over Technologie in staat is om spraak te genereren die klinkt als een menselijke spreker, kan het leiden tot verlies van banen in de entertainmentindustrie en de professionele stemacteurs.
3. Privacy: AI Voice Over Technologie kan worden gebruikt om het stemgeluid van een persoon op te nemen en te klonen zonder hun toestemming, waardoor privacyproblemen kunnen ontstaan.
4. Discriminatie: Er bestaat het risico dat AI Voice Over Technologie wordt gebruikt om ongepast of discriminerend materiaal te creëren, omdat de technologie kan worden getraind op basis van vooroordelen en stereotypen.

Hoe kan ik aan de slag met Elevenlabs?

Zoals we eerder al aangaven is het ideaal om ElevenLabs haar beta te gebruiken voor de conceptfases van je video en animatie proces. Als wij aan de slag zijn met het concept van een nieuw project, werken we als eerste een storyboard en script uit. Vervolgens schrijven we een voice over script. En dit is waar ElevenLabs aan de pas komt!

Om gelijk te horen hoe de voice over gaat klinken, zetten wij de tekst in de beta. Vervolgens selecteren we een mannelijke of vrouwelijke stem en luisteren we hoe het ‘flowt’ en klinkt. Hiermee krijgen wij al vrij snel het beeld of onze voice over tekst goed geschreven is. Door op de ‘refresh’ knop te klikken krijg je een nieuwe voice over met dezelfde stem maar in een andere tone of voice. Let op: Op de homepage kun je gebruik maken van maximaal 333 tekens. Als je een gratis account aanmaakt krijg je elke 30 dagen ruim 10.000 tekens om mee aan de slag te gaan.

Luister hieronder een voorbeeld van ElevenLabs die we speciaal voor dit blog gemaakt hebben:

Hoe Strive gebruikt maakt van ElevenLabs

Tevens zetten wij ElevenLabs vaak in een later stadium ook in. Voornamelijk voor eerste versies van een montage. Voordat wij een Voice Over artiest inhuren, editen wij de video en animatie. Met een AI Voice Over van ElevenLabs eronder kunnen wij alvast dingen timen. En zo krijgt de klant een eerste beeld van hoe een totaal video/animatie eruit komt te zien. Ook geeft dit de voice over artiest een beeld van hoe de snelheid van spreken zal moeten zijn, tevens als de tone of voice.

Voor nu werkt ElevenLabs nog niet in het Nederlands. Maar wij draaien dus ook veel buitenlandse producties.

Fun fact: Tijdens een project dat we afgelopen kwartaal draaide maakte we gebruik van ElevenLabs om de klant een beeld te geven van hoe de voice over zou gaan klinken. Na het inhuren van de professionele voice over kregen we als feedback dat de klant de AI Voice Over beter vond… Oeps! Gelukkig biedt ElevenLabs ook de optie om vanaf $ 5 Dollar per maand een commerciële license af te nemen. Waardoor je deze dus ook commercieel in kunt zetten.

Kosten van ElevenLabs

Als je ElevenLabs voor commerciële projecten in wil zetten, moet je rechten afnemen bij ElevenLabs. Gebruik je ze alleen in de conceptfases (zoals wij doen) of voor schoolprojecten is een gratis account voldoende. Zie hieronder de abonnementvormen die ze aanbieden:

Gratis	Starter: $ 5,00 Dollar Per maand (eerste maand 80% korting)	Creator: $ 22,00 Dollar per maand
Geen commerciële licentie 10.000 karakters per maand Creatie van 3 aangepaste stemmen Voice Design voor het maken van willekeurige stemmen API-toegang	Inclusief commerciële licentie 30.000 karakters per maand Creatie van 10 aangepaste stemmen Voice Design voor het maken van willekeurige stemmen Voice Cloning API-toegang	Inclusief commerciële licentie 100.000 karakters per maand Creatie van 30 aangepaste stemmen Voice Design voor het maken van willekeurige stemmen Voice Cloning API-toegang High Quality downloads

Independent Publisher: $ 99,00 Dollar Per Maand	Growing Business $ 330,00 Dollar Per maand
Inclusief commerciële licentie 500.000 karakters per maand Creatie van 160 aangepaste stemmen Voice Design voor het maken van willekeurige stemmen API-toegang High Quality downloads	Inclusief commerciële licentie 2.000.000 karakters per maand Creatie van 660 aangepaste stemmen Voice Design voor het maken van willekeurige stemmen Voice Cloning API-toegang High Quality downloads

100.000 karakters per maand staat gelijk aan ongeveer 2 uur aan audio. 500.000 karakters staat gelijk aan ongeveer 10 uur aan audio. 2.000.000 karakters per maand is ruim 40 uur aan audio.

Wil je aan de slag met ElevenLabs? Surf naar hun website door hier te klikken!

Veelgestelde vragen

Is ElevenLabs gratis?

Als je ElevenLabs wil proberen kan dit gratis door een account aan te maken. Let er wel op: je kan maar maximaal 10.000 karakters (+- 20 minuten aan audio) per maand gebruiken en je mag het niet commercieel inzetten.

Hoeveel kost ElevenLabs?

De kosten variëren. Zonder commerciële licentie kost het niets. Verder heb je de opties uit het starter pakket voor $ 5,00 per maand, het creator pakket van $ 22,00 dollar per maand, het Independent Publisher pakket van $ 99,00 per maand en het Growing Business pakket van $ 330,00 per maand.

Wie zijn de eigenaren van ElevenLabs?

Piotr Dabkowski en Mati Staniszewski hebben ElevenLabs opgericht. Piotr is een voormalige machine learning-ingenieur bij Google en Mati is een voormalige implementatie strategist bij Palantir.

Conclusie

AI Voice Over’s ontwikkelen zich razendsnel. Vooral ElevenLabs is op dit moment een van de voorlopers. Je kan het inzetten tijdens conceptfases, of al bij volledige producties. Bij Strive gaan we altijd mee in nieuwe ontwikkelingen en is dit dus ook een van de vele dingen waar wij mee experimenteren!

Dit vind je misschien ook interessant:

Bij Strive schrijven wij meer content over AI en hoe dit voor video en animatie interessant is. Zie hieronder meer wat je wellicht interessant vindt!

Hoe Chat GPT kan helpen bij het maken van video’s en animaties – Klik hier om meer te lezen