Waarom ontbreken automatische ondertitels als een video muziek bevat?

Kort antwoord

De meeste tools voor automatische ondertitels gebruiken spraakherkenning die luistert in stukken van ongeveer 30 seconden. Als muziek, zang of heel snel praten een stuk lastig maakt, kan het model een deel ervan overslaan zonder foutmelding. Dan blijft er een gat over of blijft één woord in beeld hangen. Controleer lange gaten, transcribeer alleen dat stuk opnieuw of vul de ontbrekende regels zelf aan.

Bijgewerkt op 28 oktober 20264 min lezen

Waarom laat muziek ondertitels verdwijnen?

Spraakherkenning is vooral getraind op spraak. Zingen rekt woorden uit, en beats en instrumenten bedekken de klanken waarmee je woorden uit elkaar houdt. Onderzoek naar het transcriberen van gezongen teksten laat zien dat de nauwkeurigheid sterk per nummer verschilt, terwijl dezelfde tekst uitgesproken veel betrouwbaarder wordt herkend (NLP4MusA 2024).
Het luistert in stukken. Veelgebruikte modellen zoals Whisper verwerken audio in vensters van ongeveer 30 seconden. Als het model besluit dat een venster weinig spraak bevat, kan het eerder stoppen. Een ontbrekend stuk kan daardoor tot ongeveer een halve minuut duren.
Je krijgt geen waarschuwing. Het transcript lijkt compleet. Er verschijnt geen foutmelding.
Opnieuw proberen helpt zelden. Hetzelfde bestand nog eens verwerken geeft meestal hetzelfde gat.

Het komt het vaakst voor bij nummers en achtergrondmuziek, maar het kan ook gebeuren bij snel praten en in sommige talen.

Hoe weet ik of mijn ondertitels iets hebben overgeslagen?

Iemand praat of zingt, maar er verschijnen een paar seconden lang geen ondertitels.
Eén woord blijft veel langer in beeld dan het werd uitgesproken.
Na een muzikaal intermezzo kloppen de ondertitels niet meer met wat er wordt gezegd.

Speel vóór het publiceren elk stuk met muziek of overlappend geluid af.

Hoe los ik ontbrekende ondertitels op?

Transcribeer alleen het ontbrekende stuk opnieuw. Knip dat stuk als aparte korte clip uit en ondertitel het los. Een korte clip geeft het model een nieuwe start.
Ondertitel de stem voordat de muziek erbij komt. Heb je het project nog, transcribeer dan alleen het spraakspoor, of zet de muziek eerst zachter.
Typ korte gaten met de hand. Voor een regel of twee is dat vaak het snelst.
Gebruik een tool die gaten opnieuw controleert, zodat je ze niet zelf hoeft te zoeken.

Het hele spoor harder zetten is geen betrouwbare oplossing. In onze tests werden de gaten daar niet minder van.

Wat we in onze tests vonden

We hebben tientallen echte video's met nummers, achtergrondmuziek en snel praten onderzocht en vijf configuraties van drie spraakherkenningsdiensten naast elkaar vergeleken. Allemaal sloegen ze stukken over; geen enkele voorkwam het probleem helemaal.

Elk gat apart opnieuw controleren bracht de meeste ontbrekende woorden terug. Een klein deel van de teruggehaalde woorden, in onze tests ongeveer 3 op de 100, kwam niet overeen met een onafhankelijke transcriptie. Teruggehaalde tekst moet dus worden gecontroleerd voordat je hem toevoegt.

Zo pakt CaptionBolt het aan

De Diepe scan van CaptionBolt vindt de gaten en woorden die te lang blijven staan in je ondertitels en controleert elk ervan opnieuw, zodat je songteksten en dialogen die onder de muziek verstopt zitten terughaalt zonder ze opnieuw te typen.

Open je project en ga naar de Teksteditor.
Klik op Diepe scan.
Speel elk teruggehaald fragment af naast de originele audio en houd de fragmenten die je wilt.
Voeg ze in één stap toe. Je kunt het ongedaan maken.

De Diepe scan is beschikbaar in elk abonnement en kost geen verwerkingsminuten. Hij werkt bij projecten die in de afgelopen 14 dagen zijn geüpload. Kies bij een afgerond project eerst Opnieuw bewerken om een bewerkbare kopie te maken. Teruggehaalde regels zijn vaak in kleine letters en zonder leestekens, dus werk ze bij zoals elke andere ondertitel in de Teksteditor.

Wanneer zijn de woorden niet terug te halen?

Pure muziek, neuriën of een stem die verdwijnt onder lawaai of andere sprekers wordt misschien door geen enkele tool herkend. Typ die regels zelf. CaptionBolt maakt ondertitels vanuit zijn eigen transcript en importeert geen songtekst- of ondertitelbestanden. Wil je een kant-en-klare songtekst plakken, dan heb je een andere tool nodig.

Om de ondertitels op te maken zodra ze compleet zijn, zie hoe je ondertitels woord voor woord laat verschijnen.

Gerelateerde vragen

Automatische ondertitels spellen namen en producttermen steeds verkeerd. Hoe verbeter ik ze vóór het posten?

Lees het transcript voordat je exporteert en verbeter elke naam, elk merk en elke vakterm; spraakherkenning raadt onbekende woorden op basis van hoe ze klinken. Verbeter ze in een ondertiteleditor die de timing van elk woord behoudt, zodat correcties de ondertitels niet laten verschuiven, en controleer ook getallen en afkortingen. Duidelijk spreken helpt, maar de tekst lezen is de betrouwbare oplossing.

Hoe censureer ik scheldwoorden in mijn ondertitels?

Bewerk de ondertiteltekst om het woord te verbergen, bijvoorbeeld k*** of [piep], en beslis apart wat je met het geluid doet: laten staan, in een montageprogramma dempen of er een piep overheen zetten, of het moment eruit knippen. Ondertitels en geluid staan los van elkaar, dus de tekst censureren verandert niet wat mensen horen. Controleer ook de regels van het platform, want sommige herkennen grof taalgebruik in zowel stem als tekst.

Hoe verwijder of corrigeer ik ondertitels die al in een video zijn ingebrand?

Ingebrande ondertitels kun je niet echt verwijderen, omdat ze deel van het beeld zijn. Je kunt de ondertitelstrook wegsnijden, afdekken of vervagen, of een AI-tool proberen die over de tekst heen schildert, en elke oplossing heeft nadelen. De nette oplossing is teruggaan naar de originele video, of het project waarin je hem hebt gemaakt, en opnieuw exporteren zonder ondertitels of met gecorrigeerde ondertitels.

Mijn ondertitels lopen een paar seconden voor of achter – hoe herstel ik de timing?

Zoek uit welk soort verschuiving je hebt. Loopt elke regel evenveel voor of achter, verschuif dan het hele bestand met die waarde; zitten maar een paar regels fout, pas die regels aan; wordt het verschil steeds groter, dan is het bestand gemaakt voor een andere framerate of montage, dus schaal de timing opnieuw of maak nieuwe ondertitels van de uiteindelijke video. Controleer daarna het begin, het midden en het eind.