Hoe controleer je een AI-vertaling in een taal die je niet spreekt

Dit is het bezwaar dat de meeste meertalige projecten stopt, en het is een terecht punt. Je kunt in een middag een Poolse versie van je site genereren. Je kunt echter geen woord ervan lezen. Het publiceren ervan voelt als het ondertekenen van een document in het donker.

De instinctieve reactie is om een moedertaalspreker in te huren om alles te lezen. Dat werkt, maar het kost meer dan de vertaling zelf. Het betere antwoord is dat je de betekenis niet hoeft te verifiëren om bijna elke relevante fout te ontdekken, omdat machinevertaling op specifieke, vindbare manieren faalt.

Wat gaat er mis, en wat niet

We hebben elf modellen getest op echte productteksten in verschillende talen, elk twee keer. Hierbij scoorden we op verifieerbare criteria in plaats van op indrukken. Twee resultaten veranderden onze kijk op het revisieproces.

Grammatica is niet langer het probleem. Geen van de elf modellen produceerde een zin die een moedertaalspreker als fout zou bestempelen. De fouten zaten in terminologie en register: een productfamilie die halverwege een andere naam kreeg, een handelsmerk dat "behulpzaam" was vertaald, of een formeel register terwijl het merk informeel is.

De defecten zijn systematisch, niet willekeurig. Het twee keer draaien van dezelfde segmenten leverde dezelfde fouten op. Dat is het meest bruikbare feit voor een revisor: je bent niet aan het gokken in een loterij. Als een model een zinsconstructie slecht behandelt, doet het dat overal. Eén keer een fout vinden vertelt je dus waar alle andere fouten zitten.

Dit betekent ook dat een kleine, goed gekozen steekproef echt informatief is. Met vijftien pagina's vang je niet alles, maar de categorieën fouten die je in vijftien pagina's vindt, zijn de categorieën die aanwezig zijn in de overige tweeduizend.

De controles die geen taalkennis vereisen

Begin hier, want deze controles vangen de fouten op die je publiekelijk in verlegenheid brengen, en geen enkele vereist dat je een zin begrijpt.

Cijfers, eenheden en codes. Prijzen, afmetingen, gewichten, productreferenties, SKU's, modelnummers. Zet de bron en de vertaling naast elkaar en vergelijk de cijfers. Een model dat 250 g verandert in 205 g, of een productreferentie herschrijft, is een probleem dat je kunt zien zonder te lezen.

Layout en lengte. Duits en Pools vallen langer uit. Als je knoppen, menu-items of tabelkoppen een vaste breedte hebben, lopen ze vast. Open de doeltaalsite op mobiel formaat en kijk of tekst buiten het kader valt, koppen naar drie regels springen, of dat een navigatiebalk ongemerkt is verschoven.

Onvertaalde resten. Scan op woorden in de brontaal in de vertaalde pagina's. Een enkele Engelse knop in een Spaanse checkout is schadelijker voor het vertrouwen dan een onhandige zin, en het is eenvoudig te zien.

Links en opmaak. Elke link in de bron moet bestaan in de vertaling. Dit is belangrijker dan het klinkt: een vertaling die een zin vereenvoudigt, kan ongemerkt de anchor-tekst verwijderen en de tekst achterlaten zonder link. Vergelijk het aantal links per pagina.

Het functionele pad. Voeg toe aan winkelwagen, afrekenen, betalingsstap, bevestigingspagina, bevestigingsmail, factuur. Doe dit in de doeltaal. Je bent niet aan het lezen, je controleert of elke stap in één taal is en of er niets halverwege terugvalt naar de brontaal.

Deze lijst duurt minder dan een uur op een site van elke omvang, en hier ligt het grootste deel van het werkelijke risico.

De controles die een beetje hulp nodig hebben

Voor de betekenis heb je meer nodig dan alleen je eigen ogen, maar veel minder dan een volledige menselijke revisie.

Back-translation, correct gebruikt. Vertaal een steekproef van de doeltekst terug naar je eigen taal met een ander model en lees dat. Het zal je niet vertellen of de stijl goed is, maar het vertelt je wel duidelijk wanneer de betekenis is verschoven: een claim die sterker is geworden, een garantie die is verschenen, of een ontkenning die is verdwenen. Gebruik dit voor je juridische pagina's, garanties en belangrijkste productclaims, niet voor alles.

Een tweede model als revisor. Vraag een ander model om terminologische inconsistenties en registerverschillen in de vertaalde tekst op te sommen, zonder deze te herschrijven. Het is goed in precies de fouten die we hebben gemeten: dezelfde term die op drie manieren wordt vertaald, of formaliteit die halverwege de pagina wisselt. Behandel de output als een lijst met verdachte punten, niet als een eindoordeel.

Je eigen woordenlijst als test. Als je een lijst hebt met termen die nooit vertaald mogen worden of altijd op een bepaalde manier vertaald moeten worden, is het controleren een zoekopdracht, geen leesoefening. Zoek in de vertaalde site naar elke term en tel het aantal. Dit geeft de beste verhouding tussen vertrouwen en inspanning in het hele proces.

Wanneer een mens betalen de moeite waard is

Sommige revisie vereist nog steeds een moedertaalspreker. De truc is om een uur van hun tijd te kopen in plaats van een week, en dat uur te besteden aan de juiste pagina's.

Geef ze je homepage, je twee best verkopende productpagina's, je leverings- en retourbeleid en je checkout. Stel drie vragen, en vraag niet "is dit goed":

1. Klinkt dit als een bedrijf waar je iets van zou kopen, of als een vertaling?
2. Is het niveau van formaliteit correct voor deze markt en dit soort bedrijf?
3. Staan hier termen die een klant in deze markt niet zou gebruiken?

Dat is een klus van een uur voor een freelancer, het kost minder dan een diner, en het vangt de register- en vocabulaireproblemen op die geen enkele automatische controle zal onthullen. Pas daarna wat zij je vertellen toe op de woordenlijst, zodat de correctie doorwerkt in alles wat je daarna vertaalt.

De markt zelf is een revisor

Zodra de site live is, krijg je feedback die geen enkele revisor je kan geven.

Search Console vertelt je op welke zoekopdrachten je vertaalde pagina's daadwerkelijk scoren. Als een pagina scoort op termen die je niet had verwacht, zijn je vertaalde titels technisch correct maar commercieel onjuist. Dat is een signaal, geen fout.

Het bouncepercentage en het toevoegpercentage aan de winkelwagen per taal vertellen je waar de tekst zijn werk niet doet. Een taal waarvan de productpagina's wel verkeer krijgen maar geen verkopen, heeft meestal een vertrouwensprobleem. De vertrouwenspagina's, zoals levering, retour en contact, zijn bijna altijd de pagina's die niemand heeft nagelezen.

En e-mails van klanten zijn de eerlijkste bron die je hebt. Twee verwarde berichten over dezelfde zin zijn meer waard dan een middag reviseren.

Het pragmatische standpunt

Je kiest niet tussen een perfecte vertaling en een risicovolle vertaling. Je kiest tussen een machinevertaling die je verstandig controleert en helemaal geen versie van je site in die markt.

Controleer de mechanische zaken, waarvoor geen taalkennis nodig is. Neem doelgerichte steekproeven, omdat defecten zich herhalen. Koop een uur menselijke revisie voor de pagina's die verkopen. Stop wat je leert in een woordenlijst zodat het van toepassing is op alles wat je later vertaalt. Publiceer daarna, houd de cijfers in de gaten en verbeter de pagina's waarvan de markt zegt dat ze verbetering behoeven.

Dat proces is waarom we de translation editor hebben gebouwd rondom het in-place bewerken van gepubliceerde pagina's in plaats van rond een belofte van perfectie: de eerste versie brengt je in de markt, en de correcties die je daarna aanbrengt, zijn de correcties die er echt toe doen.