Så kontrollerar du en AI-översättning på ett språk du inte kan

Detta är invändningen som stoppar de flesta flerspråkiga projekt, och det är en befogad sådan. Du kan generera en polsk version av din webbplats på en eftermiddag. Du kan inte läsa ett ord av den. Att publicera den känns som att skriva under ett dokument i mörkret.

Instinkten är att anlita en modersmålstalare för att läsa allt. Det fungerar, och det kostar mer än själva översättningen gjorde. Det bättre svaret är att du inte behöver verifiera innebörden för att fånga nästan varje fel som spelar någon roll, eftersom maskinöversättning misslyckas på specifika och sökbara sätt.

Vad går egentligen fel, och vad gör det inte

Vi utvärderade elva modeller på riktiga produkttexter över flera språk, två gånger vardera, och bedömde dem utifrån verifierbara kriterier snarare än intryck. Två resultat förändrade hur vi ser på granskning.

Grammatik är inte längre problemet. Inte en enda av de elva producerade en mening som en modersmålstalare skulle kalla trasig. Bristfälligheterna låg i terminologi och register: en produktfamilj som bytte namn halvvägs, ett varumärke som översatts lite för hjälpsamt, eller ett formellt register där varumärket är informellt.

Defekterna är systematiska, inte slumpmässiga. Att köra samma segment två gånger gav samma fel. Det är det enskilt viktigaste faktumet för en granskare: du tar inte slumpmässiga stickprov. Om en modell hanterar en konstruktion dåligt, hanterar den den dåligt överallt, så att hitta ett fel en gång berättar var alla andra finns.

Det innebär också att ett litet, välvalt urval är genuint informativt. Femton sidor fångar inte allt, men de kategorier av fel du hittar på femton sidor är de kategorier som finns på de övriga två tusen.

Kontrollerna som inte kräver några språkkunskaper alls

Börja här, eftersom dessa fångar de fel som är pinsamma offentligt, och ingen av dem kräver att du förstår en enda mening.

Siffror, enheter och koder. Priser, dimensioner, vikter, produktreferenser, SKU:er, modellnummer. Placera källtexten och översättningen sida vid sida och jämför siffrorna. En modell som gör om 250 g till 205 g, eller skriver om en produktreferens, är ett problem du kan se utan att kunna läsa språket.

Layout och längd. Tyska och polska tenderar att bli långa. Om dina knappar, menyalternativ eller tabellrubriker har fast bredd kommer de att gå sönder. Öppna webbplatsen på målspåret i mobilvy och leta efter text som flyter utanför sin behållare, rubriker som radbryts till tre rader, eller en navigeringsmeny som har flyttat på sig.

Oöversatta rester. Skanna efter ord från källspråket på de översatta sidorna. En enstaka engelsk knapp i en spansk kassa skadar förtroendet mer än en klumpig mening, och det är trivialt att upptäcka.

Länkar och formatering. Varje länk i källan bör finnas i översättningen. Detta är viktigare än det låter: en översättning som förenklar en mening kan tyst ta bort ankaret och lämna texten utan länk. Jämför antalet länkar per sida.

Den funktionella vägen. Lägg i varukorgen, kassan, betalningssteget, bekräftelsesidan, bekräftelsemailet, fakturan. Gör detta på målspåret. Du läser inte, du kontrollerar att varje steg är på samma språk och att ingenting faller tillbaka till källspråket halvvägs.

Den listan tar under en timme på en webbplats av vilken storlek som helst och det är här de flesta av de verkliga riskerna finns.

Kontrollerna som behöver lite hjälp

För att förstå innebörden behöver du mer än bara dina egna ögon, men betydligt mindre än en fullständig mänsklig granskning.

Återöversättning, när den används korrekt. Översätt ett urval av måltexten tillbaka till ditt eget språk med en annan modell, och läs det. Det kommer inte att berätta om stilen är bra. Det berättar tydligt när innebörden har förskjutits: ett påstående som blivit starkare, en garanti som dykt upp, en negation som försvunnit. Använd det på juridiska sidor, garantier och dina främsta produktpåståenden, inte på allt.

En andra modell som granskare. Be en annan modell att lista terminologiska inkonsekvenser och registerskiften i den översatta texten, utan att skriva om den. Den är bra på exakt de fel vi mätte: samma term översatt på tre sätt, eller formell ton som blir informell mitt på sidan. Behandla resultatet som en lista över misstänkta, inte som en dom.

Din egen ordlista som test. Om du har en lista med termer som aldrig får översättas eller som alltid måste översättas på ett visst sätt, är kontrollen en sökning, inte en läsövning. Sök på den översatta webbplatsen efter varje term och räkna. Detta ger den högsta graden av konfidens i förhållande till arbetsinsatsen i hela processen.

Var en människa är värd att betala för

En del granskning kräver fortfarande en modersmålstalare. Tricket är att köpa en timmes arbete istället för en vecka, och att lägga den timmen på rätt sidor.

Ge dem din startsida, dina två bäst säljande produktsidor, din leverans- och returpolicy samt din kassa. Ställ tre frågor, och inte "är det här bra":

1. Låter detta som ett företag du skulle köpa från, eller som en översättning?
2. Är formalitetsnivån rätt för denna marknad och denna typ av verksamhet?
3. Finns det termer här som en kund på denna marknad inte skulle använda?

Det är ett en-timmarsjobb för en frilansare, det kostar mindre än en middag, och det fångar upp de register- och vokabulärproblem som ingen automatisk kontroll kommer att hitta. Tillämpa sedan vad de säger på din ordlista, så sprider sig korrigeringen till allt du översätter efteråt.

Marknaden själv är en granskare

När webbplatsen väl är live får du feedback som ingen granskare kan ge dig.

Search Console visar vilka sökfrågor dina översatta sidor faktiskt matchar. Om en sida rankar för termer som inte är de du förväntade dig, är dina översatta titlar tekniskt korrekta men kommersiellt felaktiga. Det är en signal, inte ett misslyckande.

Avvisningsfrekvens och konverteringsgrad per språk visar var texten inte gör sitt jobb. Ett språk vars produktsidor får trafik men inga köp har oftast ett förtroendeproblem, och sidorna för förtroende, leverans, returer och kontakt är nästan alltid de som ingen läste igenom.

Och kundmejl är den ärligaste källan du har. Två förvirrade meddelanden om samma mening är värda mer än en hel eftermiddag av granskning.

Den pragmatiska positionen

Du väljer inte mellan en perfekt översättning och en riskabel en. Du väljer mellan en maskinöversättning som du granskar förnuftigt och ingen version av din webbplats alls på den marknaden.

Kontrollera de mekaniska sakerna som inte kräver språk. Gör medvetna stickprov eftersom felen upprepar sig. Köp en timmes mänsklig granskning för de sidor som säljer. Lägg in det du lär dig i en ordlista så att det gäller allt du översätter senare. Publicera sedan, håll koll på siffrorna, och förbättra de sidor som marknaden säger åt dig att förbättra.

Den processen är anledningen till att vi byggde translation editor kring att redigera publicerade sidor på plats snarare än kring ett löfte om perfektion: den första versionen tar dig in på marknaden, och korrigeringarna du gör efteråt är de som faktiskt spelar roll.