Jak sprawdzić tłumaczenie AI w języku, którego nie znasz

To zarzut, który zatrzymuje większość projektów wielojęzycznych, i jest on jak najbardziej słuszny. Możesz wygenerować polską wersję swojej strony w jedno popołudnie, ale nie rozumiesz w niej ani słowa. Publikowanie jej przypomina podpisywanie dokumentu w ciemności.

Naturalnym odruchem jest zatrudnienie native speakera do przeczytania wszystkiego. To działa, ale kosztuje więcej niż samo tłumaczenie. Lepsza odpowiedź jest taka, że nie musisz weryfikować sensu tekstu, aby wyłapać niemal każdy istotny błąd, ponieważ tłumaczenie maszynowe zawodzi w określony i łatwy do zidentyfikowania sposób.

Co faktycznie idzie nie tak, a co nie

Przetestowaliśmy jedenaście modeli na rzeczywistych opisach produktów w kilku językach, dwukrotnie każdy z nich, oceniając je na podstawie weryfikowalnych kryteriów, a nie wrażeń. Dwa wyniki zmieniły nasze podejście do recenzji:

Gramatyka nie jest już problemem. Żaden z jedenastu modeli nie stworzył zdania, które native speaker uznałby za niepoprawne. Błędy dotyczyły terminologii i rejestru językowego: nazwa rodziny produktów zmieniona w połowie tekstu, znak towarowy przetłumaczony zbyt dosłownie, formalny rejestr w miejscu, gdzie marka jest nieformalna.

Wady są systematyczne, a nie losowe. Uruchomienie tych samych fragmentów dwukrotnie dało te same błędy. To najważniejszy fakt dla recenzenta: nie losujesz tutaj wyników. Jeśli model radzi sobie źle z daną konstrukcją, robi to wszędzie, więc znalezienie błędu raz wskazuje, gdzie znajdują się wszystkie inne.

Oznacza to również, że mała, dobrze dobrana próbka jest autentycznie miarodajna. Piętnaście stron nie wyłapie wszystkiego, ale kategorie błędów, które na nich znajdziesz, są tymi samymi kategoriami, które występują w pozostałych dwóch tysiącach.

Kontrole, które nie wymagają żadnej znajomości języka

Zacznij od tego, ponieważ te kroki wyłapują błędy, które mogą narazić Cię na publiczne zażenowanie, a żaden z nich nie wymaga zrozumienia ani jednego zdania.

Liczby, jednostki i kody. Ceny, wymiary, wagi, odnośniki do produktów, SKU, numery modeli. Umieść tekst źródłowy i tłumaczenie obok siebie i porównaj cyfry. Model, który zmienia 250 g na 205 g lub przepisuje numer produktu, to problem, który zauważysz bez czytania.

Układ i długość. Język niemiecki i polski bywają długie. Jeśli Twoje przyciski, elementy menu lub nagłówki tabel mają stałą szerokość, mogą się zepsuć. Otwórz stronę w wersji mobilnej i sprawdź, czy tekst nie wycieka z kontenerów, nagłówki nie zawijają się do trzech linii lub czy pasek nawigacji nie uległ niespodziewanemu przełamaniu.

Pozostałości w języku źródłowym. Przeskanuj strony w poszukiwaniu słów w języku źródłowym. Pojedynczy angielski przycisk w hiszpańskim koszyku zakupowym podważa zaufanie bardziej niż niezdarne zdanie, a bardzo łatwo go zauważyć.

Linki i formatowanie. Każdy link ze źródła powinien istnieć w tłumaczeniu. To ważne: tłumaczenie, które upraszcza zdanie, może niechcący usunąć zakotwiczenie i pozostawić tekst bez linku. Porównaj liczbę linków na każdej stronie.

Ścieżka funkcjonalna. Dodaj do koszyka, przejdź do kasy, płatność, strona potwierdzenia, e-mail z potwierdzeniem, faktura. Zrób to w docelowym języku. Nie czytasz, tylko sprawdzasz, czy każdy krok jest w jednym języku i czy nic nie przełącza się w połowie na język źródłowy.

Ta lista zajmuje mniej niż godzinę na stronie dowolnej wielkości i to właśnie tutaj kryje się największe ryzyko.

Kontrole, które wymagają niewielkiej pomocy

Jeśli chodzi o znaczenie, potrzebujesz czegoś więcej niż własnych oczu, ale znacznie mniej niż pełnej ludzkiej korekty.

Tłumaczenie zwrotne (back-translation), użyte poprawnie. Przetłumacz próbkę tekstu docelowego z powrotem na swój język za pomocą innego modelu i przeczytaj to. Nie powie Ci to, czy styl jest dobry. Powie Ci jednak wyraźnie, kiedy znaczenie uległo zmianie: stwierdzenie, które stało się mocniejsze, gwarancja, która się pojawiła, czy negacja, która zniknęła. Stosuj to do stron prawnych, gwarancji i głównych opisów produktów, a nie do wszystkiego.

Drugi model jako recenzent. Poproś inny model o wypisanie niespójności terminologicznych i zmian rejestru w przetłumaczonym tekście bez jego przepisywania. Modele świetnie radzą sobie z błędami, które zmierzyliśmy: ten sam termin oddany na trzy sposoby, formalność zmieniająca się w środku strony. Traktuj wynik jako listę podejrzanych, a nie wyrok.

Twój własny glosariusz jako test. Jeśli masz listę terminów, które nigdy nie powinny być tłumaczone lub zawsze powinny być tłumaczone w określony sposób, sprawdzanie tego jest wyszukiwaniem, a nie czytaniem. Przeszukaj stronę pod kątem każdego terminu i policz wystąpienia. To najwyższy stosunek pewności do wysiłku w całym procesie.

Kiedy warto zapłacić człowiekowi

Niektóre poprawki nadal wymagają native speakera. Sztuczka polega na tym, by kupić godzinę jego pracy zamiast tygodnia i poświęcić ją na właściwe strony.

Daj im stronę główną, dwie najlepiej sprzedające się strony produktów, politykę dostaw i zwrotów oraz stronę kasy. Zadaj trzy pytania, a nie „czy to jest dobre”:

1. Czy brzmi to jak firma, od której sam byś kupił, czy jak tłumaczenie?
2. Czy poziom formalności jest odpowiedni dla tego rynku i rodzaju działalności?
3. Czy są tu terminy, których klient na tym rynku by nie użył?

To godzina pracy dla freelancera, kosztuje mniej niż obiad, a wyłapuje problemy z rejestrem i słownictwem, których nie wykryje żadna zautomatyzowana kontrola. Następnie wprowadź ich uwagi do glosariusza, a korekta rozprzestrzeni się na wszystko, co przetłumaczysz później.

Sam rynek jest recenzentem

Gdy strona jest aktywna, otrzymujesz informacje zwrotne, których nie przekaże Ci żaden recenzent.

Search Console podpowie Ci, z jakimi zapytaniami faktycznie pasują Twoje przetłumaczone strony. Jeśli strona rankuje na terminy, których się nie spodziewałeś, Twoje przetłumaczone tytuły są technicznie poprawne, ale biznesowo błędne. To sygnał, a nie porażka.

Współczynnik odrzuceń i konwersji (dodania do koszyka) na język pokazuje, gdzie treść nie spełnia swojego zadania. Język, którego strony produktów mają ruch, ale nie mają sprzedaży, zazwyczaj cierpi na problem z zaufaniem. Strony dotyczące zaufania, dostawy, zwrotów i kontaktu są niemal zawsze tymi, których nikt nie przeczytał ponownie.

A wiadomości od klientów są najbardziej uczciwym źródłem, jakie masz. Dwie zdezorientowane wiadomości o tym samym zdaniu są warte więcej niż popołudnie recenzji.

Pragmatyczne podejście

Nie wybierasz między idealnym tłumaczeniem a ryzykownym. Wybierasz między tłumaczeniem maszynowym, które rozsądnie weryfikujesz, a brakiem jakiejkolwiek wersji Twojej strony na danym rynku.

Sprawdź rzeczy techniczne, które nie wymagają znajomości języka. Próbkuj świadomie, ponieważ błędy się powtarzają. Kup godzinę pracy native speakera dla stron, które sprzedają. Włóż to, czego się dowiedziałeś, do glosariusza, aby stosowało się do wszystkiego, co przetłumaczysz później. Następnie publikuj, obserwuj liczby i poprawiaj te strony, które rynek każe Ci poprawić.

Ten proces jest powodem, dla którego zbudowaliśmy translation editor wokół edycji opublikowanych stron w miejscu, zamiast wokół obietnicy perfekcji: pierwsza wersja wprowadza Cię na rynek, a poprawki, które wprowadzasz później, są tymi, które naprawdę mają znaczenie.