Как эффективно проверять переводы: советы и методы

(Продолжение, 1 часть, 2 часть)

Решение старо как менеджмент: независимый приёмщик. Вторая модель, другого производителя.

Одна и та же модель врёт одинаково. А мне нужно, чтобы они врали по-своему: там, где у одной слепое пятно, у другой - телескоп Хаббл.

Перевод делал Клод, поэтому взял проверяльщиков от OpenAI и сразу двух – самую сильную модель и чуть помладше. И они находили разные ошибки, их списки почти не пересекались.

Инструкция на этом этапе: сверять с оригиналом кусок за куском; искать расхождения смыслов. Отсутствие находок считать подозрительным. Проверяющий, у которого "всё отлично" - не добрый. Он просто не пришёл на работу и спит дома.

Успех: на каждую главу - список находок с цитатами, и от некоторых из них у меня был холодок между лопаток: “этого я бы сам не увидел никогда”.

Шаг 4. Пилотный проект перед серией.

Конвейер собран, рука сама тянется к рубильнику "поехали делать всю книгу".

Но первая тестовая глава показала главный дефект и он был не в работе исполнителя, а во мне. То есть проблема в требованиях заказчика. Кто управлял хоть одним проектом, сейчас кивнул. Кто не управлял - перечитайте предыдущую фразу, в ней пот и кровь профессии.

У меня так и было. Моё, любовно сформулированное и утверждённое правило глоссария на живом тексте выдало "требования к сознанию… это сложность сознания". В оригинале два разных слова; правило склеило их в одно, как жвачку и то, чем ты на неё сел. На одной главе это починилось за минуту. На всей книге - это часы переделок и настроение человека, отскабливающего упаковку “Дирола” со своей одежды.

Поэтому сначала пилот. Одна глава проходит весь путь. Перевод -> проверка -> мой разбор находок. Потом чиним правила.

И только потом - остальное, по главе за раз, чтобы подобные уроки, извлечённые из каждой главы, доезжали до остальных, а не приезжали всей толпой на похороны разваливающегося проекта.

Успех: после пилота у глоссария хоть одно переписанное правило. Провал на этом этапе звучит как безусловный успех.

Шаг 5. Калибровка контролёра.

На третьей главе выясняется прекрасное: твой проверяющий - тоже врун, просто другого сорта. И проверяющему - тому самому спасителю из шага 3 - тоже нельзя верить.

Врёт он двумя способами. Первый - лавина правок: стопицот находок на главу, все с пометкой "важно!", а действительно важных из них - меньше дюжины.

Это как врач, который на одном анализе крови нашёл больше диагнозов, чем у меня органов.

Способ второй: он *изобретает правила*. Наш на голубом глазу потребовал писать термин с ошибкой - со ссылкой на канон-которого-не-существует.

Любимый жанр всех проверяющих в истории человечества. Дай существу роль вахтёра - и оно как бешеный принтер начнёт печатать удобные для себя законы. Кремний, белок - без разницы.

(Продолжение, часть 4/5)

Подписывайтесь на Telegram Education Scaling Club.