1. Общее устройство системы перевода в Badoo 2. Лексемы, интеграция с таск-трекером 3. Иерархия языков, интерфейс перевода 4. Выделение лексем из текста: парсер, знающий HTML 5. Интеграция с git: многоверсионная система хранения лексем

1. Система перевода
в Badoo
Badoo, Юрий Насретдинов
y.nasretdinov@corp.badoo.com

2. • 177+ млн пользователей
• PHP-FPM: 30+ тыс запросов в сек
• 140 тыс регистраций в день
• 3 млн фото / видео в день
• 50 языков интерфейса
О компании

3. Система перевода
Hello

4. Система перевода
Привет
‫שלום‬
Bonjour

5. Blitz-шаблоны
<h1>Results</h1>
<!-- BEGIN NOTHING -->
No results found
<!-- END NOTHING -->
<!-- BEGIN RESULT -->
<div>
Name {{name}}, {{score}}
</div>
<!-- END RESULT -->

6. Linc-файлы (тексты)

7. Blitz-шаблоны
• Шаблоны обрабатываются с
помощью движка Blitz
• С помощью умного алгоритма™
выделяются куски текста:
лексемы

8. Blitz-шаблоны
<h1>Results</h1>
<!-- BEGIN NOTHING -->
No results found
<!-- END NOTHING -->
<!-- BEGIN RESULT -->
<div>
Name {{name}}, {{score}}
</div>
<!-- END RESULT -->
root_0: #1
NOTHING:
NOTHING_0: #2
RESULT:
RESULT_0: #3
#3

9. Генерация файлов
<h1>Results</h1>
<!-- BEGIN NOTHING -->
No results found
<!-- END NOTHING -->
<!-- BEGIN RESULT -->
<div>
Name {{name}},
{{score}}
</div>
<!-- END RESULT -->
<h1>Результаты</h1>
<!-- BEGIN NOTHING -->
Результатов не найдено
<!-- END NOTHING -->
<!-- BEGIN RESULT -->
<div>
Имя {{name}},
{{score}}
</div>
<!-- END RESULT -->

10. Генерация файлов
• Нет специальных маркеров
лексем
• Пре-генерируются шаблоны,
переведенные на все языки
• + 100 000 файлов при деплое

11. Лексемы
• Каждая лексема получает свой
идентификатор (Lexem_id)
• Даже лексемы с тем же текстом
каждый раз* получают новый id
• Переводчики могут независимо
поменять любой текст на сайте
* В новом контексте

12. Типичный workflow
ZAPILIT-1Задача:
Ветка:
ZAPILIT-1_done_job
(7bf41e1cae80ec6)
+ file1.tpl
- file2.php
M file3.tpl

13. Типичный workflow
Лексемы:
ZAPILIT-1:
3 новых
5 изменено
Деплой: git merge ZAPILIT-1

14. Типичный workflow
Лексемы:
ZAPILIT-1:
3 новых
5 изменено
Деплой: git merge ZAPILIT-1

15. Mini-staging: «шоты»
• Staging из текущей ветки
• Быстрое создание
• Лексемы попадают на перевод во
время тестирования задачи
• Позволяют сократить время
ожидания переводчиков

16. Иерархия языков
Master
Devel
English (UK) Portuguese (Brazil)
Portuguese (Portugal)

17. Иерархия языков
• Отдельный язык — Devel
• Сначала переводится на Master
• Перевод наследуется от родителя

18. Проблемы с git?

19. Интеграция с git

20. Проблемы с git
• Один файл могут редактировать в
разных ветках одновременно
• Ветки могут мержить друг в друга
• Нужно сохранять id лексем после
мержа двух версий файла

21. Хранение данных
• Полная структура
файла хранится в
базе данных
• Каждой лексеме в
файле выдается
уникальный id
root_0: #1
NOTHING:
NOTHING_0: #2
RESULT:
RESULT_0: #3

22. Что делать?
• «Контекст» лексемы #3:
«RESULT / RESULT_0»
• Уровень вложенности
блоков имеет значение
• Лексемы с тем же
содержимым имеют
такое же название
лексемы (RESULT_0)
root_0: #1
NOTHING:
NOTHING_0: #2
RESULT:
RESULT_0: #3

23. Интеграция с git
• Хранятся мастер-версии и диффы
к мастеру
• Между собой диффы не
мержатся
• Лексемы в том же контексте
получают тот же id

24. Сохранение id лексем
root_0: #1
NOTHING:
NOTHING_0: #2
root_0: #1
RESULT:
RESULT_0: #3
+
Задача1 Задача2

25. Сохранение id лексем
root_0: #1
NOTHING:
NOTHING_0: #2
RESULT:
RESULT_0: #3
Задача1
Задача2

26. Summary
• Лексемы выделяются автоматически
из HTML-кода и linc-файлов
• Полная прегенерация шаблонов
• Интеграция с git и таск-трекером
• Задачи попадают на перевод в момент
начала тестирования задачи

27. Вопросы

28. Спасибо за
внимание!
Badoo, Юрий Насретдинов
y.nasretdinov@corp.badoo.com
twitter.com/YNasretdinov

29. Интерфейс