Основные кейсы использования Тарантула: 1. Когда нужна OLTP-система, позволяющая обрабатывать транзакции в режиме почти реального времени (с милисекундными задержками) и/или с огромной пропускной способностью (сотни тысяч запросов в секунду). Примеры — система сессий, система антибрутфорса, система противодействия атакам, система очередей и пуш-уведомлений, роутинг запросов между серверами. Далее - http://backendconf.ru/2016/abstracts/2096.html

1. Tarantool – use cases

2. Tarantool
• Что такое Tarantool?

3. Tarantool
• Что такое Tarantool?
• Tarantool – это очень-очень быстрая СУБД с сервером приложений на
борту

4. Tarantool
• Что такое Tarantool?
• Tarantool – это очень-очень быстрая СУБД с сервером приложений на
борту
• Почему Tarantool?

5. Tarantool
• Что такое Tarantool?
• Tarantool – это очень-очень быстрая СУБД с сервером приложений на
борту
• Почему Tarantool?
• Чтобы ответить на этот вопрос, надо посмотреть на кейсы

6. Tarantool
• Что такое Tarantool?
• Tarantool – это очень-очень быстрая СУБД с сервером приложений на
борту
• Почему Tarantool?
• Чтобы ответить на этот вопрос, надо посмотреть на кейсы
• Но если кратко, то Tarantool
• Быстрый во всех смыслах этого слова
• Экономный
• Универсальный
• Простой

7. Tarantool - кейсы использования
• Быстрый OLTP (онлайн обработка транзакций)
• Быстрый OLAP (онлайн аналитика)
• Экономия денег
• Устранение зоопарков
• Быстрое и надежное кэширование
• Сервер приложений внутри СУБД, интеграция нескольких СУБД
• Быстрая разработка фич, микросервисы, минимально времени на борьбу с
высокой нагрузкой
• Упрощение эксплуатации
• IoT-платформа

8. Быстрый OLTP
• Транзакции в почти реальном времени
• Latency порядка 1 миллисекунды
• Огромная пропускная способность – сотни тысяч или даже миллионы QPS
Примеры:
- Система сессий
- Очереди
- Пуш-уведомления
- Роутинг запросов (для шардинга)

9. Система сессий
Auth
Tarantool
Authentication
Web
server
1M QPS!
Read/Write
User

10. Очереди
Queue Tarantool
Push/pop
Web
server
?K QPS! Read/Write
Back-
end
Push

11. Пуш-уведомления
Queue
Cluster
Events
News
Email
myMail
cloud
app
Queue
ClusterQueue
Cluster
Queue
ClusterQueue
ClusterStorage
Cluster
iOS
API
Android
API
Mobile
Phone/T
ablet
Mobile
Phone/T
ablet

12. Роутинг запросов (шардинг)
Backend
Tarantool
Query
Web
server
200-300K QPS!
BackendBackendBackendBackend

13. Быстрый OLAP
• Аналитика в реальном времени
• Много источников данных
• Надо провести аналитику и принять решение в режиме реального времени
Примеры:
- Система онлайн рекламы
- Антиспам
- «Разбери свой ящик»
- Антибрутфорс
- Антифрод

14. Система онлайн рекламы
Web
server
Source
Of
data
10+ ad units
Web
serverWeb
server
Ad
system
Source
Of
data
Source
Of
data

15. Антиспам
Web
server
Taranto
ol
Web
serverMX
Anti
Spam
Taranto
ol
Taranto
ol
Taranto
olTarantool
Classification
Clusterization

16. «Разбери свой ящик»
Web server
Tarantool
Web server
Web
Sort folders
Make decision
10 milliseconds

17. Антибрутфорс
Auth
Tarantool
Web
server
Anti
Brute
Force
200K QPS!
Read/Write

18. Антифрод
Tarantool
Web
server
Anti
fraud
Force
?K QPS!
Read/Write

19. Экономия денег
• Уменьшаем количество серверов
• Убираем плату за лицензию
• Снижаем цену поддержки
Примеры:
- Mail.Ru – профили пользователей
- Mail.Ru – офлайн-сообщения Mail.Ru Agent
- Mail.Ru – система токенов для сборщиков почты

20. Профили
Web server
Page load
Ajax request
Mobile API call
Web server
Web
server
Tarantool
1M QPS!
8x, 15% CPU

21. Офлайн-сообщения Mail.Ru Agent
Web server
Save a message
Load messages
Web server
MRIM
Tarantool
100-200K QPS!
500Gb

22. Система токенов для сборщиков почты
Web server
Put token
Get token
Web server
Mail
Collector
Token
Tarantool
1M QPS!
Refresh token

23. Устранение зоопарков
• Уменьшаем количество различных NoSQL СУБД в своем арсенале
• Упрощаем администрирование и деплой
• Убираем несогласованность данных

24. Zoo
Web
Redis
Memcache
MySQL
MongoDB

25. Zoo
Web
Redis
Memcache
MySQL
MongoDB

26. Zoo
Web Tarantool

27. Быстрое и надежное кэширование
• Ускоряем текущий кэш
• Делаем кэш персистентным
• Добавляем к кэшу репликацию и делаем его highly available
• И не меняем текущий код! Tarantool полностью поддерживает
интерфейс Memcached!

28. Caching
Web
Memcache
• Not reliable
• No replication
• Slow
Disk
Replica

29. Caching
Web
Tarantool
• Reliable
• Replication
• Fast
Disk
Replica

30. Сервер приложений внутри СУБД
• Разрабатываем логику прямо внутри СУБД
• Интегрируемся с другими СУБД

31. Разрабатываем логику внутри СУБД
Web
DBMS
Get
Set

32. Разрабатываем логику внутри СУБД
Web
Tarantool
Call
Stored
procedure

33. Интегрируемся с другими СУБД
Web
DBMS 1
Get
Set
DBMS 2

34. Интегрируемся с другими СУБД
Web
Tarantool
Call
Stored
procedure
Another
DBMS

35. Микросервисы
• Уменьшаем количество компонент с 4-5 до 2
• Радикально уменьшаем количество серверов (в разы)
• Минимизируем время вывода приложения в продакшн
• Минимизируем затраты команды на борьбу с высокой нагрузкой

36. Уменьшаем количество компонент
Nginx
Memcache
MySQL
WEB
DB
Proxy

37. Уменьшаем количество компонент
Nginx
Memcache
MySQL
WEB
DB
Proxy

38. Уменьшаем количество компонент
Nginx
Memcache
Tarantool
WEB
DB
Proxy

39. Уменьшаем количество компонент
Nginx
Tarantool

40. Уменьшаем количество компонент
Nginx
Tarantool

41. Уменьшаем количество серверов
Nginx
Tarantool
Tarantool
Nginx
Десятки микросервисов на 2+2 commodity серверах!

42. Минимизируем время выхода в продакшн
REST API
• HTTP included
• Fault-tolerance included
• Sharding included
Lua
procedure

43. Минимизируем борьбу с высокой нагрузкой
REST API
• HTTP included
• Fault-tolerance included
• Sharding included
• 100+K RPS included
Lua
procedure

44. Упрощаем эксплуатацию
• Отсутствуют ручные регулярные процедуры (такие как vacuum и т.д.)
• Простая система горячих бэкапов
• Простая система горячего подключения реплики
• Простой перенос с сервера на сервер
• Простая и понятная структура хранения данных

45. Простая система горячих бэкапов
DBMS Backup
Как создать backup с горячей базы данных?
А как создать горячую реплику?

46. Простая система горячих бэкапов
Tarantool Backup
Snapshot
(immutable)
Transaction
log
Копируется просто командой scp!!!

47. Простая система горячего подключения реплики
Tarantool Replica
Snapshot
(immutable)
Transaction
log
Копируется просто командой scp!!!

48. Простая система переноса с сервера на сервер
Tarantool Replica
Snapshot
(immutable)
Transaction
log
Поднимаем реплику
Говорим реплике, что мастер вот там
Ждем, пока реплика догонится
Делаем реплику мастером
Все!

49. Простая и понятная структура хранения
Tarantool
Snapshot
(immutable)
Transaction
log
Все изменения применяются в лог транзакций и больше никуда на диск!

50. IoT-платформа (вишенка на торте)
• Сервер приложений + СУБД на IoT-устройствах
• Может работать на устройствах даже с несколькими мегабайтами
оперативной памяти!
• Может эффективно работать с медленными одноядерными ЦПУ
• Может эффективно использовать ненадежную флэш-память
• Может делать peer-to-peer master-master репликацию между устройствами
без облака
• Может работать без доступа в Интернет

51. IoT-платформа (вишенка на торте)
• Мало оперативной памяти
• Слабый ЦПУ
• Моргающий Интернет
• Сложно релизить софт
• Медленная и ненадежная flash-память
IoT
устройство

52. IoT-платформа (вишенка на торте)
• Peer to peer master-master
replication
• Состояние между устройствами
и облаком всегда синхронно!
IoT
устройство
IoT
устройство
Tarantool in Cloud

53. Заключение
• Я не хочу сказать, что Tarantool – это серебряная пуля
• Скорее Tarantool это СУБД-платформа-конструктор для хайлоуда,
аналитики, всего, что должно работать в онлайне или риалтайм
• Если у вас онлайн и риалтайм, то обязательно взгляните на Tarantool!

54. На связи!
support@tarantool.org
anikin@corp.mail.ru
tarantool.org
facebook.com/TarantoolDatabase