Download to read offline
Uploaded byOntico
Синхронизация данных из PgSQL в Tarantool / Вениамин Гвоздиков (Calltouch)
Документ описывает процесс синхронизации данных из PostgreSQL в Tarantool, затрагивая инфраструктуру с пятью базами данных в режиме master и пятью в режиме slave. Он также упоминает технические детали серверов, включая оборудование, нагрузку и инструменты для реализации умного кэша. Основные задачи включают быстрый и консистентный доступ к данным, а также синхронизацию и изменения данных.
Синхронизация данных из PgSQL в Tarantool / Вениамин Гвоздиков (Calltouch)
- 1. Синхронизация данных из PgSQL вTarantool Гвоздиков Вениамин, Calltouch
- 2. Инфраструктура под PgSQL •5 баз данных в режиме Master • 5 баз данных в режиме Slave • Pgbouncer
- 3. Оборудование • Процессоры Intel(R)Xeon(R) CPU E5-2630 v4 @ 2.20GHz • Память 125Gb • Диски под базу SSD • Сетевой адаптер Intel Ethernet i350 x2 Количество таких серверов 10 штук
- 4. Нагрузка на каждыйиз серверов • avg_requests ~ 2000 х 10 • avg_query ~ 1000 х 10
- 5. Задача для умногокэша • Быстрый доступ к данным • Консистентность данных • Синхронизация данных • Изменение данных
- 6. Инструменты • Tarantool • Tarantool-pg •Expirationd • Http + Prometheus • PL/Python
- 7. Ограничения • Небольшое количествообновлений • Небольшие объемы данных • Согласованное проведение обновлений таблиц
- 8.