Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.
Рост курса валют vs рост
числа пользователей
Как banki.ru пережил утроение нагрузки за неделю
Роман
Ивлиев
Директор по
инф...
2002-....
• Тестировщик
• Разработчик
• Руководитель разработчиков
• Руководитель тестировщиков
• Руководитель проектов
• ...
Мы ходим по земле
• PHP 5.х + Symfony 2 + Yii
• Postgres(9.х)+MariaDB
• Memcache+Redis
• Rabbit
• Nginx + Apache
• Битрикс...
Это очень важно!
О чем расскажу?
• Как мы пережили скачок?
О чем расскажу?
• Как мы пережили скачок?
• Почему мы не сделали всё это раньше?
О чем расскажу?
• Как мы пережили скачок?
• Почему мы не сделали всё это раньше?
• А что мы делаем теперь?
О чем расскажу?
• Как мы пережили скачок?
• Почему мы не сделали всё это раньше?
• А что мы делаем теперь?
• А что будет, ...
О чем расскажу?
• Как мы пережили скачок?
• Почему мы не сделали всё это раньше?
• А что мы делаем теперь?
• А что будет, ...
Знали ли мы про маневры ЦБ?
Знали ли мы про маневры ЦБ?
Глазами администратора
Глазами администратора
• Анализ логов и перенастройка серверов
Глазами администратора
• Анализ логов и перенастройка серверов
• Включение/отключение логирования
Глазами администратора
• Анализ логов и перенастройка серверов
• Включение/отключение логирования
• Включение/отключение с...
Глазами администратора
• Анализ логов и перенастройка серверов
• Включение/отключение логирования
• Включение/отключение с...
Окей, Гугл, выручай!
Глазами администратора
• Анализ логов и перенастройка серверов
• Включение/отключение логирования
• Включение/отключение с...
Управляемая деградация
Управляемая деградация
• «Ручное» регулирование числа
пользователей
Управляемая деградация
• «Ручное» регулирование числа
пользователей
• Отключение части функционала
Управляемая деградация
• «Ручное» регулирование числа
пользователей
• Отключение части функционала
• Напрягается саппорт, ...
Прихвостни ЦБ!!!!
Пустите посмотреть курсы доллара!!!!
Прихвостни ЦБ!!!!
Пустите посмотреть курсы доллара!!!!
Вы это специально??!!!!
Прихвостни ЦБ!!!!
Пустите посмотреть курсы доллара!!!!
Вы это специально??!!!!
Прихвостни ЦБ!!!!
Да @БВАШ@Ь!!!!
Пустите посмотреть курсы доллара!!!!
Вы это специально??!!!!
Прихвостни ЦБ!!!!
Да стопудов это же вы так специально!!!!
Да...
Глазами администратора
• Балансировка сервисов по серверам в
реальном времени
Глазами администратора
• Балансировка сервисов по серверам в
реальном времени
• Виртуализация под задачи
Глазами администратора
• Балансировка сервисов по серверам в
реальном времени
• Виртуализация под задачи
• Бонус-трек: Экс...
Глазами разработчика
Глазами разработчика
• Слоулоги (php, СУБД, web, zabbix)
Глазами разработчика
• Слоулоги (php, СУБД, web, zabbix)
• Память предков и личного состава
Глазами разработчика
• Слоулоги (php, СУБД, web, zabbix)
• Память предков и личного состава
• Летопись технического долга
Глазами разработчика
• Битва с джойнами, индексами и
сортировками
Глазами разработчика
• Битва с джойнами и сортировками
• Отложенные вычисления и предварительная
подготовка данных
Глазами менеджера
Глазами менеджера
• «Ручное» управление
Глазами менеджера
• «Ручное» управление
• Главный враг - паника
Глазами менеджера
• «Ручное» управление
• Главный враг - паника
• Управляет процессом всегда кто-то один
Глазами менеджера
• «Ручное» управление
• Главный враг - паника
• Управляет процессом всегда кто-то один
• Быстрый откат
Глазами менеджера
• «Ручное» управление
• Главный враг - паника
• Управляет процессом всегда кто-то один
• Быстрый откат
•...
Почему мы не сделали этого раньше?
Крутые отмазки:
• На самом деле планы были, но не такие
масштабные
• Бизнес не хочет тр...
Почему мы не сделали этого раньше?
Менее крутые:
• Бизнесовые задачи кушают время лучших
умов
• Нет полноценной нагрузочно...
Вот пример последнего тезиса
А что мы делаем теперь?
• Постепенно выпиливаем то, что осталось с
учётом опыта тех дней
А что мы делаем теперь?
• Постепенно выпиливаем то, что осталось с
учётом опыта тех дней
• Немного поменяли приоритеты в в...
А что мы делаем теперь?
• Постепенно выпиливаем то, что осталось с
учётом опыта тех дней
• Немного поменяли приоритеты в в...
А что мы делаем теперь?
• Постепенно выпиливаем то, что осталось с
учётом опыта тех дней
• Немного поменяли приоритеты в в...
А что мы сделаем, если повторится декабрь?
• Мы точно продержимся гораздо дольше
А что мы сделаем, если повторится декабрь?
• Мы точно продержимся гораздо дольше
• Найдем новые узкие места
А что мы сделаем, если повторится декабрь?
• Мы точно продержимся гораздо дольше
• Найдем новые узкие места
• Придумаем, ...
А что мы сделаем, если повторится декабрь?
• Мы точно продержимся гораздо дольше
• Найдем новые узкие места
• Придумаем, ...
Выводы и мудрость
@dumtest
Роман
Ивлиев
Директор по
информационным
технологиям
Банки.ру
Спасибо!
Вопросы?
roman.ivliev@mail.ru
• http://www.percona.com/doc/percona-toolkit/2.2/pt-query-digest.html -
анализ логов MySQL
• https://github.com/dalibo/pgb...
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю
Upcoming SlideShare
Loading in …5
×

Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю

1,009 views

Published on

Роман Ивлиев, Банки.ру, Backend-секция CodeFest 2015

Published in: Software
  • Be the first to comment

  • Be the first to like this

Рост курса валют vs рост числа пользователей. Как banki.ru пережил утроение нагрузки за неделю

  1. 1. Рост курса валют vs рост числа пользователей Как banki.ru пережил утроение нагрузки за неделю Роман Ивлиев Директор по информацинным технологиям Банки.ру
  2. 2. 2002-.... • Тестировщик • Разработчик • Руководитель разработчиков • Руководитель тестировщиков • Руководитель проектов • CTO • CIO Кто я?
  3. 3. Мы ходим по земле • PHP 5.х + Symfony 2 + Yii • Postgres(9.х)+MariaDB • Memcache+Redis • Rabbit • Nginx + Apache • Битрикс • Зоопарк осей на 10 серверах (FreeBSD, CentOS и ещё) Нам 10 лет, в департаменте ИТ 40 человек, мы принимаем 500К уников в сутки, и мы выручили в 2014 почти 600КК рублей.
  4. 4. Это очень важно!
  5. 5. О чем расскажу? • Как мы пережили скачок?
  6. 6. О чем расскажу? • Как мы пережили скачок? • Почему мы не сделали всё это раньше?
  7. 7. О чем расскажу? • Как мы пережили скачок? • Почему мы не сделали всё это раньше? • А что мы делаем теперь?
  8. 8. О чем расскажу? • Как мы пережили скачок? • Почему мы не сделали всё это раньше? • А что мы делаем теперь? • А что будет, если ЦБ повторит?
  9. 9. О чем расскажу? • Как мы пережили скачок? • Почему мы не сделали всё это раньше? • А что мы делаем теперь? • А что будет, если ЦБ повторит? • Немного выводов и мудрости
  10. 10. Знали ли мы про маневры ЦБ?
  11. 11. Знали ли мы про маневры ЦБ?
  12. 12. Глазами администратора
  13. 13. Глазами администратора • Анализ логов и перенастройка серверов
  14. 14. Глазами администратора • Анализ логов и перенастройка серверов • Включение/отключение логирования
  15. 15. Глазами администратора • Анализ логов и перенастройка серверов • Включение/отключение логирования • Включение/отключение статистик
  16. 16. Глазами администратора • Анализ логов и перенастройка серверов • Включение/отключение логирования • Включение/отключение статистик • Ок, Гугл, выручай!
  17. 17. Окей, Гугл, выручай!
  18. 18. Глазами администратора • Анализ логов и перенастройка серверов • Включение/отключение логирования • Включение/отключение статистик • Ок, Гугл, выручай! • Управляемая деградация
  19. 19. Управляемая деградация
  20. 20. Управляемая деградация • «Ручное» регулирование числа пользователей
  21. 21. Управляемая деградация • «Ручное» регулирование числа пользователей • Отключение части функционала
  22. 22. Управляемая деградация • «Ручное» регулирование числа пользователей • Отключение части функционала • Напрягается саппорт, а не сервера
  23. 23. Прихвостни ЦБ!!!!
  24. 24. Пустите посмотреть курсы доллара!!!! Прихвостни ЦБ!!!!
  25. 25. Пустите посмотреть курсы доллара!!!! Вы это специально??!!!! Прихвостни ЦБ!!!!
  26. 26. Пустите посмотреть курсы доллара!!!! Вы это специально??!!!! Прихвостни ЦБ!!!! Да @БВАШ@Ь!!!!
  27. 27. Пустите посмотреть курсы доллара!!!! Вы это специально??!!!! Прихвостни ЦБ!!!! Да стопудов это же вы так специально!!!! Да @БВАШ@Ь!!!!
  28. 28. Глазами администратора • Балансировка сервисов по серверам в реальном времени
  29. 29. Глазами администратора • Балансировка сервисов по серверам в реальном времени • Виртуализация под задачи
  30. 30. Глазами администратора • Балансировка сервисов по серверам в реальном времени • Виртуализация под задачи • Бонус-трек: Экстренный порт на линукс, чтобы размножаться пачкованием.
  31. 31. Глазами разработчика
  32. 32. Глазами разработчика • Слоулоги (php, СУБД, web, zabbix)
  33. 33. Глазами разработчика • Слоулоги (php, СУБД, web, zabbix) • Память предков и личного состава
  34. 34. Глазами разработчика • Слоулоги (php, СУБД, web, zabbix) • Память предков и личного состава • Летопись технического долга
  35. 35. Глазами разработчика • Битва с джойнами, индексами и сортировками
  36. 36. Глазами разработчика • Битва с джойнами и сортировками • Отложенные вычисления и предварительная подготовка данных
  37. 37. Глазами менеджера
  38. 38. Глазами менеджера • «Ручное» управление
  39. 39. Глазами менеджера • «Ручное» управление • Главный враг - паника
  40. 40. Глазами менеджера • «Ручное» управление • Главный враг - паника • Управляет процессом всегда кто-то один
  41. 41. Глазами менеджера • «Ручное» управление • Главный враг - паника • Управляет процессом всегда кто-то один • Быстрый откат
  42. 42. Глазами менеджера • «Ручное» управление • Главный враг - паника • Управляет процессом всегда кто-то один • Быстрый откат • Все изменения в Вики.
  43. 43. Почему мы не сделали этого раньше? Крутые отмазки: • На самом деле планы были, но не такие масштабные • Бизнес не хочет тратиться на такой запас по мощности • Сильно-связный код
  44. 44. Почему мы не сделали этого раньше? Менее крутые: • Бизнесовые задачи кушают время лучших умов • Нет полноценной нагрузочной среды • А надо ли это делать на два дня?
  45. 45. Вот пример последнего тезиса
  46. 46. А что мы делаем теперь? • Постепенно выпиливаем то, что осталось с учётом опыта тех дней
  47. 47. А что мы делаем теперь? • Постепенно выпиливаем то, что осталось с учётом опыта тех дней • Немного поменяли приоритеты в вопросах замены сервисов
  48. 48. А что мы делаем теперь? • Постепенно выпиливаем то, что осталось с учётом опыта тех дней • Немного поменяли приоритеты в вопросах замены сервисов • Прикупили пару новых мощных железяк
  49. 49. А что мы делаем теперь? • Постепенно выпиливаем то, что осталось с учётом опыта тех дней • Немного поменяли приоритеты в вопросах замены сервисов • Прикупили пару новых мощных железяк • Вкладываемся в SOA
  50. 50. А что мы сделаем, если повторится декабрь? • Мы точно продержимся гораздо дольше
  51. 51. А что мы сделаем, если повторится декабрь? • Мы точно продержимся гораздо дольше • Найдем новые узкие места
  52. 52. А что мы сделаем, если повторится декабрь? • Мы точно продержимся гораздо дольше • Найдем новые узкие места • Придумаем, как их убрать и
  53. 53. А что мы сделаем, если повторится декабрь? • Мы точно продержимся гораздо дольше • Найдем новые узкие места • Придумаем, как их убрать и • Наверняка уберём 
  54. 54. Выводы и мудрость
  55. 55. @dumtest Роман Ивлиев Директор по информационным технологиям Банки.ру Спасибо! Вопросы? roman.ivliev@mail.ru
  56. 56. • http://www.percona.com/doc/percona-toolkit/2.2/pt-query-digest.html - анализ логов MySQL • https://github.com/dalibo/pgbadger - анализ логов PostgreSQL • http://pinba.org – сбор данных о работе приложения • https://github.com/intaro/pinboard - визуализатор для данных Pinba • https://github.com/phacility/xhprof - PHP-профайлер • http://www.zabbix.com/ru/ - мониторинг системы (физические и логические характеристики) • http://www.slideshare.net/dumtest/ss-32903174 - мой рассказ про построение высоконагруженных систем с примерами • https://github.com/elastic/kibana - анализ и визуализация логов

×