Downloaded 12 times
Uploaded byCodeFest
Вячеслав Бахмутов
Документ описывает использование языка программирования Go в роли инженера по надежности сайта в компании Dropbox, включая информацию о системе инфраструктуры и процессах автоматизации. Обсуждаются также преимущества использования Go по сравнению с другими языками программирования и его интеграцией в различные сервисы. Кроме того, документ подчеркивает важность мониторинга, диагностики и автоматизации на уровне SRE.
Вячеслав Бахмутов
- 1. Применение Go вSRE Slava Bakhmutov Site reliability engineer at Dropbox 1
- 2. Go в SREв Dropbox 2
- 3. Go в SREв Dropbox 3
- 4. Dropbox 0.5 млрд регистраций 1.2млрд новых файлов каждый день 4
- 5.
- 6.
- 7. Dropbox infrastructure 2013 MetaData Servers MetaData ServersMetaData Servers DataBase DataBase DataBase DataBase Metadata Servers Edgestore LibraryEdgestore ServiceEdgestore ServiceEdgestore Service Edgestore Service 7 Go Edgestore youtube
- 8. Dropbox infrastructure 2015 MetaData Servers MetaData ServersMetaData Servers Block Storage Servers AmazonS3 DataBDataBDataB MP Эпичная история, как Dropbox ушёл от Amazon в своё облако - Wired Go + Rust 8
- 9. Dropbox infrastructure Логи/исключения Система pushнотификаций Метрики Маршрутизация/балансировка Alerts/remediation Системы деплоя Hadoop/аналитика Batch Jobs DRTs (как Chaos Monkey) wheelhouse (автоматизация долгих задач) Naoru - ремедиэйшены и множество других 9
- 10. Go в SREв Dropbox 10
- 11. История 11 1. Большие компьютеры.Ручное управление. 2. Дешёвые компьютеры. Автоматизация. 3. Облака. DevOps.
- 12. SRE + разработчикиСисадмины Что такоеSite Reliability Engineering (Ben Treynor) 12
- 13. SRE в Dropbox 1.Распределеённые San Francisco/Dublin 2. Fullstack (от железа до приложений) 3. Все системы (database, search, traffic, phit) 13
- 14. SRE операционная 14 Мониторинг! 1. Причиныи Симптомы 2. День и ночь 3. Влияние в playbooks
- 15. SRE 15 1. Наблюдение 2. Разбирательство 3.Решение 4. Действие
- 16. DRTs 16 1. Зачем 1. Ловимпроблемы 2. Доказываем суждения 3. Спокойствие для дежурных 2. Регулярно и в продакшене Hope is not a strategy - Ben Treynor (Google) Как параноя помогает нам в dropbox
- 17.
- 18.
- 19.
- 20.
- 21. Диагностика 21 1. Проверить чтоssh работает 2. Подключиться по IPMI A. Нет ответа - Перезагрузка B. Зависло в initramfs - Деаллокация машины C. CPU soft lockup - Перезагрузка
- 22.
- 23.
- 24.
- 25.
- 26.
- 27.
- 28.
- 29. Go в SREв Dropbox 29
- 30. Go vs Python Производительность Корректность Параллелизм Потреблениересурсов Рефакторинг 30
- 31. Go vs Java(JVM)vs C++ vs Rust 31
- 32. Go. Плюсы 32 •Тесты •Горутины •Простота языка(легко переходят с Python) •Инструментарий. Исследование проблем, отлов утечек •Малое потребление ресурсов, производительность •Быстрая компиляция •Нет зависимостей •Богатая stdlib. HTTP2!
- 33. Go. Тесты 33 go test-bench go test -bench -cpu=1,2,4 go test -benchmem go test -cpuprofile go test -memprofile go test -blockprofile
- 34. Go. Отладка 34 Профайлер горутин ТрейсерGC Трейсер планировщика Трейсер аллокатора памяти Статистика аллокатора памяти Дамп кучи
- 35.
- 36.
- 37. Go. Плюсы 37 •Тесты •Инструментарий. Отладка •Горутины •Простотаязыка •Малое потребление ресурсов •Производительность •Быстрая компиляция •Нет зависимостей •Богатая stdlib. HTTP2!
- 38. Go in Dropbox ~400kстрок кода ~130 разработчиков Почти вся инфраструктура пишется на GO Экспериментируем с GO для продуктов Используем Go 1.3, переходим на 1.5 38
- 39. Go. Выводы 39 Начинать спереписывания одной из основных систем Свои библиотеки легче поддерживать и менять Осторожная работа со сборщиком мусора
- 40. Go. Экосистема Картинка изстатьи Go в 2015 году 40
- 41.
- 42. Go Митапы Русскоязычный чат (1000+человек) Подкаст Статьи и книги (Керниган!) Редакторы (idea, vim, sublime) 42 С чего начать новичку (ссылки)
- 43.
- 44.
- 45.