Downloaded 22 times
![Превращается в
$mc->set(
"letter[{$delay}[,{$task_id}]]",
$letter
)
Свои решения. Первая кровь](https://image.slidesharecdn.com/2-161110212228/85/slide-28-320.jpg)
![А иногда и в
$mc->increment("counter$cnt_id
[:$subcnt_id]#$uid[#$sex$age
$status$polit$section;$city;
$region;$country;$source]")
Свои решения. Первая кровь](https://image.slidesharecdn.com/2-161110212228/85/slide-29-320.jpg)
Uploaded byOntico
Архитектура растущего проекта на примере ВКонтакте / Алексей Акулович (ВКонтакте)
Документ обсуждает архитектуру масштабируемых проектов на примере ВКонтакте, анализируя использование технологий, таких как Nginx, PHP, MySQL и Memcached для эффективного роста и решения проблем производительности. Основное внимание уделяется методам горизонтального и вертикального масштабирования баз данных, а также проблемам кэширования. В документе подчеркивается важность планирования нагрузки и оптимизации запросов для обеспечения высоких свойств производительности.
More Related Content
Similar to Архитектура растущего проекта на примере ВКонтакте / Алексей Акулович (ВКонтакте)
Архитектура растущего проекта на примере ВКонтакте / Алексей Акулович (ВКонтакте)
- 1. Архитектура растущего проекта напримере ВКонтакте Алексей Акулович vk.com 161108#7
- 2. Развитие БД Развитие PHP Примерыиз жизни О чём поговорим?
- 4. Nginx PHP + Apache MySQL Memcached Всёначинается с малого
- 5. Nginx stateless, ставим еще PHP+ Apache MySQL Memcached Как расти?
- 6. Nginx stateless, ставим еще PHP+ Apache stateless, ставим еще MySQL Memcached Как расти?
- 7. Nginx stateless, ставим еще PHP+ Apache stateless, ставим еще MySQL нужно решать Memcached нужно решать Как расти?
- 8. Развитие БД Развитие PHP Примерыиз жизни О чём поговорим?
- 9. Вертикальное Просто, но недолго Масштабирование БД
- 10. Вертикальное Просто, но недолго Горизонтальное Сложнее, но ограничено лишь реализацией Масштабирование БД
- 11. Уменьшение связности Скажем “нет”внешним ключам и join’ам Горизонтальное масштабирование
- 12. Уменьшение связности Скажем “нет”внешним ключам и join’ам Разнос таблиц по разным серверам Сначала можно логически Горизонтальное масштабирование
- 13. Уменьшение связности Скажем “нет”внешним ключам и join’ам Разнос таблиц по разным серверам Сначала можно логически Шардирование самих таблиц Виртуальные шарды Горизонтальное масштабирование
- 14.
- 15.
- 16. Предварительное создание кэша Просроченныйкэш Кэширование
- 17. Предварительное создание кэша Просроченныйкэш Великий рандом Кэширование
- 18. Предварительное создание кэша Просроченныйкэш Великий рандом Негативное кэширование Кэширование
- 19. There are onlytwo hard things in Computer Science: cache invalidation and naming things. Phil Karlton Кэширование
- 20.
- 21. Свои решения. Перваякровь Самописные велосипеды узкозаточенные БД
- 22. audiofp friend hints image letters likes lists logs memcached meowdb Свои решения. Перваякровь news photo pmemcached sandbox search seqmap set statsx tasks ...
- 23. Текстовый memcached протокол Своирешения. Первая кровь
- 24. Текстовый memcached протокол Кластеры Своирешения. Первая кровь
- 25. Текстовый memcached протокол Кластеры Доступк кластеру как единому целому Свои решения. Первая кровь
- 26. Я разработчик, яне хочу думать, я хочу *-* и в продакшен! $mc = chooseServer('cluster_name'); $mc->get('fooBar'); Свои решения. Первая кровь
- 27. Обычный запрос $mc->set("key", $value) Своирешения. Первая кровь
- 28.
- 29. А иногда ив $mc->increment("counter$cnt_id [:$subcnt_id]#$uid[#$sex$age $status$polit$section;$city; $region;$country;$source]") Свои решения. Первая кровь
- 30. Подключение к кластерамчерез прокси Свои решения. Первая кровь
- 31. Выбор движков вкластере на основе запроса $mc->set("prefix4tail", $val) hash("prefix4tail") % N "prefix4tail" % N Свои решения. Первая кровь
- 32.
- 33. Набор команд get, set,delete, ... Ограничения MC протокола
- 34. Набор команд get, set,delete, ... Размер ключей 250 байт Ограничения MC протокола
- 35. Набор команд get, set,delete, ... Размер ключей 250 байт Экранирование бинарных данных Избыточность формата Ограничения MC протокола
- 36. Ближайший аналог -protobuf https://github.com/google/protobuf Не путать с msgpack, bson - они schemaless Свой бинарный протокол TL proto
- 37. Произвольный набор команди параметров Работа по TCP и UDP Шифрование Мультиплексирование и асинхронщина Свой бинарный протокол TL proto
- 38. Еще есть, номало MySQL
- 39. Еще есть, номало video_files_icva_chestnoe_slovo_last MySQL
- 40. Развитие БД Развитие PHP Примерыиз жизни О чём поговорим?
- 41.
- 42. Медленный Со слабой динамическойтипизацией PHP
- 43. Медленный Со слабой динамическойтипизацией Популярный PHP
- 44. Как на PHPобработать миллион запросов в секунду? PHP
- 45. Да никак * PHP * еслиу вас нет 100500 серверов
- 46. Транслятор PHP →C++ KPHP: Kitten PHP
- 47. Транслятор PHP →C++ Частичная реализация PHP 5 KPHP: Kitten PHP
- 48. Транслятор PHP →C++ Частичная реализация PHP 5 Выведение типов в нативные C++ типы KPHP: Kitten PHP
- 49. Транслятор PHP →C++ Частичная реализация PHP 5 Выведение типов в нативные C++ типы Проверки типов при компиляции KPHP: Kitten PHP
- 50. Бинарник HTTP сервера Однопоточныйс epoll Пачка процессов на машину KPHP: Kitten PHP
- 51. Развитие БД Развитие PHP Примерыиз жизни О чём поговорим?
- 52. Где хранить икак обновлять? 0. Хранение конфигурации
- 53. Персистентный memcache Master-slave репликация Slaveноды на каждом сервере с кодом контроль отставания от мастера 0. Хранение конфигурации
- 54. К чему можетпривести запрос? $mc->set("key", $value) 1. Операция “Снежный ком”
- 55. К чему можетпривести запрос? $mc->set("key", $value) Ляжет весь сайт 1. Операция “Снежный ком”
- 56. Константный ключ →один движок Движок не смог Прокси начали копить очередь Прокси не смогли Сайт упал 1. Операция “Снежный ком”
- 57. Что делать? Не писатьтакой код Размазывать нагруженные ключи Выполнять запросы с вероятностью 1. Операция “Снежный ком”
- 58. Проблема: сайт тормозит 2.Разделяй и властвуй
- 59. Проблема: сайт тормозит Выяснили:выросла нагрузка на кластер общего кэша Кто виноват? 2. Разделяй и властвуй
- 60. Проблема: сайт тормозит Выяснили:выросла нагрузка на кластер общего кэша Кто виноват? А фиг его знает 2. Разделяй и властвуй
- 61. Скажем “нет” общимкластерам Каждой задаче - свой кластер Выросла нагрузка - знаем точно кто Кластер упал - не упало остальное 2. Разделяй и властвуй
- 62. Проблема: массовые 50xот kphp 3. Разделяй и властвуй #2
- 63. Проблема: массовые 50xот kphp Выяснили: новый функционал Что делать? 3. Разделяй и властвуй #2
- 64. Группы kphp машин новости,профиль, api и т.п. Проблема раздела другие разделы не волнует 3. Разделяй и властвуй #2
- 65. Группы kphp машин новости,профиль, api и т.п. Проблема раздела другие разделы не волнует Несколько попыток nginx → kphp 3. Разделяй и властвуй #2
- 66. Какие нагрузки, такиеи решения Выводы
- 67. Какие нагрузки, такиеи решения Нестандартные решения - нестандартная поддержка Выводы
- 68. Какие нагрузки, такиеи решения Нестандартные решения - нестандартная поддержка Как держать нагрузку? Размазывать Выводы
- 69.