HighLoad весна 2014 лекция 6

519 views

Published on

Published in: Education
0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
519
On SlideShare
0
From Embeds
0
Number of Embeds
96
Actions
Shares
0
Downloads
26
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide
  • HDD: Линейное чтение с дисков одного порядка со скоростью памятиHDD: Задержка в 100 дольшечем у ОЗУSSD: Latency - 0.1 msSSD: хорошо подходят для кешей
  • http://research.google.com/people/jeff/
  • RAID 1-4 – экзотикаRAID 5 – медленный и ненадежный
  • В постгресе теперь тоже есть репликация из коробки и починили большинство ранних проблемБольше функций, многие из которых уникальные, например географический индексМускуль уже давно не развивается и так написан что развивать его пробелематично, но все пользуются
  • Legacy база, разработчики о ней не помнятПроблемы с конкурентной записьюБлокировки на JOIN, очередь запросовСложно обеспечить консистентность
  • Mainstream-направлениеНе любят админы по причине проблем с переносимостью и сложностей с бекапом(LVM)Сложно разделить на несколько серверов если нет file-per-tableБекапы в виде SQLdump не предлагать!Репликации для бекапа и резервирования, это очень важно
  • Репликации для бекапа и резервирования, это очень важно
  • Блокировка и переключение – несколько секунд, вместо минут и часов обычного альтера
  • При небольшом объеме данных для этого лучше использовать in-memory databases
  • Большие части проблематично «мувить» и «сплитать»
  • Какие проблемы и как решал проектКакие архитектурные решения принимались и почемуКак устроен проект сейчасКак вы оцениваете его устройство и как бы вы могли предложить сделать лучше
  • HighLoad весна 2014 лекция 6

    1. 1. Проектирование высоконагруженных систем Лекция №6 Быков Александр
    2. 2. SATA Емкость: 2 Tb RPM: 7200 Cache: 64 Mb Интерфейс: 3Gb/s Чтение/запись: 140MB/s Seek time R/W: 12/6 ms 2 Дисковая подсистема HighLoad. Лекция №6
    3. 3. HighLoad. Лекция №2 3 Latency numbers every programmer should know (Jeff Dean) L1 cache reference 0.5 ns Branch mispredict 5 ns L2 cache reference 7 ns Mutex lock/unlock 25 ns Main memory reference 100 ns Compress 1K bytes with Zippy 3,000 ns Send 2K bytes over 1 Gbps network 20,000 ns SSD random read 150,000 ns Read 1 MB sequentially from memory 250,000 ns Round trip within same datacenter 500,000 ns 0.5 ms Read 1 MB sequentially from SSD* 1,000,000 ns 1 ms Disk seek 10,000,000 ns 10 ms Read 1 MB sequentially from disk 20,000,000 ns 20 ms Send packet CA->Netherlands->CA 150,000,000 ns 150 ms
    4. 4. 4 HighLoad. Лекция №6 • Быстрое линейное чтение • Медленный случайный доступ • Конкуренция за диск уменьшает производительность • SATA – для логов • SAS – для баз данных • SSD – для кеширования
    5. 5. 5 HighLoad. Лекция №6
    6. 6. 6 HighLoad. Лекция №6 • • • • •
    7. 7. 7 HighLoad. Лекция №6 • • • •
    8. 8. 8 HighLoad. Лекция №6 • • • • •
    9. 9. 9 HighLoad. Лекция №6 • • • • •
    10. 10. 10 HighLoad. Лекция №6 • • • • • •
    11. 11. 11 HighLoad. Лекция №6 • • • • • • • •
    12. 12. 12 HighLoad. Лекция №6 • • • • • • •
    13. 13. 13 HighLoad. Лекция №6 • • • • • •
    14. 14. 14 HighLoad. Лекция №6 • • • • • •
    15. 15. 15 HighLoad. Лекция №6 • • • • •
    16. 16. 16 HighLoad. Лекция №6 • • • • • • •
    17. 17. 17 HighLoad. Лекция №6 • • • • • •
    18. 18. 18 HighLoad. Лекция №6 • • • • • • • •
    19. 19. 19 HighLoad. Лекция №6 • • •
    20. 20. HighLoad. Лекция №6 20
    21. 21. HighLoad. Лекция №6 21
    22. 22. HighLoad. Лекция №6 22
    23. 23. HighLoad. Лекция №6 23
    24. 24. HighLoad. Лекция №6 24
    25. 25. HighLoad. Лекция №6 25
    26. 26. HighLoad. Лекция №6 26
    27. 27. HighLoad. Лекция №6 27
    28. 28. HighLoad. Лекция №6 28
    29. 29. HighLoad. Лекция №6 29
    30. 30. HighLoad. Лекция №6 30
    31. 31. HighLoad. Лекция №6 31
    32. 32. HighLoad. Лекция №6 32
    33. 33. HighLoad. Лекция №6 33
    34. 34. HighLoad. Лекция №6 34
    35. 35. HighLoad. Лекция №6 35
    36. 36. HighLoad. Лекция №6 36
    37. 37. HighLoad. Лекция №6 37
    38. 38. HighLoad. Лекция №6 38
    39. 39. HighLoad. Лекция №6 39
    40. 40. HighLoad. Лекция №6 40
    41. 41. HighLoad. Лекция №6 41
    42. 42. HighLoad. Лекция №6 42
    43. 43. HighLoad. Лекция №6 43
    44. 44. HighLoad. Лекция №6 44 Литература  http://www.danga.com/words/2005_oscon/oscon-2005.pdf  http://www.addsimplicity.com/downloads/eBaySDForum2006-11-29.pdf  http://qconlondon.com/dl/qcon-london- 2008/slides/RandyShoup_eBaysArchitecturalPrinciples.pdf  http://www.slideshare.net/tcng3716/ebay-architecture  http://friendfeed.com/bret/dd79a583/how-friendfeed-uses-mysql-to- store-schema-less
    45. 45. HighLoad. Лекция №6 45 Домашнее задание №4   
    46. 46. СПАСИБО ЗА ВНИМАНИЕ Быков Александр bykov@corp.mail.ru

    ×