Alexander Dymo - IT Jam 2009 - Ruby: Beaty Or The Beast

1,039 views

Published on

Published in: Technology
0 Comments
1 Like
Statistics
Notes
  • Be the first to comment

No Downloads
Views
Total views
1,039
On SlideShare
0
From Embeds
0
Number of Embeds
17
Actions
Shares
0
Downloads
15
Comments
0
Likes
1
Embeds 0
No embeds

No notes for slide

Alexander Dymo - IT Jam 2009 - Ruby: Beaty Or The Beast

  1. 1. Ruby: Beauty or the Beast? Александр Дымо IT Jam 2009 www.acunote.com
  2. 2. О чем речь? Опыт разработки на Ruby (Rails) приложения Acunote www.acunote.com Онлайновая система управления проектами для компаний, использующих Scrum <ul><li>разрабатывается с 2006-го года
  3. 3. 22 000 строк кода
  4. 4. 31 000 строк тестов
  5. 5. ~5600 зарегистрированных организаций </li></ul>
  6. 6. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  7. 7. Что не понравилось
  8. 8. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  9. 9. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  10. 10. Тестирование
  11. 11. Профилировка и производительность
  12. 12. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  13. 13. Язык Ruby: Что понравилось Меньше кода – больше кислорода! ~3 разработчика * ~4 года = 22k строк???
  14. 14. Язык Ruby: Что понравилось Меньше кода – больше кислорода! 400 строк на Ruby == 6000 на C++
  15. 15. Язык Ruby: Что понравилось Уж больно хорошо все выглядит! module SearchLanguage class Parser class ParseError < StandardError; end def self. parse (text) parser = Parser. new parser. parse (text) end private : def parse_search_query parse_and_expression end def parse_and_expression match_spaces node = ExpressionNode. new (:and) return node if empty_buffer? node. expressions << parse_or_expression while match_AND and !empty_buffer? and !end_of_subexpression? node. expressions << parse_or_expression end node end end end
  16. 16. Язык Ruby: Что понравилось Методы с ! и ? [1,2,3] . include? 2 &quot;foo bar&quot; . gsub ( &quot;o&quot; , &quot;a&quot; ) &quot;foo bar&quot; . gsub! ( &quot;o&quot; , &quot;a&quot; )
  17. 17. Язык Ruby: Что понравилось Методы с ! и ? class Foo def transform! #... end def transformed? #... end end
  18. 18. Язык Ruby: Что понравилось Блоки def do_smth(&block) puts yield(10) puts yield(20) end do_smth { |value| value += 5 } > 15 > 25
  19. 19. Язык Ruby: Что понравилось Возможность встроиться куда угодно class BigDecimal alias_method :eq_without_boolean_comparison, :== def eq_with_boolean_comparison(other) if [FalseClass, TrueClass].include? other.class return false end eq_without_boolean_comparison(other) end alias_method :==, :eq_with_boolean_comparison end
  20. 20. Язык Ruby: Что понравилось Возможность встроиться куда угодно class Time def humanize strftime(&quot;%a %b %d, %Y %H:%M&quot;) end end ...мы дополнили 26 различных классов
  21. 21. Язык Ruby: Что понравилось Правильный способ встраивания/расширения class Foo def do_smth puts &quot;Hello World&quot; end end class Foo def do_smth_with_decoration puts &quot;--------------&quot; do_smth_without_decoration puts &quot;--------------&quot; end end f = Foo.new f.do_smth > -------------- > Hello World > --------------
  22. 22. Язык Ruby: Что понравилось Возможность переписать все что угодно class Foo { private: void doSmth() { std::cout << &quot;Hello World&quot; } }; ... class Foo def doSmth puts &quot;Hi&quot; end end f = Foo.new f.doSmth > Hi
  23. 23. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  24. 24. Что не понравилось
  25. 25. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  26. 26. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  27. 27. Тестирование
  28. 28. Профилировка и производительность
  29. 29. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  30. 30. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false or true puts x #???
  31. 31. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false or true (x = false) or true puts x > false
  32. 32. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false || true x = (false || true) puts x > true
  33. 33. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = 2 if false or true puts x > ?
  34. 34. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = 2 if false or true x = 2 if (false or true) puts x > 2
  35. 35. Язык Ruby: Что не понравилось Python'измы в синтаксисе class Foo attr_accessor :x def do_smth x = 10 end end f = Foo.new f.x > nil #WTF?
  36. 36. Язык Ruby: Что не понравилось Python'измы в синтаксисе class Foo attr_accessor :x def do_smth self. x = 10 end end f = Foo.new f.x > 10
  37. 37. Язык Ruby: Что не понравилось Переменные экземпляров классов class Foo attr_accessor :x def initialize @x = 10 #или self.x = 10 y = @x #или y = x end end
  38. 38. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  39. 39. Что не понравилось
  40. 40. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  41. 41. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  42. 42. Тестирование
  43. 43. Профилировка и производительность
  44. 44. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  45. 45. Язык Ruby: Интересные особенности Модули: пространства имен или решение проблемы множественного наследования module ActiveRecord module ConnectionAdapters class MysqlAdapter def execute #... end end end end module ActiveResource module Validations def valid? errors.empty? end end end module ActiveRecord class Base include Validations end end
  46. 46. Язык Ruby: Интересные особенности Блоки: передача функций в другие функции или предусловия/постусловия def calculate(&algorithm) yield (2, 2) end result = calculate do |x,y| x + y end def calculate(&expression) return unless can_calculate? result = yield result.good? ? result : nil end result = calculate do 2+2 end
  47. 47. Язык Ruby: Интересные особенности Ассоциации в Rails: реализация с method_missing class User has_many :roles end user = User.find(:first) #метод ассоциации user.roles.find(:all, :conditions => &quot;name = 'Admin'&quot;) #метод массива user.roles.map { |role| role.name }
  48. 48. Язык Ruby: Интересные особенности Ассоциации в Rails: реализация с method_missing class AssociationProxy def reload @target = [1,2,3] #just for an example end def method_missing(method, *args, &block) if @target.respond_to? method @target.send(method, *args, &block) else raise NoMethodError end end end end p = AssociationProxy.new p.reload #вызываем свой метод p << 3 #вызываем метод класса Array (у @target)
  49. 49. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  50. 50. Что не понравилось
  51. 51. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  52. 52. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  53. 53. Тестирование
  54. 54. Профилировка и производительность
  55. 55. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  56. 56. Garbage Collection: Что с ним не так Сборка мусора – самое плохое что может произойти с вашим Ruby кодом!
  57. 57. Garbage Collection: Что с ним не так Сборка мусора происходит: каждые 8 Мб (точнее миллионов байт) выделенной памяти
  58. 58. Garbage Collection: Что с ним не так Эффект сборки мусора: GC GC Area Burndown 120 0,94 0,65 1,5x Sprint 20 x (1+5) (C) 0,59 0,30 2,0x Sprint 20 x (1+5) 0,70 0,40 1,8x Move Left 0,77 0,46 1,7x Ruby приложение будет в 2 раза медленнее! &quot;Спасибо&quot; сборщику мусора!
  59. 59. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  60. 60. Что не понравилось
  61. 61. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  62. 62. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  63. 63. Тестирование
  64. 64. Профилировка и производительность
  65. 65. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  66. 66. Garbage Collection: Как с этим бороться Патч, включающий сбор статистики про GC http://blog.pluron.com/2008/02/memory-profilin.html gc_statistics { x = &quot;x&quot; * 1024 * 1024 * 1024 #дайте-ка мне гиг памяти! } > allocated: 1049602K total in 2052 allocations, GC calls: 146, GC time: 161 msec
  67. 67. Garbage Collection: Как с этим бороться Способы бороться с GC в Ruby Enterprise Edition (www.rubyenterpriseedition.com) по-умолчанию RUBY_HEAP_MIN_SLOTS=10000 RUBY_HEAP_SLOTS_INCREMENT=10000 RUBY_GC_MALLOC_LIMIT=8000000 RUBY_HEAP_SLOTS_GROWTH_FACTOR=1.8 оптимальные настройки надо подбирать, но примерно RUBY_HEAP_MIN_SLOTS=1250000 RUBY_HEAP_SLOTS_INCREMENT=100000 RUBY_GC_MALLOC_LIMIT=30000000 RUBY_HEAP_SLOTS_GROWTH_FACTOR=1
  68. 68. Garbage Collection: Как с этим бороться Альтернативы? JRuby
  69. 69. Garbage Collection: Как с этим бороться Альтернативы? кто хочет написать generational garbage collector для Ruby?
  70. 70. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  71. 71. Что не понравилось
  72. 72. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  73. 73. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  74. 74. Тестирование
  75. 75. Профилировка и производительность
  76. 76. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  77. 77. Инструменты: Редакторы и IDE <ul><li>Emacs (rinari, emacs-rails, ruby-mode для v23) </li><ul><li>http://oldwiki.rubyonrails.org/rails/pages/HowToUseEmacsWithRails </li></ul><li>RubyMine </li><ul><li>http://www.jetbrains.com/ruby/ </li></ul><li>VIM </li><ul><li>http://akitaonrails.com/2009/01/04/rails-on-vim-in-english </li></ul><li>Textmate </li><ul><li>http://macromates.com/ </li></ul><li>KDevelop, Aptana, Netbeans, etc, etc... </li></ul>
  78. 78. Инструменты: Редакторы и IDE Ruby – проклятье разработчиков IDE def foo(arg) arg. end foo(2) foo(Class.new)
  79. 79. Инструменты: Редакторы и IDE Ruby – проклятье разработчиков IDE class Foo 10.times do |i| define_method &quot;great_method_#{i}&quot; .to_sym do #... end end end f = Foo.new f.
  80. 80. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  81. 81. Что не понравилось
  82. 82. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  83. 83. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  84. 84. Тестирование
  85. 85. Профилировка и производительность
  86. 86. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  87. 87. Инструменты: Тестирование TDD/BDD: Test::Unit, RSpec, Cucumber, etc. Continuous Integration: CruiseControl (http://cruisecontrol.sourceforge.net/)
  88. 88. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит Обычно тестируют так: def test_file_tree tree = FilesTree.new( &quot;/home/user&quot; ) assert tree assert_equal &quot;.&quot; , tree[0], assert_equal &quot;..&quot; , tree[1], assert_equal &quot;dir1&quot; , tree[2] assert_equal &quot;file1&quot; , tree[2][0] assert_equal &quot;file2&quot; , tree[3] end
  89. 89. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит: мечтают о таком (cucumber) scenario : sample file tree When I go to /home/user Then I see current directory, top directory, dir1 There's a file2 in current directory There's a file1 in dir1 directory end
  90. 90. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит: но лучше всего так (Test::Unit): def test_file_tree tree = FilesTree.new( &quot;/home/user&quot; ) assert_equal &quot; . .. dir1 file1 file2 &quot; , serialize_tree(tree) end
  91. 91. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  92. 92. Что не понравилось
  93. 93. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  94. 94. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  95. 95. Тестирование
  96. 96. Профилировка и производительность
  97. 97. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  98. 98. Инструменты: Производительность Ruby – это красиво, удобно, мощно... но где же подвох?
  99. 99. Инструменты: Производительность Ruby – это медленно !
  100. 100. Инструменты: Производительность Ruby – это очень медленно !
  101. 101. Инструменты: Производительность Апрель 2008 Май 2008 Июнь 2008 Июль 2008 Время обслуживания запроса, % Худший случай: O(n a ) В среднем: O(log n)
  102. 102. Инструменты: Производительность Что делать? Оптимизировать производительность Переписывать на C Переписывать на SQL
  103. 103. Инструменты: Производительность Ruby-Prof (http://ruby-prof.rubyforge.org/) Всегда скажет что не так: %self total self child calls name 8.39 0.54 0.23 0.31 602 Array#each_index 7.30 0.41 0.20 0.21 1227 Integer#gcd 6.20 0.49 0.17 0.32 5760 Timecell#date 5.11 0.15 0.14 0.01 1 Magick::Image#to_blob gem install ruby-prof KCachegrind для визуализации результатов http://kcachegrind.sourceforge.net
  104. 104. Инструменты: Производительность
  105. 105. Инструменты: Производительность До какой степени оптимизировать? Пока не будет так: %self total self child calls name 1.42 0.39 0.25 0.14 1033 Range#each-1 0.85 0.43 0.15 0.28 2221 Array#each-1 0.74 0.13 0.13 0.00 113447 Array#[] 0.40 0.07 0.07 0.00 5008 Hash#initialize_copy 0.40 0.07 0.07 0.00 45467 Hash#[]= 0.40 0.13 0.07 0.06 37784 Hash#[] 0.17 0.15 0.03 0.12 176 Array#collect 0.17 0.08 0.03 0.05 22371 String#gsub 0.17 0.03 0.03 0.00 44881 Array#<< 0.17 0.03 0.03 0.00 15936 String#== 0.17 0.75 0.03 0.72 1218 Array#each 0.17 0.03 0.03 0.00 37274 PGresult#getvalue 0.11 0.18 0.02 0.16 137 Array#collect! 0.11 0.02 0.02 0.00 3227 User#id
  106. 106. Инструменты: Производительность Что нужно помнить при профилировке Ruby приложений? не забывать профилировать память в среднем приложении 1 сборка мусора == 100ms выделяете 1Gb? - ожидайте 1024/8 = 128 вызовов GC - потеряете 128 * 0,1 = 12,8 sec!!!
  107. 107. Инструменты: Производительность Что нужно помнить при профилировке Ruby приложений? выключать GC (GC.disable), иначе можно увидеть: class Foo def do_smth return &quot;x&quot; * 1024 # займем 1Kb памяти end end smth = &quot;x&quot; * 7999999 # займем почти 8Mb памяти Foo.new.do_smth # здесь произойдет GC -------------------------- %self calls name 0.10 1 Foo#do_smth # do_smth такой медленный??? 0.01 2 String#*
  108. 108. Инструменты: Производительность Переписывать на C не такая уж плохая идея: date-performance github.com/rtomayko/date-performance ускоряет операции с датами в 13 раз! ускоряет приложения в 1.5 раза monkeysupport http://github.com/burke/monkeysupport ActiveSupport переписанный на C
  109. 109. Инструменты: Производительность Переписывать Rails приложение на SQL тоже неплохая идея: – иногда ускорение в 5х – иногда делает возможным то, что невозможно в Ruby операции над большим кол-вом (1млн) объектов – детали в моей презентации &quot;Быстрее, Выше, SQL'нее&quot; http://www.slideshare.net/adymo/alexander-dymo-barcamp-2009-faster-higher-sql-2644467
  110. 110. Инструменты: Производительность Почему все так плохо? нет реальных приложений, на которых Ruby (и Rails) core teams могли бы тестировать производительность некому написать generational GC никто не профилирует память
  111. 111. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  112. 112. Что не понравилось
  113. 113. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  114. 114. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  115. 115. Тестирование
  116. 116. Профилировка и производительность
  117. 117. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  118. 118. Инструменты: Деплоймент monit скрипты мониторинга Отличительные особенности: - скорость ограничена CPU - нужно много памяти - monit не надежен VPS'ы могут не подходить! Хорошо работает - capistrano - rinda mongrel mongrel mongrel mongrel mongrel nginx rinda (s) rinda (w)
  119. 119. Инструменты: Деплоймент Проблема балансировки загрузки отдельные очереди на процесс Rails App 1 Rails App 2 Rails App 3 1 1 3 2 1 3 2 2
  120. 120. Инструменты: Деплоймент Решение: глобальная очередь Rails App 1 Rails App 2 Rails App 3 2 1 4 5 3
  121. 121. Инструменты: Деплоймент Выделенные очереди для длинных запросов очередь для длинных запросов обычные очереди Rails App 1 Rails App 2 Rails App 3 1 1 2 1 3 2
  122. 122. Инструменты: Деплоймент Конфигурация nginx для выделенных очередей upstream mongrel { server 127.0.0.1:5000; server 127.0.0.1:5001; } upstream rss_mongrel { server 127.0.0.1:5002; } server { location / { location ~ ^/feeds/(rss|atom) { if (!-f $request_filename) { proxy_pass http://rss_mongrel; break; } } if (!-f $request_filename) { proxy_pass http://mongrel; } } }
  123. 123. О чем речь? <ul><li>Язык Ruby </li><ul><li>Что понравилось
  124. 124. Что не понравилось
  125. 125. Интересные особенности </li></ul><li>Garbage Collection </li><ul><li>Что с ним не так
  126. 126. Как измерять и как бороться </li></ul><li>Инструменты </li><ul><li>Редакторы и IDE
  127. 127. Тестирование
  128. 128. Профилировка и производительность
  129. 129. Деплоймент </li></ul><li>Какой Ruby выбрать? </li></ul>
  130. 130. Какой Ruby выбрать?
  131. 131. Какой Ruby выбрать? EE GC и Twitter GC – настройки GC для Ruby Enterprise Edition и Twitter соответственно Производительность различных версий Ruby, %
  132. 132. Хотите попробовать Ruby и Rails? Приходите в нашу команду! http://www.acunote.com/pluron/jobs
  133. 133. Статьи про Ruby и Rails: http://blog.pluron.com Спасибо за внимание! Александр Дымо Director of Engineering [email_address]

×