1. Ruby: Beauty or the Beast? Александр Дымо IT Jam 2009 www.acunote.com

3. 22 000 строк кода

4. 31 000 строк тестов

5. ~5600 зарегистрированных организаций

7. Что не понравилось

10. Тестирование

11. Профилировка и производительность

13. Язык Ruby: Что понравилось Меньше кода – больше кислорода! ~3 разработчика * ~4 года = 22k строк???

14. Язык Ruby: Что понравилось Меньше кода – больше кислорода! 400 строк на Ruby == 6000 на C++

15. Язык Ruby: Что понравилось Уж больно хорошо все выглядит! module SearchLanguage class Parser class ParseError < StandardError; end def self. parse (text) parser = Parser. new parser. parse (text) end private : def parse_search_query parse_and_expression end def parse_and_expression match_spaces node = ExpressionNode. new (:and) return node if empty_buffer? node. expressions << parse_or_expression while match_AND and !empty_buffer? and !end_of_subexpression? node. expressions << parse_or_expression end node end end end

16. Язык Ruby: Что понравилось Методы с ! и ? [1,2,3] . include? 2 &quot;foo bar&quot; . gsub ( &quot;o&quot; , &quot;a&quot; ) &quot;foo bar&quot; . gsub! ( &quot;o&quot; , &quot;a&quot; )

17. Язык Ruby: Что понравилось Методы с ! и ? class Foo def transform! #... end def transformed? #... end end

18. Язык Ruby: Что понравилось Блоки def do_smth(&block) puts yield(10) puts yield(20) end do_smth { |value| value += 5 } > 15 > 25

19. Язык Ruby: Что понравилось Возможность встроиться куда угодно class BigDecimal alias_method :eq_without_boolean_comparison, :== def eq_with_boolean_comparison(other) if [FalseClass, TrueClass].include? other.class return false end eq_without_boolean_comparison(other) end alias_method :==, :eq_with_boolean_comparison end

20. Язык Ruby: Что понравилось Возможность встроиться куда угодно class Time def humanize strftime(&quot;%a %b %d, %Y %H:%M&quot;) end end ...мы дополнили 26 различных классов

21. Язык Ruby: Что понравилось Правильный способ встраивания/расширения class Foo def do_smth puts &quot;Hello World&quot; end end class Foo def do_smth_with_decoration puts &quot;--------------&quot; do_smth_without_decoration puts &quot;--------------&quot; end end f = Foo.new f.do_smth > -------------- > Hello World > --------------

22. Язык Ruby: Что понравилось Возможность переписать все что угодно class Foo { private: void doSmth() { std::cout << &quot;Hello World&quot; } }; ... class Foo def doSmth puts &quot;Hi&quot; end end f = Foo.new f.doSmth > Hi

24. Что не понравилось

27. Тестирование

28. Профилировка и производительность

30. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false or true puts x #???

31. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false or true (x = false) or true puts x > false

32. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false || true x = (false || true) puts x > true

33. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = 2 if false or true puts x > ?

34. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = 2 if false or true x = 2 if (false or true) puts x > 2

35. Язык Ruby: Что не понравилось Python'измы в синтаксисе class Foo attr_accessor :x def do_smth x = 10 end end f = Foo.new f.x > nil #WTF?

36. Язык Ruby: Что не понравилось Python'измы в синтаксисе class Foo attr_accessor :x def do_smth self. x = 10 end end f = Foo.new f.x > 10

37. Язык Ruby: Что не понравилось Переменные экземпляров классов class Foo attr_accessor :x def initialize @x = 10 #или self.x = 10 y = @x #или y = x end end

39. Что не понравилось

42. Тестирование

43. Профилировка и производительность

45. Язык Ruby: Интересные особенности Модули: пространства имен или решение проблемы множественного наследования module ActiveRecord module ConnectionAdapters class MysqlAdapter def execute #... end end end end module ActiveResource module Validations def valid? errors.empty? end end end module ActiveRecord class Base include Validations end end

46. Язык Ruby: Интересные особенности Блоки: передача функций в другие функции или предусловия/постусловия def calculate(&algorithm) yield (2, 2) end result = calculate do |x,y| x + y end def calculate(&expression) return unless can_calculate? result = yield result.good? ? result : nil end result = calculate do 2+2 end

47. Язык Ruby: Интересные особенности Ассоциации в Rails: реализация с method_missing class User has_many :roles end user = User.find(:first) #метод ассоциации user.roles.find(:all, :conditions => &quot;name = 'Admin'&quot;) #метод массива user.roles.map { |role| role.name }

48. Язык Ruby: Интересные особенности Ассоциации в Rails: реализация с method_missing class AssociationProxy def reload @target = [1,2,3] #just for an example end def method_missing(method, *args, &block) if @target.respond_to? method @target.send(method, *args, &block) else raise NoMethodError end end end end p = AssociationProxy.new p.reload #вызываем свой метод p << 3 #вызываем метод класса Array (у @target)

50. Что не понравилось

53. Тестирование

54. Профилировка и производительность

56. Garbage Collection: Что с ним не так Сборка мусора – самое плохое что может произойти с вашим Ruby кодом!

57. Garbage Collection: Что с ним не так Сборка мусора происходит: каждые 8 Мб (точнее миллионов байт) выделенной памяти

58. Garbage Collection: Что с ним не так Эффект сборки мусора: GC GC Area Burndown 120 0,94 0,65 1,5x Sprint 20 x (1+5) (C) 0,59 0,30 2,0x Sprint 20 x (1+5) 0,70 0,40 1,8x Move Left 0,77 0,46 1,7x Ruby приложение будет в 2 раза медленнее! &quot;Спасибо&quot; сборщику мусора!

60. Что не понравилось

63. Тестирование

64. Профилировка и производительность

66. Garbage Collection: Как с этим бороться Патч, включающий сбор статистики про GC http://blog.pluron.com/2008/02/memory-profilin.html gc_statistics { x = &quot;x&quot; * 1024 * 1024 * 1024 #дайте-ка мне гиг памяти! } > allocated: 1049602K total in 2052 allocations, GC calls: 146, GC time: 161 msec

67. Garbage Collection: Как с этим бороться Способы бороться с GC в Ruby Enterprise Edition (www.rubyenterpriseedition.com) по-умолчанию RUBY_HEAP_MIN_SLOTS=10000 RUBY_HEAP_SLOTS_INCREMENT=10000 RUBY_GC_MALLOC_LIMIT=8000000 RUBY_HEAP_SLOTS_GROWTH_FACTOR=1.8 оптимальные настройки надо подбирать, но примерно RUBY_HEAP_MIN_SLOTS=1250000 RUBY_HEAP_SLOTS_INCREMENT=100000 RUBY_GC_MALLOC_LIMIT=30000000 RUBY_HEAP_SLOTS_GROWTH_FACTOR=1

68. Garbage Collection: Как с этим бороться Альтернативы? JRuby

69. Garbage Collection: Как с этим бороться Альтернативы? кто хочет написать generational garbage collector для Ruby?

71. Что не понравилось

74. Тестирование

75. Профилировка и производительность

78. Инструменты: Редакторы и IDE Ruby – проклятье разработчиков IDE def foo(arg) arg. end foo(2) foo(Class.new)

79. Инструменты: Редакторы и IDE Ruby – проклятье разработчиков IDE class Foo 10.times do |i| define_method &quot;great_method_#{i}&quot; .to_sym do #... end end end f = Foo.new f.

81. Что не понравилось

84. Тестирование

85. Профилировка и производительность

87. Инструменты: Тестирование TDD/BDD: Test::Unit, RSpec, Cucumber, etc. Continuous Integration: CruiseControl (http://cruisecontrol.sourceforge.net/)

88. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит Обычно тестируют так: def test_file_tree tree = FilesTree.new( &quot;/home/user&quot; ) assert tree assert_equal &quot;.&quot; , tree[0], assert_equal &quot;..&quot; , tree[1], assert_equal &quot;dir1&quot; , tree[2] assert_equal &quot;file1&quot; , tree[2][0] assert_equal &quot;file2&quot; , tree[3] end

89. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит: мечтают о таком (cucumber) scenario : sample file tree When I go to /home/user Then I see current directory, top directory, dir1 There's a file2 in current directory There's a file1 in dir1 directory end

90. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит: но лучше всего так (Test::Unit): def test_file_tree tree = FilesTree.new( &quot;/home/user&quot; ) assert_equal &quot; . .. dir1 file1 file2 &quot; , serialize_tree(tree) end

92. Что не понравилось

95. Тестирование

96. Профилировка и производительность

98. Инструменты: Производительность Ruby – это красиво, удобно, мощно... но где же подвох?

99. Инструменты: Производительность Ruby – это медленно !

100. Инструменты: Производительность Ruby – это очень медленно !

101. Инструменты: Производительность Апрель 2008 Май 2008 Июнь 2008 Июль 2008 Время обслуживания запроса, % Худший случай: O(n a ) В среднем: O(log n)

102. Инструменты: Производительность Что делать? Оптимизировать производительность Переписывать на C Переписывать на SQL

103. Инструменты: Производительность Ruby-Prof (http://ruby-prof.rubyforge.org/) Всегда скажет что не так: %self total self child calls name 8.39 0.54 0.23 0.31 602 Array#each_index 7.30 0.41 0.20 0.21 1227 Integer#gcd 6.20 0.49 0.17 0.32 5760 Timecell#date 5.11 0.15 0.14 0.01 1 Magick::Image#to_blob gem install ruby-prof KCachegrind для визуализации результатов http://kcachegrind.sourceforge.net

104. Инструменты: Производительность

105. Инструменты: Производительность До какой степени оптимизировать? Пока не будет так: %self total self child calls name 1.42 0.39 0.25 0.14 1033 Range#each-1 0.85 0.43 0.15 0.28 2221 Array#each-1 0.74 0.13 0.13 0.00 113447 Array#[] 0.40 0.07 0.07 0.00 5008 Hash#initialize_copy 0.40 0.07 0.07 0.00 45467 Hash#[]= 0.40 0.13 0.07 0.06 37784 Hash#[] 0.17 0.15 0.03 0.12 176 Array#collect 0.17 0.08 0.03 0.05 22371 String#gsub 0.17 0.03 0.03 0.00 44881 Array#<< 0.17 0.03 0.03 0.00 15936 String#== 0.17 0.75 0.03 0.72 1218 Array#each 0.17 0.03 0.03 0.00 37274 PGresult#getvalue 0.11 0.18 0.02 0.16 137 Array#collect! 0.11 0.02 0.02 0.00 3227 User#id

106. Инструменты: Производительность Что нужно помнить при профилировке Ruby приложений? не забывать профилировать память в среднем приложении 1 сборка мусора == 100ms выделяете 1Gb? - ожидайте 1024/8 = 128 вызовов GC - потеряете 128 * 0,1 = 12,8 sec!!!

107. Инструменты: Производительность Что нужно помнить при профилировке Ruby приложений? выключать GC (GC.disable), иначе можно увидеть: class Foo def do_smth return &quot;x&quot; * 1024 # займем 1Kb памяти end end smth = &quot;x&quot; * 7999999 # займем почти 8Mb памяти Foo.new.do_smth # здесь произойдет GC -------------------------- %self calls name 0.10 1 Foo#do_smth # do_smth такой медленный??? 0.01 2 String#*

108. Инструменты: Производительность Переписывать на C не такая уж плохая идея: date-performance github.com/rtomayko/date-performance ускоряет операции с датами в 13 раз! ускоряет приложения в 1.5 раза monkeysupport http://github.com/burke/monkeysupport ActiveSupport переписанный на C

109. Инструменты: Производительность Переписывать Rails приложение на SQL тоже неплохая идея: – иногда ускорение в 5х – иногда делает возможным то, что невозможно в Ruby операции над большим кол-вом (1млн) объектов – детали в моей презентации &quot;Быстрее, Выше, SQL'нее&quot; http://www.slideshare.net/adymo/alexander-dymo-barcamp-2009-faster-higher-sql-2644467

110. Инструменты: Производительность Почему все так плохо? нет реальных приложений, на которых Ruby (и Rails) core teams могли бы тестировать производительность некому написать generational GC никто не профилирует память

112. Что не понравилось

115. Тестирование

116. Профилировка и производительность

118. Инструменты: Деплоймент monit скрипты мониторинга Отличительные особенности: - скорость ограничена CPU - нужно много памяти - monit не надежен VPS'ы могут не подходить! Хорошо работает - capistrano - rinda mongrel mongrel mongrel mongrel mongrel nginx rinda (s) rinda (w)

119. Инструменты: Деплоймент Проблема балансировки загрузки отдельные очереди на процесс Rails App 1 Rails App 2 Rails App 3 1 1 3 2 1 3 2 2

120. Инструменты: Деплоймент Решение: глобальная очередь Rails App 1 Rails App 2 Rails App 3 2 1 4 5 3

121. Инструменты: Деплоймент Выделенные очереди для длинных запросов очередь для длинных запросов обычные очереди Rails App 1 Rails App 2 Rails App 3 1 1 2 1 3 2

122. Инструменты: Деплоймент Конфигурация nginx для выделенных очередей upstream mongrel { server 127.0.0.1:5000; server 127.0.0.1:5001; } upstream rss_mongrel { server 127.0.0.1:5002; } server { location / { location ~ ^/feeds/(rss|atom) { if (!-f $request_filename) { proxy_pass http://rss_mongrel; break; } } if (!-f $request_filename) { proxy_pass http://mongrel; } } }

124. Что не понравилось

127. Тестирование

128. Профилировка и производительность

130. Какой Ruby выбрать?

131. Какой Ruby выбрать? EE GC и Twitter GC – настройки GC для Ruby Enterprise Edition и Twitter соответственно Производительность различных версий Ruby, %

132. Хотите попробовать Ruby и Rails? Приходите в нашу команду! http://www.acunote.com/pluron/jobs

133. Статьи про Ruby и Rails: http://blog.pluron.com Спасибо за внимание! Александр Дымо Director of Engineering [email_address]