Alexander Dymo - IT-клуб Николаева - April 2011 - Ruby: Beaty and the Beast

1. Ruby: Beauty and the Beast Александр Дымо IT-клуб Николаева www.acunote.com

3. 29 000 строк кода

4. 45 500 строк тестов

5. ~12000 зарегистрированных организаций

7. Что не понравилось

10. Тестирование

11. Профилировка и производительность

13. Язык Ruby: Что понравилось Меньше кода – больше кислорода! ~3-4 разработчика * ~5 лет = 29k строк???

14. Язык Ruby: Что понравилось Меньше кода – больше кислорода! 400 строк на Ruby == 6000 на C++

15. Язык Ruby: Что понравилось Уж больно хорошо все выглядит! module SearchLanguage class Parser class ParseError < StandardError; end def self. parse (text) parser = Parser. new parser. parse (text) end private : def parse_search_query parse_and_expression end def parse_and_expression match_spaces node = ExpressionNode. new (:and) return node if empty_buffer? node. expressions << parse_or_expression while match_AND and !empty_buffer? and !end_of_subexpression? node. expressions << parse_or_expression end node end end end

16. Язык Ruby: Что понравилось Методы с ! и ? [1,2,3] . include? 2 "foo bar" . gsub ( "o" , "a" ) "foo bar" . gsub! ( "o" , "a" )

17. Язык Ruby: Что понравилось Методы с ! и ? class Foo def transform! #... end def transformed? #... end end

18. Язык Ruby: Что понравилось Элегантный подход к getters/setters class Foo attr_accessor :foo end class Foo def foo @foo end def foo=(value) @foo = value end end f = Foo.new f.foo = 2 # f.foo=(2) puts f.foo

19. Язык Ruby: Что понравилось Блоки def do_smth(&block) puts yield(10) puts yield(20) end do_smth { |value| value + 5 } > 15 > 25

20. Язык Ruby: Что понравилось Возможность встроиться куда угодно class Time def humanize strftime("%a %b %d, %Y %H:%M") end end puts Time.now.humanize > Thu Apr 21, 2011 13:37 ...мы дополнили 28 различных классов

21. Язык Ruby: Что понравилось Возможность встроиться куда угодно class BigDecimal alias_method :eq_without_boolean_comparison, :== def eq_with_boolean_comparison(other) if [FalseClass, TrueClass].include? other.class return false end eq_without_boolean_comparison(other) end alias_method :==, :eq_with_boolean_comparison end

22. Язык Ruby: Что понравилось Правильный способ встраивания/расширения class Foo def do_smth puts "Hello World" end end class Foo def do_smth_with_decoration puts "--------------" do_smth_without_decoration puts "--------------" end end f = Foo.new f.do_smth > -------------- > Hello World > --------------

23. Язык Ruby: Что понравилось Возможность переписать все что угодно class Foo { private: void doSmth() { std::cout << "Hello World" } }; ... class Foo def doSmth puts "Hi" end end f = Foo.new f.doSmth > Hi

31. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false or true puts x #???

32. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false or true (x = false) or true puts x > false

33. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = false || true x = (false || true) puts x > true

34. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = 2 if false or true puts x > ?

35. Язык Ruby: Что не понравилось Perl'измы в синтаксисе x = 2 if false or true x = 2 if (false or true) puts x > 2

36. Язык Ruby: Что не понравилось Python'измы в синтаксисе class Foo attr_accessor :x def do_smth x = 10 end end f = Foo.new f.x > nil #WTF?

37. Язык Ruby: Что не понравилось Python'измы в синтаксисе class Foo attr_accessor :x def do_smth self. x = 10 end end f = Foo.new f.x > 10

38. Язык Ruby: Что не понравилось Переменные экземпляров классов class Foo attr_accessor :x def initialize @x = 10 #или self.x = 10 y = @x #или y = x end end

46. Язык Ruby: Интересные особенности Модули: пространства имен или решение проблемы множественного наследования module ActiveRecord module ConnectionAdapters class MysqlAdapter def execute #... end end end end module ActiveRecord module Validations def valid? errors.empty? end end class Base include Validations end end

47. Язык Ruby: Интересные особенности Блоки: передача функций в другие функции или предусловия/постусловия def calculate(&algorithm) yield (2, 2) end result = calculate do |x,y| x + y end def calculate(&expression) return unless can_calculate? result = yield result.good? ? result : nil end result = calculate do 2+2 end

48. Язык Ruby: Интересные особенности method_missing class GoldenFish def method_missing(name, *args, &block) if name == :make_me_rich puts "here you go: $1 000 000" else puts "you want too much!" end end end fish = GoldenFish.new fish.make_me_rich > here you go: $1 000 000 fish.make_my_old_wife_a_supermodel > you want too much!

49. Язык Ruby: Интересные особенности Ассоциации в Rails: реализация с method_missing class User has_many :roles end user = User.find(:first) #метод ассоциации user.roles.find(:all, :conditions => "name = 'Admin'") #метод массива user.roles.map { |role| role.name }

50. Язык Ruby: Интересные особенности Ассоциации в Rails: реализация с method_missing class AssociationProxy def reload @target = [1,2,3] #just for an example end def method_missing(method, *args, &block) if @target.respond_to? method @target.send(method, *args, &block) else raise NoMethodError end end end end p = AssociationProxy.new p.reload #вызываем свой метод p << 3 #вызываем метод класса Array (у @target)

58. Ruby Runtime: Что с ним так и не так

59. Ruby Runtime: Что с ним так и не так Ruby – это красиво, удобно, мощно... но где же подвох?

60. Ruby Runtime: Что с ним так и не так Ruby – это медленно !

61. Ruby Runtime: Что с ним так и не так Ruby – это очень медленно !

62. Ruby Runtime: Что с ним так и не так Апрель 2008 Май 2008 Июнь 2008 Июль 2008 Время обслуживания запроса, % Худший случай: O(n a ) В среднем: O(log n)

70. Ruby Runtime: Garbage Collection Сборка мусора – самое плохое что может произойти с вашим Ruby кодом!

71. Ruby Runtime: Garbage Collection Сборка мусора происходит: каждые 8 Мб выделенной памяти выделенная однажды память повторно используется но никогда не возвращается!

72. Ruby Runtime: Garbage Collection в среднем приложении 1 сборка мусора == 100ms выделяете 1Gb? - ожидайте 1024/8 = 128 вызовов GC - потеряете 128 * 0,1 = 12,8 sec!!! - навсегда оставите себе этот гиг

73. Ruby Runtime: Garbage Collection class TestController def index gc_statistics { #дайте-ка мне гиг памяти! 1024.times { "x"*1024*1024 } } end end app.get '/test' > : allocated: 1049602K total in 2052 allocations, GC calls: 146, GC time: 17281 msec

74. Ruby Runtime: Garbage Collection Патч, включающий сбор статистики про GC http://blog.pluron.com/2008/02/memory-profilin.html

75. Ruby Runtime: Garbage Collection Эффект сборки мусора: GC GC Area Burndown 120 0,94 0,65 1,5x Sprint 20 x (1+5) (C) 0,59 0,30 2,0x Sprint 20 x (1+5) 0,70 0,40 1,8x Move Left 0,77 0,46 1,7x Ruby приложение будет в 2 раза медленнее! "Спасибо" сборщику мусора!

76. Ruby Runtime: Garbage Collection Способы бороться с GC в Ruby Enterprise Edition (www.rubyenterpriseedition.com) по-умолчанию RUBY_HEAP_MIN_SLOTS=10000 RUBY_HEAP_SLOTS_INCREMENT=10000 RUBY_GC_MALLOC_LIMIT=8000000 RUBY_HEAP_SLOTS_GROWTH_FACTOR=1.8 оптимальные настройки надо подбирать, но примерно RUBY_HEAP_MIN_SLOTS=1250000 RUBY_HEAP_SLOTS_INCREMENT=100000 RUBY_GC_MALLOC_LIMIT=30000000 RUBY_HEAP_SLOTS_GROWTH_FACTOR=1

77. Ruby Runtime: Garbage Collection Альтернативы? JRuby

78. Ruby Runtime: Garbage Collection Альтернативы? кто хочет написать generational garbage collector для Ruby?

87. Инструменты: Редакторы и IDE Ruby – проклятье разработчиков IDE def foo(arg) arg. end foo(2) foo(Class.new)

88. Инструменты: Редакторы и IDE Ruby – проклятье разработчиков IDE class Foo 10.times do |i| define_method "great_method_#{i}" .to_sym do #... end end end f = Foo.new f.

96. Инструменты: Тестирование TDD/BDD: Test::Unit, RSpec, Cucumber, etc. Continuous Integration: CruiseControl (http://cruisecontrol.sourceforge.net/)

97. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит Обычно тестируют так: def test_file_tree tree = FilesTree.new( "/home/user" ) assert tree assert_equal "." , tree[0], assert_equal ".." , tree[1], assert_equal "dir1" , tree[2] assert_equal "file1" , tree[2][0] assert_equal "file2" , tree[3] end

98. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит: мечтают о таком (cucumber) scenario : sample file tree When I go to /home/user Then I see current directory, top directory, dir1 There's a file2 in current directory There's a file1 in dir1 directory end

99. Инструменты: Тестирование Не спешите выбрасывать Test::Unit, он еще послужит: но лучше всего так (Test::Unit): def test_file_tree tree = FilesTree.new( "/home/user" ) assert_equal serialize_tree(tree), <<-END . .. dir1 file1 file2 END end

107. Инструменты: Производительность Медленный Ruby Что делать? Профилировать с Ruby-Prof Переписывать на C Переписывать на SQL

108. Инструменты: Производительность Ruby-Prof (http://ruby-prof.rubyforge.org/) Всегда скажет что не так: %self total self child calls name 8.39 0.54 0.23 0.31 602 Array#each_index 7.30 0.41 0.20 0.21 1227 Integer#gcd 6.20 0.49 0.17 0.32 5760 Timecell#date 5.11 0.15 0.14 0.01 1 Magick::Image#to_blob gem install ruby-prof KCachegrind для визуализации результатов http://kcachegrind.sourceforge.net

109. Инструменты: Производительность

110. Инструменты: Производительность До какой степени оптимизировать? Пока не будет так: %self total self child calls name 1.42 0.39 0.25 0.14 1033 Range#each-1 0.85 0.43 0.15 0.28 2221 Array#each-1 0.74 0.13 0.13 0.00 113447 Array#[] 0.40 0.07 0.07 0.00 5008 Hash#initialize_copy 0.40 0.07 0.07 0.00 45467 Hash#[]= 0.40 0.13 0.07 0.06 37784 Hash#[] 0.17 0.15 0.03 0.12 176 Array#collect 0.17 0.08 0.03 0.05 22371 String#gsub 0.17 0.03 0.03 0.00 44881 Array#<< 0.17 0.03 0.03 0.00 15936 String#== 0.17 0.75 0.03 0.72 1218 Array#each 0.17 0.03 0.03 0.00 37274 PGresult#getvalue 0.11 0.18 0.02 0.16 137 Array#collect! 0.11 0.02 0.02 0.00 3227 User#id

111. Инструменты: Производительность Что нужно помнить при профилировке Ruby приложений? не забывать профилировать память в среднем приложении 1 сборка мусора == 100ms выделяете 1Gb? - ожидайте 1024/8 = 128 вызовов GC - потеряете 128 * 0,1 = 12,8 sec!!!

112. Инструменты: Производительность Что нужно помнить при профилировке Ruby приложений? выключать GC (GC.disable), иначе можно увидеть: class Foo def do_smth return "x" * 1024 # займем 1Kb памяти end end smth = "x" * 7999999 # займем почти 8Mb памяти Foo.new.do_smth # здесь произойдет GC -------------------------- %self calls name 0.10 1 Foo#do_smth # do_smth такой медленный??? 0.01 2 String#*

113. Инструменты: Производительность Переписывать на C не такая уж плохая идея: date-performance github.com/rtomayko/date-performance ускоряет операции с датами в 13 раз! ускоряет приложения в 1.5 раза monkeysupport http://github.com/burke/monkeysupport ActiveSupport переписанный на C

114. Инструменты: Производительность Переписывать Rails приложение на SQL тоже неплохая идея: – иногда ускорение в 5х – иногда делает возможным то, что невозможно в Ruby операции над большим кол-вом (1млн) объектов – детали в моей презентации "Быстрее, Выше, SQL'нее" http://www.slideshare.net/adymo/alexander-dymo-barcamp-2009-faster-higher-sql-2644467

115. Инструменты: Производительность Почему все так плохо? нет реальных приложений, на которых Ruby (и Rails) core teams могли бы тестировать производительность некому написать generational GC никто не профилирует память

123. Инструменты: Деплоймент monit скрипты мониторинга Отличительные особенности: - скорость ограничена CPU - нужно много памяти VPS'ы могут не подходить! Хорошо работает - capistrano - rinda unicorn unicorn unicorn unicorn unicorn nginx rinda (s) rinda (w)

131. Какой Ruby выбрать?

132. Какой Ruby выбрать? Производительность различных версий Ruby, %

133. Спасибо за внимание! Александр Дымо Director of Engineering [email_address]

Alexander Dymo - IT-клуб Николаева - April 2011 - Ruby: Beaty and the Beast

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to Alexander Dymo - IT-клуб Николаева - April 2011 - Ruby: Beaty and the Beast

Similar to Alexander Dymo - IT-клуб Николаева - April 2011 - Ruby: Beaty and the Beast (20)

Alexander Dymo - IT-клуб Николаева - April 2011 - Ruby: Beaty and the Beast

Editor's Notes