Download to read offline
Uploaded byNikita Makarov
Pandoras white box
Документ обсуждает стратегии тестирования программного обеспечения, включая черный ящик и белый ящик, используя источники, такие как книга Грега Майерса. Он также охватывает различные методы покрытия кода, проблемы с техническим долгом и социальный анализ кода, предоставляя примеры и ссылки на ресурсы. Основное внимание уделяется важности чтения кода и понимания его структуры для создания эффективных тестов.
Pandoras white box
- 1.
- 2.
- 3.
- 4.
- 5. Черный ящик Черный ящик Наслайде черный ящик 5
- 6. Черный ящик Черный ящик Наслайде черный ящик Но вы его не видите потому что он черный 6
- 7. Черный ящик Черный ящик Наслайде черный ящик Но вы его не видите, потому что он черный Но он есть 7
- 8.
- 9. Myers, The Artof Software Testing The Economics of Testing To combat the challenges associated with testing economics, you should establish some strategies before beginning. Two of the most prevalent strategies include black-box testing and white-box testing… Источник: G. Myers, The Art of Software Testing , 2 ed. 9
- 10. Myers, The Artof Software Testing Определение White-box testing — A type of testing in which you examine the internal structure of a program. Источник: G. Myers, The Art of Software Testing , 2 ed. 10
- 11. Myers, The Artof Software Testing Практика • Statement coverage — покрытие операторов • Decision coverage — покрытие решение • Condition coverage — покрытие условий • Decision-condition coverage — покрытие условий и решений • Multiple-condition coverage — комбинаторное покрытие условий и решений Источник: G. Myers, The Art of Software Testing , 2 ed. 11
- 12. Myers, The Artof Software Testing Практика • Statement coverage — покрытие операторов • Decision coverage — покрытие решение • Condition coverage — покрытие условий • Decision-condition coverage — покрытие условий и решений • Multiple-condition coverage — комбинаторное покрытие условий и решений Источник: G. Myers, The Art of Software Testing , 2 ed. 12
- 13.
- 14.
- 15.
- 16. Теория Как надо Смотрим вкод Понимаем структуру и зависимости Делаем выводы, задаем вопросы, проектируем тесты …. PROFIT! 16
- 17.
- 18.
- 19.
- 20.
- 21. Real Life Security Framework Web-сервер WebFramework 21
- 22. Real Life Security Framework Web-сервер WebFramework Еще один Web Framework 22
- 23. Real Life Security Framework Web-сервер WebFramework Еще один Web Framework ORM Framework База данных 23
- 24.
- 25.
- 26. Практика Intro Готовых рецептов небудет Многое зависит от контекста 26
- 27. Практика Intro Готовых рецептов небудет Многое зависит от контекста Влияние на команду - must have 27
- 28.
- 29. Easy level Инструменты • codeformatting • style checks • static code analysis • unit tests • mutation testing 29
- 30.
- 31. Medium level Инструменты •правильное расположениекода •правильное оформление кода •правильные зависимости в коде 31
- 32. Что не так? 32
- 33.
- 34.
- 35.
- 36.
- 37. Netflix Chaos Monkey SimianArmy Gareth Bowles , GTAC 2014 Molly Peter Alvaro & co. , QCon London 2017 Gremlin Kolton Andrus, SRECON, 2017 37
- 38.
- 39.
- 40.
- 41. Fault Injection Testing Агенты •CPU Burn • Disk Burn • RAM Burn • Latency • Packet Loss • Network failures 41
- 42. Fault Injection Testingwith Groovy - Demo 42
- 43.
- 44. Code Coverage &Co. 44
- 45. Code Coverage Инструменты • Jacoco,Cobertura - Java • OpenCover - .NET • Coverage - Python • SimpleCov - Ruby • OpenCppCoverage - C++ • cover , gcov - Go 45
- 46.
- 47.
- 48.
- 49.
- 50.
- 51.
- 52. Что делать? AT «+» AT«-» Люди «+» Люди «-» сравнить подумать писать автотесты удалять код 52
- 53. Code Coverage Что можносделать с покрытием ? • интроспекция для ручного тестирования • мерило качества для автотестов • мертвый код и мертвые фичи 53
- 54.
- 55.
- 56.
- 57. Задача о рюкзаке Ресурсдля запуска тестов № 1 Ресурс для запуска тестов № 2 57
- 58. Задача о рюкзаке 12 3 6 7 8 4 5 9 10 58
- 59. Задача о рюкзаке 1 2 36 7 84 59 10 59
- 60. Задача о рюкзаке 1 2 36 7 84 59 10 20% 60
- 61. - Ты хочешьзапустить тесты в 200 потоков… 61
- 62. … но тыделаешь это без уважения … 62
- 63. - и тестову тебя … всего 50 63
- 64.
- 65. Все IDE делаютэто! 65
- 66. Все IDE делаютэто! 66
- 67. Парсинга кода, AbstractSyntax Tree - WAT? 67 Источник: http://bit.ly/2j8gype
- 68.
- 69. BERRIMOR Что умеет делать? • выкачивать код из репозиториев • парсить код • выделяет метаинформацию • считать тесты • получать метаинформацию из тестов (тэги, отключенные тесты) • знает владельцев тестов 69
- 70.
- 71. Коллективная ментальная модель- С. Архипенков Данные: Сергей Архипенков, Лекции по управлению программными проектами, 2009 …реальность, которая заключена в особой специфике производства программ, по сравнению с любой другой производственной деятельностью, потому что то, что производят программисты – нематериально, это коллективные ментальные модели, записанные на языке программирования. 71
- 72. Социальный анализ кода? Чтоможно сделать ? • Mining Repository Data to Debug Software Development Teams , Elmar Juergens • Seven Secrets of Maintainable Codebases , Adam Tornhill • How Flaky Tests in Continuous Integration: Current Practice at Google and Future Directions, John Micco, Atif Memon 72
- 73. Социальный анализ кода Чтоможно узнать ? • кто чинит и кто ломает • неявные связи в коде • кому отдать код на ревью • где чаще всего фиксят • мертвый код и мертвые фичи • технический долг 73
- 74. Слабая гипотеза отехническом долге Где у нас закопан технический долг ? • в баг-трекере есть баги и у них есть ID • в Git есть коммиты и в комментариях пишут ID таски • файлы в Git в которых часто чинят - это технический долг 74
- 75. Дисциплина - этохорошо! 75
- 76. Kafka Источники • https://issues.apache.org/jira/projects/KAFKA • https://github.com/apache/kafka •Прекрасное в репозитории http://bit.ly/2yfc7lA и http://bit.ly/2wO5ByG 76
- 77.
- 78. Белый ящик -это стратегия! 78
- 79.
- 80.
- 81.
- 82.
- 83.
- 84. Примеры Medium Level • ArchUnitDemo - https://goo.gl/kGKF9T • Annotation Processing Demo • Library - https://goo.gl/GcuLC3 • Test Project - https://goo.gl/eynhCr • Fault Injection Testing with Groovy Demo - https://goo.gl/SN4ooJ 84
- 85. Примеры Nightmare Level • CodeCoverage Demo - https://goo.gl/YJfQQB • Social Coding Analysis - https://goo.gl/jd1WPD 85