Kyiv Quality Assurance Day 2021 АРТУР ШЕВЧЕНКО «Тестування мобільних додатків в умовах неможливості створення тестових даних» Слідкуйте за нами: Телеграм: t.me/goqameetup Linkedin: linkedin.com/company/goqa Fb: https://www.facebook.com/goqaevent Fb: https://www.facebook.com/qaday.org Youtube: https://www.youtube.com/channel/UCOyIrmpVbtqUZyRLxd9BKzA

1. Artur Shevchenko
Senior QA/QC Engineer at Yalantis, TechLead
PhD in Applied Mathematics and Theoretical Physics
https://www.linkedin.com/in/arthur-shevchenko/
Тестирование мобильных приложений в
условиях нехватки или невозможности создания
тестовых данных.
Практические примеры и сценарии.
https://www.facebook.com/arthur.shev/
https://www.instagram.com/artur_shev/

2. Киев
ул. Ильинская, 8
Днепр
пр-т. Дмитрия
Яворницкого, 5

3. Yalantis Education

4. Artur Shevchenko
Тестирование мобильных приложений в
условиях нехватки или невозможности
создания тестовых данных.
Практические примеры и сценарии.

5. На повестке дня:
1. Fiddler/Charles обзор
2. У меня ничего не работает и что делать? Топ 10 причин почему не
завелось
3. Практические примеры использования Fiddler
4. Android Studio для матерых тестировщиков

7. Network

8. А как быть с мобилкой?

9. Наши помощники

10. Кто знаком с Fiddler/Charles?

11. Fiddler/Charles что это такое?

12. Инструкция по настройке:
Fiddler:
https://docs.telerik.com/fiddler/Configure-Fiddler
Charles:
https://www.charlesproxy.com/documentation/configuration/

13. Инструкция по настройке:
установи

14. Инструкция по настройке:
установи настрой прокси сервер

15. Инструкция по настройке:
установи настрой прокси сервер настрой клиент

16. “у меня ничего не работает”(с)

17. ТОП-10 причин почему не
завелось

18. Нет траффика:
1. File-> Capture traffic
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureBrowsers

19. Не видим данных в запросах :
1. Tools > Fiddler Options > HTTPS
2. Decrypt HTTPS Traffic box
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/DecryptHTTPS

20. Если совсем все плохо:
1. Tools > Fiddler Options > HTTPS
2. Action
3. Reset All Certificates

21. Не видно трафик с телефона:
1. Tools > Fiddler Options
2. Allow remote clients to connect is
checked
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/MonitorRemoteMachine

22. Магический ай-пи:
1. Hover over the Online indicator
2. remember ipv-4
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForAndroid

23. tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForAndroid
Не забудь про телефон:
1. Wi-Fi настройки
2. Manage network settings

24. 1. Wi-Fi настройки
2. Manage network settings
3. Show advanced
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForAndroid
Не забудь про телефон:

25. 1. Wi-Fi настройки
2. Manage network settings
3. Show advanced
4. Proxy -> manual
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForAndroid
Не забудь про телефон:

26. 1. Wi-Fi настройки
2. Manage network settings
3. Show advanced
4. Proxy -> manual
5. заполнить proxy name, proxy port
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForAndroid
Не забудь про телефон:

27. Ох уж эти сертификаты:
1. http://ipv4.fiddler:8888/
2. скачай сертификат
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForiOS

28. Скачал но не установил:
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForiOS

29. Доверяй мне полностью:
для iOS:
1. Settings -> General -> About -> Certificate
Trust Settings
2. включить доверие
tutorial:
https://docs.telerik.com/fiddler/Configure-Fiddler/Tasks/ConfigureForiOS

30. Запрет на перехват:
для Android>6.0
1. Добавить файл res/xml/network_security_config.xml в приложение:
<network-security-config>
<debug-overrides>
<trust-anchors>
<!-- Trust user added CAs while debuggable only-->
<certificates src="user" />
</trust-anchors>
</debug-overrides>
</network-security-config>

31. для Android>6.0
2. Добавить ссылку на этот файл в манифесте приложения:
<?xml version="1.0" encoding="utf-8"?>
<manifest ... >
<application android:networkSecurityConfig="@xml/network_security_config"
... >
...
</application>
</manifest>
Запрет на перехват:

33. давайте повеселимся:

34. Пример 1:
длинные тексты в приложении

35. Пример 1:

36. Включили breakpoint

38. Не солидно...

39. А что если городов нет?

40. или кинотеатров...

41. Пример 2:
что делать если вы увидели такое сообщение?

43. Solution:
Autoresponder!

44. Подготовь json:
[
{
"id":"5",
"rank":0.5833333333333334,
"name":"Fiddler rules!",
"cinemas":[
{
"id":"0000000015",
"termId":"TE0083",
"rank":1,
"name":"Is The best testing tool",
"altName":"Is The best testing tool",
"concessions_available":false,
"in_seat_delivery":false,
"location":{"lat":47.903919,"lng":33.359216,"address":"вул. Лермонтова, 37"},
"phone":"0 800 505 333"
}
]
}
]

45. Добавь правило:

46. Делаете повторный запрос:

48. Пример 3:

49. Пример 4:

52. большинство приложений:

53. например вот это:

54. например вот это:

55. НО НЕ НАШЕ!
мы покажем приятный экран
с ошибкой

56. или хотя бы диаложек

57. А если интернет плохой?

58. Есть и более сложный способ

59. Есть и более сложный способ

60. А если интернет плохой?

61. А что еще?
1. длинные списки (глюки при быстром скролле)
2. empty states (пустые массивы)
3. empty fields (пустые поля)
4. невалидный формат
5. не валидный json (обычно скрашит но все же...)

62. Но что, если данные идут не с сервера?

63. iOS приложения:
1. Shared Preferences
2. local DB
3. files(internal or external storage)
Android приложения:
1. local DB
2. UserDefaults(.plist - XML key-value)
3. Keychain - secure DB
4. files(internal or external storage)

64. - спросить у разработчиков
Как узнать Package name Android
приложения:

65. - спросить у разработчиков
Как узнать Package name Android
приложения:

66. - спросить у разработчиков
- угадать
Как узнать Package name Android
приложения:

67. - спросить у разработчиков
- угадать
Как узнать Package name Android
приложения:

68. - спросить у разработчиков
- угадать
- узнать самому
Как узнать Package name Android
приложения:

69. - спросить у разработчиков
- угадать
- узнать самому
Как узнать Package name Android
приложения:
1. открыть приложение
2. подключить по шнурку к компьютеру
3. в командной строке набрать:
adb shell dumpsys window windows | find "mCurrentFocus"
4. ответ:
mCurrentFocus=Window{89465wqe u0 com.test.app/com.test.app.presentation.login.LoginActivity}

70. Android приложения:
найди в списке data/data package name приложения

71. 1. авторизационный токен
2. состояния экранов в приложении
3. состояния текстовых полей, чекбоксов, пикеров и т.д.
4. и многое многое другое.

72. Попрактикуемся?

73. Найдем shared preferences

74. сохраните как новый файл

75. отредактируйте

76. закройте приложение
удалите старые и загрузите новые shared preferences

77. Вуаля!

78. А что еще там есть?

79. 1. Скопировать
2. Открыть в любом SQLite редакторе
3. Отредактировать и сохранить
4. Удалить прошлую базу
5. Загрузить новую
6. ….
7. Profit

80. Все ли так просто будет всегда?

82. 1. Сборка должна быть только debug

83. Решение:
1. Открыть AndroidStudio
2. Стянуть билд с репозитория
3. Выбрать debug тип
4. Запустить
5. ….
6. Profit

84. 2. База данных должна быть без шифрования

85. Решение:
Тесная коммуникация с разработчиками

87. Чему мы научились:
1. Настраивать правильно Fiddler

88. Чему мы научились:
2. Мокать данные от сервера

89. Чему мы научились:
3. Проверять клиент на серверные ошибки

90. Чему мы научились:
4. Узнали о локальном хранении данных

91. Вопросики?

92. Artur Shevchenko
Тестирование мобильных приложений в условиях нехватки
или невозможности создания тестовых данных.
Практические примеры и сценарии.