Testing en aplicaciones móviles iOS, Android

Sesión 1 – Testing
Jose Cortés
SlashMobility

LET’S TEST IT!
Testing
Procesos que permiten verificar y revelar la calidad de un producto software.
Es decir: que las aplicaciones funcionen como se espera que lo hagan y de forma eficiente y efectiva.
Conceptos como estabilidad, escalabilidad, eficiencia y seguridad se relacionan a la calidad de un producto
Program testing can be a very effective way to show the presence of bugs, but it is hopelessly inadequate for showing their absence.

Testing: ¿para qué?
+
=

BUG!
Ordenador Mark II
Bug encontrado por Grace Murray Hopper

Alcance del testing
Se pueden realizar testing de aspectos funcionales y no-funcionales:
FUNCIONAL: ¿Puede el usuario realizar una acción? ¿funciona correctamente una parte de la App? => APP FUNCIONA
NO FUNCIONAL: Aspectos no relacionados con acciones o funcionalidades: rendimiento, seguridad … => CALIDAD:
Testeabilidad: los componentes sean fácilmente aislables.
Escalabilidad: se pueden añadir cambios no-traumáticos
Mantenibilidad: fácil de modificar
Usabilidad: no hay que hacer maniobras “extrañas” para usarlo
Rendimiento: lo que la app hace, lo hace bien

Testing y bugs
¿Pruebas? Tengo otras cosas que hacer…!!
Cuanto antes aparezca un fallo menos cuesta solventarlo (en $$ y tiempo)

¿Qué testear?
Fallo común: testear aspectos no requeridos en la aplicación:
¡La estrategia de testing dependerá de los requerimientos!

¿Cómo testear?
¿Testeamos todas las posibles combinaciones?
¿ Testeamos sólo algunas partes? Si hay algún bug remoto, quizás no lo encuentren… (una posibilidad entre 1.000)
Posibilidad de que 1 usuario NO encuentre bug: 99’99%
Posibilidad de que 2 usuarios NO encuentren bug: 99’98 %
Probabilidad de que 1.000 usuarios NO encuentren bug: 90’4%
Probabilidad de que 100.000 usuarios NO encuentren bug: 4’5%
Debemos definir estrategia de testing para buscar un punto medio: nosotros utilizaremos estrategias inspiradas en box-approach
10^90 posibles posiciones

Testing: boxapproach
Metáfora para visualizar las funcionalidades.
Desde fuera la funcionalidad sólo nos importa lo que hace, no COMO lo hace (black-box).
Desde dentro de la funcionalidad, nos importan los detalles y cómo se llevan a cabo (white-box)

Testing: white-box
Testeamos la App conociendo sus componentes internos: funciones, algoritmos, estructuras de datos…
Perspectiva interna: vemos el mundo desde el interior.
Ejemplos:
Validación de la API de la aplicación (clases, métodos…)
Code-coverage: requerimiento que en los tests se ejecuten el 90% de las líneas de código.
Problemas: no puede detectar errores funcionales.
Podemos testear la clase Oferta, sus métodos, el Controlador que utiliza esta clase, pero no cómo se está utilizando.
Algoritmo tarda 1ms en ordenar 100 elementos. Si la aplicación tiene 500 millones, no cumplirá los requisitos funcionales.

Testing: black-box
Testeamos la App sin conocimiento interno de la aplicación.
Perspectiva externa: vemos el mundo desde el espacio
Dada una entrada el componente debe devolver una salida concreta.
Testing de una función que dados X y Y, devuelve la multiplicación.
Al introducir un texto se devuelve una lista que coincida con el texto
Testing de un componente que devuelve la ubicación.
Ventajas:
Si tenemos ladrillos testeados correctamente
Si tenemos vigas testeadas correctamente
Si tenemos cemento testeado correctamente

Testing: clasificación
Durante el ciclo de vida del software:
Unittesting (ComponentTesting): validan código, normalmente funciones y clases (WB). Útil para encontrar casos “raros” (corner cases)
Integrationtesting: verifican los “conectores” entre los componentes (APIs, servicios…)
SystemTesting: Verifica todo en conjunto.
SystemIntegrationTesting: Integración con sistemas de terceros.
Por objetivos:
Regressiontests: se buscan bugs que vuelven al asalto
Acceptancetests: realizado por el cliente para validar que todo está correcto.

Testing en Apps Móviles
TestingApps Móviles vs otros entornos (WEB) muy diferente.
Testing en Web es feliz, rosa y la persona se puede simplificar en “clicks”
Testing en Apps Móviles puede ser infernal: hay que gestionar sensores, el usuario puede cambiar orientación del dispositivo, darle patadas…
Hay requerimientos funcionales y no-funcionales inherentes: batería, llamadas entrantes, soporte multidispositivos…

Testing en Apps Móviles: Testing Interface
Validación de botones, inputs de texto…
Validar cada pantalla de forma integral (¿hace lo que se supone que debe hacer?)
Validar el flujo de navegación (¿desde la pantalla de listado de restaurantes puedo acceder a los favoritos?)
¿Qué pasa cuando cambia la orientación del dispositivo?¿y si se hace muy rápido?

Testing en Apps Móviles: Usabilidad
¿Es fácil navegar entre pantallas o hay que realizar combinaciones esotéricas?
¿Se muestra información redundante y que no aporta valor?
¿Se puede visualizar en el idioma que corresponde?
TODAS (repetimos, TODAS) las interacciones del usuario con el sistema debe generar algún tipo de FEEDBACK!
Clicks en botones
Llamadas a través de Internet
Cualquier operación POTENCIALMENTE lenta: suponer siempre el caso peor!
Verificación de las funcionalidades OFFLINE / ONLINE. ¿el usuario va a perder información al enviarla a un server por haber perdido la cobertura temporalmente?

Testing en Apps Móviles: Performance
¿Qué pasa si la conexión a un server se hace por 3G en lugar de WIFI?¿y en 2G?
¿Qué pasa si se debe enviar/recibir mucha información de un servicio web?
¿Las imágenes que usamos son del tamaño “adecuado”?
Optimizar: código redundante => ciclos de CPU => +consumo batería => usuario infeliza
¿Cumple la App con los tiempos exigidos por los usuarios?
¿Existen memoryleaks?
¿Liberamos los recursos (GPS, cámara de fotos) que reservamos?

Testing en Apps Móviles: Seguridad
Los envíos/recepción de datos sensibles deben ir codificados: CODIFICACIÓN + AUTENTICACIÓN (HMAC-SHA)
Detección de puntos en la app que puedan recibir información maliciosa. Corolario: el server no es nuestro amigo (necesariamente)
No suponer: ¡el mundo es malvado, cruel y vil!
Cualquier archivo que guardemos en la aplicación puede llegar a manos de terceros
Soporte de multiusuarios sin que interfieran los datos entre ellos

Testing en Apps Móviles: Servicios
Las Apps móviles deben actuar como clientes, no como servidores.
Debemos validar qué pasa cuando se cae un Servicio, devuelve respuestas mal formadas, errores controlados…
¿Qué pasa si el Servicio tarda demasiado en responder?
¿Qué pasa si se intenta acceder a un Servicio sin conexión?¿Y si cae la conexión durante la transmisión de info?

Testing en Apps Móviles: Recursos de bajo nivel
¿La App está generando “basura” de algún tipo? Ficheros temporales sin limpiar, base de datos local creciendo demasiado…
¿Estamos utilizando correctamente los sensores?¿Liberamos el GPS?¿Hacemos más llamadas al servidor de las que tocan?
¿Usamos demasiada memoria o no la liberamos correctamente?

Testing en Apps Móviles: Operacional
¿Estamos “backupeando” información necesaria en la App?
¿Estamos preparados para el modo “espantada”? Si muere la batería, necesitamos tener un plan de Save y Recovery
¿Si se actualiza a una nueva versión del Market correspondiente, se pierden datos?
¿Qué pasa si llaman mientras estamos utilizando la App?¿Y si llega un SMS?
¿La batería parece bajar radicalmente con el uso de nuestra App?

Testing en Apps Móviles: Compatibilidad, multidispositivo y entornos
¿Se ha validado la App en los dispositivos, versiones de SO y modelos acordados?
¿Cómo se comporta la aplicación en distintas pantallas y resoluciones?
¿Qué pasa si el servidor de integración cambia?¿Se soporta bien el cambio y sin traumas?
¿Puede nuestra aplicación afectar a los sistemas de terceros? ¿Puede poner en riesgo los sistemas de otros o degradarlos?

Testing: casos prácticos SIT10

Testing: casos prácticos LetsBonus

Testing: casos prácticos Push-cars

http://slashmobility.com	1091
http://www.softqanetwork.com	390
http://derabb.blogspot.com	41
http://derabb.blogspot.com.es	9
http://twitter.com	2
http://a0.twimg.com	2
http://derabb.blogspot.mx	2

Testing en aplicaciones móviles iOS, Android

by SlashMobility.com on Sep 05, 2011

Accessibility

Categories

Upload Details

Usage Rights

7 Embeds 1,537

Statistics

Testing en aplicaciones móviles iOS, Android Presentation Transcript