Appréhender tous les enjeux de la qualité

Optimiser sa stratégie de tests applicatifs

Introduction
Matinée 01 – jeudi 15 mars 2012
Par Philippe Riaux, Directeur QA & Test
Cognizant France

Groupe international de conseil & services IT

Créé en 1994, entité IT de Dun&BradSreet, Côté au
NASDAQ depuis 1996

Groupe international de conseil et de services
IT/métier incluant: TMA/TRA, BPO, DWBI,
CRM/MDM…

+137.700 associés + 58 centres de services

+785 clients (+90% de la croissance)

CA: 6,12 milliards de dollars en 2011 (+33%)

En France depuis 2005 – Paris, Lyon, Grenoble

Un des plus grands acteurs indépendants de Test
Pionnier de la professionnalisation des Tests

En France: Acquisition de Galileo en 2010,
Ouverture d’un Centre de Services de Test
à Grenoble en 2012

3

QA & Test
Indépendance IV&V
75% test de code non développé par Cognizant
+350 clients QA&Test dans le monde
Mutualisation des ressources et centres
d’excellence
100% de couverture des besoins QA&Test
Modèle BA/QA – réduction de 20% des efforts
pour le transfert de connaissance
Solutions /Frameworks/Accélérateurs pouvant
réduire jusqu’à 25% des coûts et 33% du time
to market
Alliances stratégiques globales, dont: HP

Coûts
Notre positionnement n’est pas le test mais la
qualité totale. Le test est notre état vers la cible

Notre cible : mettre en œuvre et améliorer la chaine
de production de la qualité (Quality Supply Chain) dans Qualité
le but d’accroître la qualité des SERVICES (et non des
applications) rendus à l’utilisateur tout en diminuant les
coûts d’obtention de cette qualité.
Time To Market
4

www.cognizant.com
E. Info.France@Cognizant.com
T. 01 70 36 56 57
1-3, rue du Château, 92200 Neuilly-sur-Seine

09h00 - 09h10 : Introduction

Introduction

Par

Philippe Riaux, Head of QA & Test Cognizant France

09h10 - 09h40 : Point de vue analyste

Présentation du marché, des tendances et des forces en
présence sur le marché QA & test
Par

Dominique Raviart, Analyste, NelsonHall

QA & Test Logiciel:
Tendances du Marché et Modèles
de Sourcing

dominique.raviart@nelson-hall.com
© 2012 by NelsonHall.

Agenda

1 Etat du marché

2 Outsourcing et contrats pluriannuels

3 Innovation et offres de services

4 Conclusion

© 2012 by NelsonHall. NelsonHall-Proprietary – Not for distribution without permission 9

Etat du marché


État du marché :
Coexistence de deux formes de test applicatif

Test traditionnel Test spécialisé
Dépenses en 2010
But Oui / non Méthodologies,
processus, et recherche
de la qualité logicielle
TS
Équipe Développeurs et Spécialistes du test et des 25%
utilisateurs clef projets de test
TT
75%
Avantages Connaissance de Testeurs de profession
l’applicatif, flexibilité des Méthodologies et
équipes, test intuitif stratégies de test

Contraintes Test non exhaustif. Couverture de test
Test dit « héroïque » implique la délocalisation
des tests.
Processus = rigidité.


État du marché :
Les coûts deviennent visibles… mais pas les gains

• La forte croissante de dépenses en test
spécialisé provient d’un déplacement du
test traditionnel vers le test spécialisé
• Le coût du test apparait de manière visible
et devient une charge
• D’autant plus que le test spécialisé peut
conduire à une inflation des dépenses
• Comment quantifier la qualité des
applications ?
Test traditionnel Test
spécialisé


État du marché :
Le test fonctionnel représente 75% des dépenses en test

Offres de Consulting
support 6%
2%

Offres
Non-
nouvelles
fonctionnel
• Les dépenses en test fonctionnel 11%
7%
toujours importantes et
constantes en %
• Une part d’automatisation qui
reste limitée
• Des dépenses limites en offres de
support, en consulting. Test
fonctionnel
74%


État du marché :
Quatre grands profils de clients avec des objectifs
différents

Quality-
driven
• “Efficiency clients” cherchent à centraliser,
clients
standardiser les outils et les processus, et 10%
Revenues
surtout à baisser les coûts seekers
• ”Transformation-focused clients” sont focalisés 15%
sur la mise en place d’un applicatif à vocation
Efficiency
interne clients,
• “Revenue seekers” sont focalisés sur un Transform.- 55%
focused
applicatif à usage externe, pour une offre de clients
service par ex. 20%
• “Quality-driven clients” sont des vendeurs de
produits technologiques.


État du marché :
Déjà 165.000 testeurs de profession…

• Le nombre de testeurs de
Nombre de testeurs de
profession continue d’augmenter profession
»Plus de 60.000 testeurs en plus 250 000
en 30 mois 200 000
• L’Inde représente déjà 75% de ce 150 000
nombre (50% il y a 30 mois)
100 000
• Le nombre des testeurs onshore
50 000
représente ~20% du total.
-
2009 2011 2013 F


État du marché
2012 : année de réduction des coûts
8,0%
Impacts attendus sur les dépenses
logicielles 6,0%

• Gel des dépenses 4,0%
• Gel des grand projets en +6.7%
intégration et en outsourcing 2,0%

0,0% -0,1%
MAIS aussi 2010 2011 F 2012F 2013F
• Adoption de l’offshore (budgets -2,0%
offshore attendus en légère -3,0%
progression. -4,0% -8,0%
-6,0%

-8,0%

-10,0%
Croissance des dépenses attendues en
intégration de systèmes


Outsourcing et contrats
pluriannuels


Contrats pluriannuels :
Emergence dans un marché traditionnellement marqué
ressources

Forme de service Durée typique En dépenses STS

Projets 3 à 6 mois 65%

Contrats pluriannuels 2 à 3 ans 35%

Au total 1 an ½


Les principaux avantages

Un modèle qui convient particulièrement aux applications en
mode maintenance +, avec plusieurs versions par an :
• Il permet d’envisager l’investissement en licences de logiciel
de test et surtout le développement de scripts automatisés,
ainsi que de tests de performance
• Le volume de test justifie les coûts de transition,
l’investissement humain ainsi que tous les changements
autour de la documentation/langue de travail
• Le « flex team » : garder une base de personnel dédiée sur
les applications client.


Contrats pluriannuels:
Les contrats d’outsourcing

Les formes de contrats pluriannuels sont très variées . On y trouve
:
• Des contrat cadres: panels de fournisseurs garantissant
volumes contre prix. Le modèle est fonctionne avec des
engagements variées: AT, forfait, sur site, hors site, offshore
• Outsourcing ou la responsabilité du travail est en partie
transférée à la SSII
• Entre les deux extrêmes, toutes les déclinaisons sont possibles
comme en TMA et infogérance.


Les « SLAs » sont basés sur la RH, et de manière
croissante sur la productivité

Les deux types de SLA les plus communs sont des engagements
basés :
• Sur un nombre de personnes à une date donnée
• Sur la productivité ex. nombre de cas conçus, automatisés ou
réalisée par employé et par jour.

Des SLA moins courantes :
• Basées sur la qualité du développement / amélioration ex.
nombre de défauts trouvés en production
• Les unités d’œuvre business ex. rémunération de la SSII pour
ses activités de test en app store indexées sur le CA du app
store.


Innovation et offres de services


Innovation et offres de services :
Les critères humains
RH :les critères de sélection d’une SSII
• Dépenses en formation en RH en connaissances métier et applicatives
• Taux de rotation des effectifs en nearshore / offshore
• Inflation des salaires en nearshore / offshore et leur indexation dans les contrats
• Taille critique en Inde : un sujet compliqué
• Partenariats universitaires.


Les offres non RH
Portails de commande d’offres standardisées :
• Environnements de test
• Certification WiFi ou bluetooth.

Offres forfaitaires :
• Tests de non-régression pour applications en mode maintenance et versions
• Tests de performance : basé sur des unités d’œuvre IT
• SAP : tests de non-régression sur des unités d’œuvre IT
• Pay-per-bug
• Assurance qualité.


Au-delà des contrats pluriannuels : l’innovation en
matière d’offres est présente à de nombreux niveaux
Quelques exemples d’innovation :
• Sur la partie exécution des test fonctionnels :
Des répertoires de cas de tests, de scripts, propres à un applicatif ou à un processus
métier
Des outils propriétaires ex. test de mobiles et d’applications nomades, sur les
protocoles financiers
Des outils sur des activités spécifiques : création de cas de test en « reverse
engineering »
• Sur les activités dites de support de test : données de test, masquage de données de test,
environnements de test et administration
• Agile et scrum
• Au-delà de l’exécution des tests
La méthodologie TPI et TMMi
L’intelligence applicative.

Conclusion


Conclusion : attention

• A la langue
• A la ressource humaine
• A la connaissance métier
• A l’innovation contractuelle
• A l’investissement en outils.


NelsonHall…

• Activités d’études de marchés et de consulting
• Concurrence est Gartner et Forrester
• Connu pour expertise en BPO
• Base client inclut les utilisateurs et les SSII
• Nous sommes les spécialistes du détail.


09h40 - 10h00 : Avis d’expert

Les grandes tendances de la Qualité et de la nouvelle
génération de services

Par

Andreas Golze, AVP Head of Testing Europe Cognizant

Enabling Business Readiness
through Software Quality
Transformation

| ©2011, Cognizant

Trends Impacting QA
Business Impact
• Mergers & Acquisitions
• Business consolidation & Increasing emphasis on migrating to Test COE
footprint reduction model to drive quality into front end of SDLC
• Alternate pricing & delivery
models
• Increasing emphasis on Adoption of alternate lifecycle
application longevity & immunity methodologies, test design automation and
• Focus towards governance, risk script less testing
& compliance
• Increased COTS adoption Major push across large enterprise to drive
greater standardisation and
automation into test processes

Technology Demand for expertise to enable business
readiness of applications built for SOA,
mobile applications etc
• Web-based applications & SOA
• Frameworks for end-to-end
automation Preference towards adoption of virtualised
• Mobile & Surface Technologies & Scalable delivery models
• Cloud models for Testing
• Infrastructure globalisation & Support for testing in complex infrastructure
virtualisation techniques (compatibility, interoperatabilityetc.)

31 | ©2011, Cognizant

The Business Value of Testing
Cloud Based Models
Testing-as-a-Service
TEMS/Tools Management
Testing IPs

Virtualisation
Reduce Capex Spends

Effectiveness Innovation
Higher Quality & Better
Business Liaison
Predictability

BA/QA Model User Experience
Scientific Models Quality Engineering
Defect Prediction Models Business Process Validation
Tool Versatility

Efficiency
Optimise Unit Cost of Testing

End-to-End Automation
Solution Accelerators
Lean Models
Risk based Testing

What is the Role of QA? Testing Maturity Framework
Scope of Testing

Value Enhancers
Better Alignment and
Driving value to Business
Testing Partners Improved Customer
Experience
Gate Keepers End-to-End Service
Reduce Capital Efficiency
Independent –influencing Expenditure Effectiveness
Go-No Go Decisions Efficiency Virtualisation
Optimised Quality
Efficiency Virtualisation
Virtualisation
Innovation

Order Takers
Labor Arbitrage
Automation Benefits
Efficiency
Effectiveness
Virtualisation
Innovation

Maturity

Reshaping the Future – NextGen QA
Testers wear the hat More Componentised Automated QA
of users & Virtual

From ‘requirements’ Value based models (Cost End-to-End automation (Design,
validation to ‘experience’ per consumption) execution, data and environment
validation provisioning)
Crowd-on-Cloud models
Will be mandated to use Human effort will be restricted to
automation & virtualisation Flexible options for plug & validating inputs and monitoring
options play execution execution

Engineering as a
Quality discipline
ENTERPRISE QUALITY
MANAGEMENT JUST ENOUGH
PROCESS Shift left methods to help seed
quality while building applications

Quality frameworks will
encompass QA, infrastructure,
data and support elements

Adoption of methods to dissect
the surface to reengineer the
architecture

Code re-engineering for improved
PAY PER SERVICE reliability and business agility
PRICING


TaaS – Next Gen Testing Delivery Platform
What?
What does TaaS mean to
enterprises?

Standardised process model with
predictable and reliable
outcomes

Complete demand management
from workload simulation,
integration, provisioning,
How? execution and management

Flexible options for test tools on a
multi-tenancy basis

High environment availability
and instant environment provision
cycle

Ability to reuse and recycle
resources/environments.


Thank you

| ©2011, Cognizant

10h00 - 10h30 : Interview

Cloud, mobilité, services innovants ... la qualité au cœur de la
stratégie d'entreprise

Par

Jean-Baptiste Preziosi, Strategy and Applications Sales Leader , HP

Perform Better with
HP Software

JEAN-BAPTISTE PREZIOSI
Strategy and Applications HP Software
Jean-baptiste.preziosi@hp.com

© Copyright 2011 Hewlett-Packard Development Company, L.P.
The information contained herein is subject to change without notice.

HP Software, aujourd’hui

2,200 nouveaux clients
~50,000 clients sur l’année passée…

#5 Editeur Mondial 100% 4 chiffre d’affaires licences…
de
milliards de $
#1 logiciel Infra focused
on helping
#1 logiciel du Test IT perform
- App dev/lifecycle software better 14 000 personnes
- Distributed systems management pour vous servir

• En 1996 : Peregrine, #1 ITSM
• En 1997 : Mercury, #1 TEST et Performance
• En 1999 : Opsware, #1 DC Automation
+ de 10 Milliards $ • En 2012 : Rachat de Stratavia, Fortify & ArcSight
• En 2011 : Rachat d’Autonomy
d’investissements dans l’offre Software
• En 2012 : ….

L’INFORMATIQUE PEUT MIEUX FAIRE

2/3 des projets dérivent
10+ heures pour restaurer un service
34% ne sont pas alignés avec la
stratégie Des cyber-attaques de plus en plus
couteuses
> 80% des exigences mal documentées
Augmentation des contraintes de
2-8 semaines pour faire une mise à jour
conformités
Dans + de 75% des cas les utilisateurs
Explosion des données
détectent les premiers les incidents

40

LES DIRECTIONS METIERS…
Ventes Finance Supply HR

…ont un système de gestion de la performance
41
Mais pas l’informatique!

HP SOFTWARE: IT PERFORMANCE SUITE
Exhaustif, intégré et modulaire

EXECUTE SYSTEMATICALLY
Strategy, Planning, and Governance

SECURE PROACTIVELY
Security Intelligence and Risk Management

BUILD FASTER OPERATE SIMPLY STORE EFFICIENTLY

Application Lifecycle Automation Information Lifecycle
Management and Assurance Management

IT PERFORMANCE SUITE FOUNDATION
Collaboration, Orchestration, Analytics
42

UN NOUVEAU MONDE

Hybride Consumérisatio Agilité
n

Clients L’internet mobile
2010 | dépasse le fixe
Mobile
Everywhere
connected

Plus de 100 millions
Employés 2011 | d’applications Facebook
downloadées
En réseau
Social worker
Croissance à 3 chiffres
de l’usage mobile de
2011 | twitter et Facebook
Partenaires

Synchrone
Always on
Croissance de 300% du
2011 | mobile commerce
Faits saillants
Fournisseurs

Technophile 400 millions de
IT Consumer
2012 | smartphones >
44
livraisons de PC

Clients

Vote & Milite

Employés

Produit

Partenaires

Vend

Faits saillants
Fournisseurs

Compare

45

Clients

Employés

Supply Chain IT
Processus
DSI fait face à
Exigence des métiers
Partenaires
Applications plus
exposées
Applications
Challenge DSI
1. Fluidifier et maximiser
Fournisseurs les échanges entre
équipes
Infra-
-structures 2. Délivrer vite et de qualité
3. Délivrer pour tout usage
46

BUILD FASTER
HP ALM 11 - Application Lifecycle Management

Application Lifecycle Management
Integrations into Strategy and Planning

Project Planning & Tracking App Lifecycle Intelligence Enterprise Release Management

Integrations into Run
(Deployment, APM, ITSM)
Requirements Development Quality
Management Management Management
(PPM, Gov)

IDE, SCM, Defect Secure
Requirements Requirements
Build Mgmt Develop- Functional Performance Security
Definition Management
Integrations ment

Foundation
Process Standardization Extensibility
Traceability (i.e. Waterfall, Agile) Reporting (Open APIs)

Unified for the Core App Lifecycle, Integrated with the Complete App Lifecycle
47

BUILD FASTER
HP ALM 11 - Application Lifecycle Management

New
Integrations into Strategy and Planning

Project Planning & Tracking App Lifecycle Intelligence Enterprise Release Management

Integrations into Run
(Deployment, APM, ITSM)
Requirements New Development Quality
New
(PPM, Gov)

IDE, SCM, Defect Secure
Requirements Requirements
Build Mgmt Develop- Functional Performance Security
Definition Management
New Integrations ment

New
Foundation
Process Standardization New Extensibility
Traceability (i.e. Waterfall, Agile) Reporting (Open APIs)

Unified for the Core App Lifecycle, Integrated with the Complete App Lifecycle
48

Challenge DSI - Fluidifier les échanges

Enterprise
Collaboration
Application Lifecycle Agile Project
Intelligence Management

Collaborative platform for design and development of composite applications,
lifecycle management and functionality, performance and security validation.
Independent of development environment.

Challenge DSI – Délivrer vite !

Service
Virtualization Sprinter


This is a (rolling three-year) Statement of Direction and is subject to change without notice.

Challenges pour tester une application composite

3rd party

Existing Infrastructure • Indisponibilité

Pay-per-transaction
• Accès restreint

• Usage limité

• Execution lente

• Dépend d’un tiers
Application Under Test

2am-4am

3s response

51

HP Restricted and for HP & Channel Partner internal use. Document not for distribution. Content may be presented to customers upon request.

This is a (rolling three-year) Statement of Direction and is subject to change without notice.

Les services virtualisés = bouchons “intelligents”

3rd party
Services disponibles
Existing Infrastructure
immédiatement
Pay-per-transaction
Couverture
élargie des tests

Faible coût de
maintenance
Data

Perf.
APPREND
Confi ET Gestion de données
g

SIMULE simplifiée

Service
Application Under Test Virtualization
2am-4am

3s response
52


Challenge DSI – Délivrer pour tous les usages !


Test Automation
Performance Center Any Device Security
(Tru Client / Mobility)
(Fortify)


Test as a service = OUI !!!
Et encore plus - Lab Management Roadmap

Setup Labs Faster Reduce time in setup, reduces
time and cost of test.

Improve Deployment Deploy the AUT & testing tools
Accuracy correctly the first time. Don’t
waste test cycles.

Public & Private Setup the AUT & testing tools
Clouds where resources exist and is
more cost effective.

Deploy On Reuse lab assets when not in
Demand use. Only use them when
needed.

54

The HP IT Performance Suite
Comprehensive, Connected and Flexible

EXECUTE SYSTEMATICALLY

Strategy, Planning and Governance

SECURE PROACTIVELY

Security Intelligence and Risk Management

BUILD FASTER OPERATE SIMPLY STORE EFFICIENTLY

Application Lifecycle Operations Information Lifecycle

55

10h30 - 11h00 : Pause

Pause / Networking

11h00 - 11h45 : Table ronde

« Le Test et la qualité des applications, des gisements de
productivité pour l'entreprise »

Avec

Philippe Riaux, Cognizant, Jean-Baptiste Preziosi, HP ,
Dominique Raviart, NelsonHall ,
Et nos témoins: Catherine Lepesqueur, responsable qualification de la DSI de la
banque de détail France de la Société Générale
Et Amal Sud, Directeur Internationalisation, BNP Paribas Cardif

11h45 – 13h00

Cocktail / Networking

MERCI DE VOTRE PARTICIPATION !

Appréhender tous les enjeux de la qualité

Recommended

Recommended

More Related Content

What's hot

What's hot (20)

Similar to Appréhender tous les enjeux de la qualité

Similar to Appréhender tous les enjeux de la qualité (20)

More from Evenements01

More from Evenements01 (16)

Appréhender tous les enjeux de la qualité