SlideShare a Scribd company logo
1 of 13
Russia Development Centre
Deutsche Bank
For internal use only
Deutsche Bank
Group Technology & Operations
Specification by Example:
Investment banking way
Alexey Ieshin, Sergey Cherepniov, Deutsche Bank
1
Russia Development Centre
Deutsche Bank
For internal use only
Project background
One of the biggest risk
calculators in Bank
Sophisticated architecture
12 years of development
history
Problems
Not enough specifications
Release testing effort: full
regression test pack takes
approximately 1 man-year
Difficulties in sharing the
knowledge between locations
2
High level architecture
Russia Development Centre
Deutsche Bank
For internal use only
Client - server distributed application
Collect data from upstream systems/feeds
Grid calculations
Orchestration
Reporting
3
Our application
Russia Development Centre
Deutsche Bank
For internal use only
4
Splitter feature
Key part of the solution
Helps to handle large volumes of
trades
Helps to break down calculations
into sub-calculations
Helps to parallelize execution over
multiple cores
Russia Development Centre
Deutsche Bank
For internal use only
5
Specification by example (SBE) – Living
documentation
Russia Development Centre
Deutsche Bank
For internal use only
6
Initial try
Russia Development Centre
Deutsche Bank
For internal use only
7
Why was it failed?
Not everyone in the team bought it
Efforts considered to be the background tasks
Efforts were not properly planned in the beginning
Russia Development Centre
Deutsche Bank
For internal use only
Target
Learn how to use SBE
approach in our environment
Test automation for existing
regression test pack
How to achieve?
Build a cross functional team
(QAs, DEVs, FAs)
Create a test automation
framework
Share results with teams
8
Second try
Russia Development Centre
Deutsche Bank
For internal use only
Test automation
Built a cross-functional test
automation team
Created a test automation
framework
Participated in release:
significant amount bugs were
found by test automation
Currently tests save: 30%
testing efforts
Current coverage: ~ 50% of
regression test pack
SBE
Regular demos and noise –
everyone aware about approach
efficiency
People have hands on
experience with SBE
Management bought the idea
Learnt how to plan and
manage the work with the new
approach
9
Results and lessons learnt
Russia Development Centre
Deutsche Bank
For internal use only
10
Test automation framework(TAF) architecture
Russia Development Centre
Deutsche Bank
For internal use only
11
Demo
Russia Development Centre
Deutsche Bank
For internal use only
12
Next step
Get back to the ‘First try’ picture and implement the approach with
lessons learnt for all teams
Russia Development Centre
Deutsche Bank
For internal use only
13
Questions?

More Related Content

Viewers also liked (6)

Развитие в тестировании: включаем реактивный двигатель!
Развитие в тестировании: включаем реактивный двигатель!Развитие в тестировании: включаем реактивный двигатель!
Развитие в тестировании: включаем реактивный двигатель!
 
User Interface Тестирование – все ли так просто?
User Interface Тестирование – все ли так просто?User Interface Тестирование – все ли так просто?
User Interface Тестирование – все ли так просто?
 
Тестирование спецификаций
Тестирование спецификацийТестирование спецификаций
Тестирование спецификаций
 
Аналитик и Тестировщик в одном лице – путь к качеству
Аналитик и Тестировщик в одном лице – путь к качествуАналитик и Тестировщик в одном лице – путь к качеству
Аналитик и Тестировщик в одном лице – путь к качеству
 
Impact Analysis в тестировании
Impact Analysis в тестированииImpact Analysis в тестировании
Impact Analysis в тестировании
 
Шаблоны проектирования письменной коммуникации
Шаблоны проектирования письменной коммуникацииШаблоны проектирования письменной коммуникации
Шаблоны проектирования письменной коммуникации
 

More from SQALab

More from SQALab (20)

Готовим стажировку
Готовим стажировкуГотовим стажировку
Готовим стажировку
 
Куда приводят мечты? или Искусство развития тестировщика
Куда приводят мечты? или Искусство развития тестировщикаКуда приводят мечты? или Искусство развития тестировщика
Куда приводят мечты? или Искусство развития тестировщика
 
Оптимизация Selenium тестов и ускорение их поддержки
Оптимизация Selenium тестов и ускорение их поддержкиОптимизация Selenium тестов и ускорение их поддержки
Оптимизация Selenium тестов и ускорение их поддержки
 
Автоматизация 0.0: 0 - бюджет, 0 - опыт программирования
Автоматизация 0.0: 0 - бюджет, 0 - опыт программированияАвтоматизация 0.0: 0 - бюджет, 0 - опыт программирования
Автоматизация 0.0: 0 - бюджет, 0 - опыт программирования
 
Нагрузочное тестирование нестандартных протоколов с использованием Citrix и J...
Нагрузочное тестирование нестандартных протоколов с использованием Citrix и J...Нагрузочное тестирование нестандартных протоколов с использованием Citrix и J...
Нагрузочное тестирование нестандартных протоколов с использованием Citrix и J...
 
Continuous performance testing
Continuous performance testingContinuous performance testing
Continuous performance testing
 
Конфиги вместо костылей. Pytestconfig и зачем он нужен
Конфиги вместо костылей. Pytestconfig и зачем он нуженКонфиги вместо костылей. Pytestconfig и зачем он нужен
Конфиги вместо костылей. Pytestconfig и зачем он нужен
 
Команда чемпионов в ИТ стихии
Команда чемпионов в ИТ стихииКоманда чемпионов в ИТ стихии
Команда чемпионов в ИТ стихии
 
API. Серебряная пуля в магазине советов
API. Серебряная пуля в магазине советовAPI. Серебряная пуля в магазине советов
API. Серебряная пуля в магазине советов
 
Добиваемся эффективности каждого из 9000+ UI-тестов
Добиваемся эффективности каждого из 9000+ UI-тестовДобиваемся эффективности каждого из 9000+ UI-тестов
Добиваемся эффективности каждого из 9000+ UI-тестов
 
Делаем автоматизацию проектных KPIs
Делаем автоматизацию проектных KPIsДелаем автоматизацию проектных KPIs
Делаем автоматизацию проектных KPIs
 
Вредные привычки в тест-менеджменте
Вредные привычки в тест-менеджментеВредные привычки в тест-менеджменте
Вредные привычки в тест-менеджменте
 
Мощь переполняет с JDI 2.0 - новая эра UI автоматизации
Мощь переполняет с JDI 2.0 - новая эра UI автоматизацииМощь переполняет с JDI 2.0 - новая эра UI автоматизации
Мощь переполняет с JDI 2.0 - новая эра UI автоматизации
 
Как hh.ru дошли до 500 релизов в квартал без потери в качестве
Как hh.ru дошли до 500 релизов в квартал без потери в качествеКак hh.ru дошли до 500 релизов в квартал без потери в качестве
Как hh.ru дошли до 500 релизов в квартал без потери в качестве
 
Стили лидерства и тестирование
Стили лидерства и тестированиеСтили лидерства и тестирование
Стили лидерства и тестирование
 
"Давайте не будем про качество"
"Давайте не будем про качество""Давайте не будем про качество"
"Давайте не будем про качество"
 
Apache.JMeter для .NET-проектов
Apache.JMeter для .NET-проектовApache.JMeter для .NET-проектов
Apache.JMeter для .NET-проектов
 
Тестирование геолокационных систем
Тестирование геолокационных системТестирование геолокационных систем
Тестирование геолокационных систем
 
Лидер или босс? Вот в чем вопрос
Лидер или босс? Вот в чем вопросЛидер или босс? Вот в чем вопрос
Лидер или босс? Вот в чем вопрос
 
От Зефира в коробке к Structure Zephyr или как тест-менеджеру перекроить внут...
От Зефира в коробке к Structure Zephyr или как тест-менеджеру перекроить внут...От Зефира в коробке к Structure Zephyr или как тест-менеджеру перекроить внут...
От Зефира в коробке к Structure Zephyr или как тест-менеджеру перекроить внут...
 

Recently uploaded

ppt your views.ppt your views of your college in your eyes
ppt your views.ppt your views of your college in your eyesppt your views.ppt your views of your college in your eyes
ppt your views.ppt your views of your college in your eyes
ashishpaul799
 
會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽
會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽
會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽
中 央社
 
The basics of sentences session 4pptx.pptx
The basics of sentences session 4pptx.pptxThe basics of sentences session 4pptx.pptx
The basics of sentences session 4pptx.pptx
heathfieldcps1
 
Neurulation and the formation of the neural tube
Neurulation and the formation of the neural tubeNeurulation and the formation of the neural tube
Neurulation and the formation of the neural tube
SaadHumayun7
 

Recently uploaded (20)

Operations Management - Book1.p - Dr. Abdulfatah A. Salem
Operations Management - Book1.p  - Dr. Abdulfatah A. SalemOperations Management - Book1.p  - Dr. Abdulfatah A. Salem
Operations Management - Book1.p - Dr. Abdulfatah A. Salem
 
size separation d pharm 1st year pharmaceutics
size separation d pharm 1st year pharmaceuticssize separation d pharm 1st year pharmaceutics
size separation d pharm 1st year pharmaceutics
 
Capitol Tech Univ Doctoral Presentation -May 2024
Capitol Tech Univ Doctoral Presentation -May 2024Capitol Tech Univ Doctoral Presentation -May 2024
Capitol Tech Univ Doctoral Presentation -May 2024
 
Championnat de France de Tennis de table/
Championnat de France de Tennis de table/Championnat de France de Tennis de table/
Championnat de France de Tennis de table/
 
Incoming and Outgoing Shipments in 2 STEPS Using Odoo 17
Incoming and Outgoing Shipments in 2 STEPS Using Odoo 17Incoming and Outgoing Shipments in 2 STEPS Using Odoo 17
Incoming and Outgoing Shipments in 2 STEPS Using Odoo 17
 
Dementia (Alzheimer & vasular dementia).
Dementia (Alzheimer & vasular dementia).Dementia (Alzheimer & vasular dementia).
Dementia (Alzheimer & vasular dementia).
 
Mbaye_Astou.Education Civica_Human Rights.pptx
Mbaye_Astou.Education Civica_Human Rights.pptxMbaye_Astou.Education Civica_Human Rights.pptx
Mbaye_Astou.Education Civica_Human Rights.pptx
 
Application of Matrices in real life. Presentation on application of matrices
Application of Matrices in real life. Presentation on application of matricesApplication of Matrices in real life. Presentation on application of matrices
Application of Matrices in real life. Presentation on application of matrices
 
[GDSC YCCE] Build with AI Online Presentation
[GDSC YCCE] Build with AI Online Presentation[GDSC YCCE] Build with AI Online Presentation
[GDSC YCCE] Build with AI Online Presentation
 
INU_CAPSTONEDESIGN_비밀번호486_업로드용 발표자료.pdf
INU_CAPSTONEDESIGN_비밀번호486_업로드용 발표자료.pdfINU_CAPSTONEDESIGN_비밀번호486_업로드용 발표자료.pdf
INU_CAPSTONEDESIGN_비밀번호486_업로드용 발표자료.pdf
 
ppt your views.ppt your views of your college in your eyes
ppt your views.ppt your views of your college in your eyesppt your views.ppt your views of your college in your eyes
ppt your views.ppt your views of your college in your eyes
 
會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽
會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽
會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽會考英聽
 
The basics of sentences session 4pptx.pptx
The basics of sentences session 4pptx.pptxThe basics of sentences session 4pptx.pptx
The basics of sentences session 4pptx.pptx
 
factors influencing drug absorption-final-2.pptx
factors influencing drug absorption-final-2.pptxfactors influencing drug absorption-final-2.pptx
factors influencing drug absorption-final-2.pptx
 
MichaelStarkes_UncutGemsProjectSummary.pdf
MichaelStarkes_UncutGemsProjectSummary.pdfMichaelStarkes_UncutGemsProjectSummary.pdf
MichaelStarkes_UncutGemsProjectSummary.pdf
 
“O BEIJO” EM ARTE .
“O BEIJO” EM ARTE                       .“O BEIJO” EM ARTE                       .
“O BEIJO” EM ARTE .
 
Navigating the Misinformation Minefield: The Role of Higher Education in the ...
Navigating the Misinformation Minefield: The Role of Higher Education in the ...Navigating the Misinformation Minefield: The Role of Higher Education in the ...
Navigating the Misinformation Minefield: The Role of Higher Education in the ...
 
philosophy and it's principles based on the life
philosophy and it's principles based on the lifephilosophy and it's principles based on the life
philosophy and it's principles based on the life
 
REPRODUCTIVE TOXICITY STUDIE OF MALE AND FEMALEpptx
REPRODUCTIVE TOXICITY  STUDIE OF MALE AND FEMALEpptxREPRODUCTIVE TOXICITY  STUDIE OF MALE AND FEMALEpptx
REPRODUCTIVE TOXICITY STUDIE OF MALE AND FEMALEpptx
 
Neurulation and the formation of the neural tube
Neurulation and the formation of the neural tubeNeurulation and the formation of the neural tube
Neurulation and the formation of the neural tube
 

Specification by Example: Investment banking way

  • 1. Russia Development Centre Deutsche Bank For internal use only Deutsche Bank Group Technology & Operations Specification by Example: Investment banking way Alexey Ieshin, Sergey Cherepniov, Deutsche Bank 1
  • 2. Russia Development Centre Deutsche Bank For internal use only Project background One of the biggest risk calculators in Bank Sophisticated architecture 12 years of development history Problems Not enough specifications Release testing effort: full regression test pack takes approximately 1 man-year Difficulties in sharing the knowledge between locations 2 High level architecture
  • 3. Russia Development Centre Deutsche Bank For internal use only Client - server distributed application Collect data from upstream systems/feeds Grid calculations Orchestration Reporting 3 Our application
  • 4. Russia Development Centre Deutsche Bank For internal use only 4 Splitter feature Key part of the solution Helps to handle large volumes of trades Helps to break down calculations into sub-calculations Helps to parallelize execution over multiple cores
  • 5. Russia Development Centre Deutsche Bank For internal use only 5 Specification by example (SBE) – Living documentation
  • 6. Russia Development Centre Deutsche Bank For internal use only 6 Initial try
  • 7. Russia Development Centre Deutsche Bank For internal use only 7 Why was it failed? Not everyone in the team bought it Efforts considered to be the background tasks Efforts were not properly planned in the beginning
  • 8. Russia Development Centre Deutsche Bank For internal use only Target Learn how to use SBE approach in our environment Test automation for existing regression test pack How to achieve? Build a cross functional team (QAs, DEVs, FAs) Create a test automation framework Share results with teams 8 Second try
  • 9. Russia Development Centre Deutsche Bank For internal use only Test automation Built a cross-functional test automation team Created a test automation framework Participated in release: significant amount bugs were found by test automation Currently tests save: 30% testing efforts Current coverage: ~ 50% of regression test pack SBE Regular demos and noise – everyone aware about approach efficiency People have hands on experience with SBE Management bought the idea Learnt how to plan and manage the work with the new approach 9 Results and lessons learnt
  • 10. Russia Development Centre Deutsche Bank For internal use only 10 Test automation framework(TAF) architecture
  • 11. Russia Development Centre Deutsche Bank For internal use only 11 Demo
  • 12. Russia Development Centre Deutsche Bank For internal use only 12 Next step Get back to the ‘First try’ picture and implement the approach with lessons learnt for all teams
  • 13. Russia Development Centre Deutsche Bank For internal use only 13 Questions?