SlideShare a Scribd company logo
Product Metrics Framework
Або як обирати та класифікувати метрики для вашого
продукту
Андрій Мандріка
Давайте познайомимось
§ Андрій Мандріка
§ 12+ років досвіду в IT. Керую продуктами
останніх 9 років.
§ Ex-Head of Product: Rocket, Ex-Product
Manager: Dreamteam.gg, Parimatch Tech
§ З нуля побудував продуктову організацію в
Rocket.
§ Останні 2 роки допомагаю українським
компаніям та продактам покращувати їх
продуктові навички та процеси. За цей час
навчив вже 400 продактів та
проконсультував 10 компаній.
§ А також, керую проєктом KOLOси в фонді
KOLO, який за рік зібрав 1.5млн $ на ЗСУ.
alumnus
Чому не можна так їхати?
«Ви не можете ефективно керувати тим, що
не можете виміряти»
Але різних метрик можуть бути сотні, і тому
потрібна система для їх класифікації.
Та й взагалі, щоб не забути подумати про якусь
важливу категорію метрик для свого продукту=)
Google HEART
Mixpanel framework
AARRR Funnel
By measurement object
By department
Metrics
Marketing &
Sales
Product
Product
Usage
(Behavioural)
Acquisition
Reach
Activation
Activation
Adoption
Engagement
Task-
Success
Engagement
Active Usage
Retention
Retention
Retention
Revenue
Business-
Specific
Referral
Happiness
Product
Performance
(Technical)
Operational Business
Як класифікувати метрики продукту?
Money,
Active users
Product
Marketing / Sales: Business Result:
Money,
New users
OPs:
People, Processes
Як функціонує бізнес?
Acquisition (Marketing&Sales) Metrics –
Business (Result)/Finance Metrics -
Product Metrics –
Operational (OPs) Metrics –
як, звідки, наскільки
ефективно ми залучаємо нових користувачів/клієнтів в продукт та
скільки нам це коштує.
на скільки ефективно продукт «переробляє»
залучених користувачів для отримання бізнес результату.
скільки і чого залишається в бізнесу
після взаємодії користувача з продуктом.
на скільки ефективно працюють люди та
процеси в середині бізнесу.
При чому ці метрики можуть бути в кожному відділі свої.
Які можуть бути метрики в бізнесі?
Sales &
Marketing
§ CPC, CPM, CPL,
CPA, CAC
§ MQL, SAL, SQL,
SOL
§ CTR, Open
Rate, Answer
Rate
§ Organic/Paid
Ratio
§ ROMI, ROAS
§ Growth rate, K-
factor
Product
§ Conversion
Rate (CR)
§ Activation Rate
§ Engagement
Rate
§ Retention Rate
(RR)
§ Churn Rate
§ AOV
§ Frequency,
Stickiness
Factor
§ NPS
Finance/Bus
iness Result
§ ARPU, ARPPU
§ MRR, ARR
§ LTV
§ Revenue
§ Cost
§ Gross/Net
Profit
§ Contribution
Margin
§ EBITDA
§ ROI
§ Payback period
+
§ DAU/ WAU/
MAU
Operational
§ Cycle/Lead
time
§ Nmbr of
ops/goods per
time
§ Utilization rate
§ Employee
turnover
Класифікація метрик за зоною відповідальності
Sales &
Marketing
§ CPC, CPM, CPL,
CPA, CAC
§ MQL, SAL, SQL,
SOL
§ CTR, Open
Rate, Answer
Rate
§ Organic/Paid
Ratio
§ ROMI, ROAS
§ Growth rate, K-
factor
Product
§ Conversion
Rate (CR)
§ Activation Rate
§ Engagement
Rate
§ Retention Rate
(RR)
§ Churn Rate
§ AOV
§ Frequency,
Stickiness
Factor
§ NPS
Finance /
Business
Result
§ ARPU, ARPPU
§ MRR, ARR
§ LTV
§ Revenue
§ Cost
§ Gross/Net
Profit
§ Contribution
Margin
§ EBITDA
§ ROI
§ Payback period
+
§ DAU/ WAU/
MAU
Operational
§ Cycle/Lead
time
§ Nmbr of
ops/goods per
time
§ Utilization rate
§ Employee
turnover
АЛЕ! Не можна сказати, що за якусь метрику
відповідає тільки один відділ!
By measurement
object
By department
Metrics
Marketing &
Sales
Product
Product
Usage
(Behavioural)
Product
Performance
(Technical)
Operational Business
Класифікація продуктових метрик за об'єктом виміру
Product Usage Metrics (User Behavioral) –
Product Performance Metrics (Technical) –
поведінкові або користувацькі
метрики дозволяють зрозуміти, як ведуть себе користувачі під час
використання продукту.
метрики продуктивності, або
його технічні метрики, дозволяють зрозуміти стан самого продукту та його
інфраструктури, що необхідні для його можливого використання.
На які питання відповідають продуктові метрики?
Технічний стан продукту Використання продукту
Product Usage Metrics
(User Behavioral)
§ Conversion Rate (CR)
§ Activation Rate
§ Engagement Rate
§ Retention Rate (RR)
§ Churn Rate
§ AOV
§ Frequency, Stickiness
Factor
§ NPS
Product Performance
Metrics
(Technical)
§ Page Loading Time
§ Latency, Uptime, Downtime,
Response time
§ Requests/Bytes per minute
§ CPU/Memory Usage
§ Error rate
§ App size
Класифікація продуктових метрик за обʼєктом виміру
Як правило, коли ми розмовляємо про продуктові метрики, то
маємо на увазі саме поведінкові метрики користувачів, але і
їх є велика кількість та потрібно вміти їх групувати.
Acquisition
Activation
Retention
Referral
Revenue
AARRR Framework на основі воронки
AARRR метрики, або Піратські метрики
– фреймворк для опису ключових
категорій метрик, які необхідні для оцінки
росту продукту, у вигляді лінійної
воронки, по якій проходять користувачі
під час взаємодії з продуктом.
Концепт був запропонований відомим підприємцем та венчурним капіталістом з кремнієвої долини - Dave McClure
AARRR Framework на основі воронки
Як, звідки, чи ефективно ми
залучаємо нових користувачів в
продукт і скільки це нам коштує?
Як ми доводимо користувачів до
отримання першої цінності від
використання продукту?
Як користувачі повертаються в
продукт?
Як користувачі нам платять за
використання продукту та скільки
грошей залишається в бізнесу?
Як користувачі рекомендують наш
продукт іншим, щоб залучати нових
користувачів?
Acquisition
Activation
Retention
Referral
Revenue
Mixpanel product metrics framework
Mixpanel product metrics guide
Reach
Activation
Engagement
Retention
Monetization
Business-
Specific
Mixpanel product metrics framework
Acquisition
Product
Money & Business
https://clevertap.com/blog/google-heart-framework/
Можна використовувати, як для
всього продукту, так і для
окремої функції/ задачі в
продукті!
Цілі – що ми хочемо, щоб
користувачі досягли в продукті?
Сигнали – за якими діями
користувача ми можемо
зрозуміти, що ми наближаємося
до цілі?
Метрики – як ми можемо
виміряти дії користувача?
Сердечний фреймворк UX метрик від Google
Product
Metrics
Combined
Framework
Reach/
Acquisition
Activation +
Adoption
Engagement Retention
Monetization /
Business /
Revenue
Happiness
Business-
Specific
Product
Performance
(Technical)
Operational
Що буде, якщо скомбінувати категорії з різних
фреймворків?
Метрики залучення користувачів – допомагають зрозуміти, як, звідки, наскільки
ефективно ми залучаємо нових користувачів/клієнтів в продукт та скільки нам це
коштує.
Acquisition Metrics
Категорії метрик:
Вартість:
Скільки коштувало?
Spend/Budget,
CPC, CPM, CPL, CPA, CPI, CAC
Ефективність:
Етапів та грошей
CTR, CR, Open/Answer Rate, Organic/Paid Ratio,
ROMI, ROAS
Зростання:
Скільки привели?
New users/Leads/Buyers/Installs/Orders/Purchases,
Growth factor, K-factor
Аналізуються, як загалом так і по кожному каналу залучення та окремій кампанії.
Від витрачених грошей, до нових людей в продукті, та до отриманого прибутку на виході.
Для кожного каналу метрики можуть бути різні, але все одно в рамках цих категорій.
Що міряти якщо продукт/функція не має залучення
ззовні?
Юзер база
найбільшого
продукту
Цільова
аудиторія сфери
відповідальност
і продукту/
функції
Користувачі, які
використовують
продукт/модуль
/функцію
Всі клієнти
Glovo
Клієнти, що
успішно
отримали хоча б
1 замовлення
Клієнти, які
зробили швидке
повторне
замовлення
Міряти потенційне охоплення серед існуючої користувацької бази
Метрики активації – допомагають зрозуміти, як ми доводимо нових користувачів до
першого отримання цінності від використання продукту. Саме тієї ключової цінності
заради якої користувачі і наймають продукт.
Activation & Adoption Metrics
Метрики адаптації – допомагають зрозуміти, як ми доводимо активованих користувачів
до формування звички використовувати продукт.
Adoption
Activation
Product
first
touch
First
core
action
Aha
moment Habit
t, Time
User flow
Retention
Metric:
Activation Rate
Metric:
Adoption Rate
Метрики повернення користувачів – допомагають зрозуміти, як користувачі
повертаються в продукт.
Найголовніші метрики для довготривалого успіху продукту! Показує на скільки продукт
добре утримує користувачів за рахунок вирішення їх задач та проблем!
Retention Metrics
Для правильного формування метрик Retention потрібно розуміти основну дію, за якою
повертаються користувачі та органічний інтервал виникнення задачі.
Основними метриками повернення є Retention Rate, Churn Rate, User/Client Lifetime, тощо.
Метрики залученості в продукт – допомагають зрозуміти, на скільки глибоко
користувачі занурюються в продукт під час використання.
По факту, цими метриками ми можемо виміряти цінність для користувача від
використання продукту.
Engagement Metrics
Категорії метрик:
Варіативність: Які різні дії можуть бути виконані користувачем, або
з яким типом контенту він взаємодіє в рамках
виконання основної дії
Інтенсивність: Що в рамках основної дії чи сесії збільшує цінність і
для користувача і для бізнесу (дії, гроші, час)
Частота:
Як добре повинна бути виконана основна дія
Ефективність:
Як часто користувач виконує основну дію за період
Task-Success: Як користувачі доходять до основної дії під час
кожного використання
В залежності від виду продукту, аналізуються різні метрики інтенсивності!
Engagement Metrics
Види продуктів та метрики залученості в них:
Увага: Час проведений в продукті, К-сть
сеансів/сторінок/екранів/статей/замовлень на 1
юзера, Глибина скроллу
Транзакції: Середній чек, К-сть товарів в корзині, % покинутих
корзин, Частота покупок
Ефективніть: К-сть виконаних дій на одиницю часу або юзера, Час
на виконання дії
Аналізуються, як загалом так і по кожній окремій функції продукту.
Бізнес метрики або метрики монетизації – допомагають зрозуміти, як ми заробляємо
гроші та скільки в бізнесу їх залишається після вирахування різних видів витрат.
Business/Monetization Metrics
Категорії метрик:
Загальні
фінансові:
Revenue, Spend, Gross/Net Profit, Margin, EBITDA,
Cashflow, Burn rate, Payback period, ROI
На один
юніт/клієнта:
AOV, ARPU, ARPPU, Contribution Margin, CAC, LTV
Специфічні під
модель
монетизації та
домен:
MRR, MRR Churn, ARR, GMV, GGR
Loan-to-Deposit Ratio, Return on Assets
Як правило, фінансові метрики аналізуються в комплексних стандартних фінансових
звітах типу CashFlow та PnL – постфактум, та прогнозуються майбутні значення метрик
використовуючи фінансові моделі, в тому числі і юніт економіку.
Як аналізувати Revenue/Monetization Metrics?
Процес побудови та
використання фін. Моделей
дозволяє зрозуміти вплив
інших категорій метрик на
значення фінансових
метрик, а також проводити,
так званий - What-if аналіз.
Наприклад, як зміниться
прибуток в наступному
місяці, якщо ми збільшимо
конверсію в покупку на 5%,
або якщо запустимо функцію
Х.
Метрики Щастя – допомагають зрозуміти рівень задоволеності користувачів від
використання продукту.
Єдина категорія користувацьких продуктових метрик, що заснована не на дії
користувача, а на його думці.
Happiness Metrics
Можуть вимірюватися наступними метриками:
NPS Net Promoter Score
CSAT Customer Satisfaction Score
CES Customer Effort Score
App Rating
CTR/Answer Rate
АЛЕ! Потрібно пам'ятати, що оцінка дуже залежить від сегменту користувачів, місця, часу
та форми запитання.
Тепер коли ми знаємо ключові категорії метрик і
що вони вимірюють, ми можемо створити перелік
метрик для будь-якого продукту або функції –
задаючи питання по кожній категорії метрик
Шаблон переліку метрик продукту
Link to Template
§ Потрібно тримати баланс по кількості метрик в кожній категорії.
Для щоденного відслідковування бажано виділити не більше ніж по 1-2
з кожної категорії. Навіть за допомогою проксі метрик.
Правила створення переліку метрик
§ Це нормально, якщо ваш продукт/функція взагалі не впливає на якусь
категорію метрик. Наприклад, внутрішній продукт на монетизацію.
§ Обов'язково додаємо коротку назву, опис та формулу метрики, щоб всі
члени команди однаково розуміли суть метрики.
§ Якщо зараз ви не готові працювати над якоюсь категорією, то в першій
версії – немає сенсу детально розписувати метрики по ній.
Наприклад, Рефералка
§ Якщо не можемо відповісти – навіщо нам відслідковувати метрику, то не
додаємо її в перелік ваших метрик.
Як використовувати далі перелік метрик?
Як використовувати далі перелік метрик?
https://www.geckoboard.com/dashboard-examples/executive/aarrr-pirate-metrics-dashboard/
Формувати дашборди для відслідковування стану продукту по кожній
ключовій категорії метрик. Виділивши з кожної категорії хоча б по 1 метриці
Як використовувати далі перелік метрик?
Перетворити перелік метрик в ієрархію метрик для розуміння
взаємозв'язків між цими метриками.
Як використовувати далі перелік метрик?
А на основі ієрархії метрик можна побудувати фін. модель продукту для
моделювання різних продуктових ситуацій, what-if аналізу, пошуку точок
росту продукту та прогнозування майбутнього стану продукту.
Як використовувати далі перелік метрик?
Для визначення зон відповідальності команд та навіть продуктів
Team Goals/Metrics
Marketing Team Awareness + Acquisition,
Monetization
Growth Team Acquisition, Activation, Adoption,
Retention, Monetization
Feature Team 1 Core Value:
Engagement, Organic Retention,
Happiness
Feature Team 2 Core Value:
Engagement, Organic Retention,
Monetization, Happiness
Customer Support Team Retention + Churn, Happiness,
Ops
Як використовувати далі перелік метрик?
Як базу знань всіх членів команди
Метрики продуктивности команды
Releases
Release Flow time
Release Time
Sp/Day
Release size, sp
AvSize Issue, sp
Number Issue
Number Bugs
% Bugs
Functionality
Velocity planned
business
tech
feedbacks
auto tests
Act Velocity planned
business
tech
feedbacks
auto tests
Velocity actual
business
tech
feedbacks
auto tests
# Issue planned
# Issue accepted
% Issue accepted
Quality
Size tech debt, sp
# Critical Bugs on Prod
finded
# Bugs on Prod found
# Bugs on Prod fixed
# New test cases
Total test cases
# New test cases
automated
Total test cases
automated
Total % tests automated
Ітогі подвєдьом...
1. Ми не можемо ефективно керувати тим, що
не можемо виміряти
2. Для того, щоб не заплутатись в безлічі
метрик - краще спробувати перелічити їх по
категоріях
Google HEART
Mixpanel framework
AARRR Funnel
By measurement object
By department
Metrics
Marketing &
Sales
Product
Product
Usage
(Behavioural)
Acquisition
Reach
Activation
Activation
Adoption
Engagement
Task-
Success
Engagement
Active Usage
Retention
Retention
Retention
Revenue
Business-
Specific
Referral
Happiness
Product
Performance
(Technical)
Operational Business
3. Можна формувати свої фреймворки.
Головне розуміти – навіщо=)
Product
Metrics
Combined
Framework
Reach/
Acquisition
Activation +
Adoption
Engagement Retention
Monetization /
Business /
Revenue
Happiness
Business-
Specific
Product
Performance
(Technical)
Operational
§ Щоб не забути, про якусь важливу категорію метрик
§ Як стартова точка для формування аналітики та дашбордів
вашого продукту
§ Щоб визначити зони відповідальності відділів, команд, окремих
працівників
§ Щоб зрозуміти взаємозв’язки між різними метриками
§ Щоб зрозуміти вклад кожної метрики в загальну ціль чи
результат
§ Щоб сформувати базу знань вашої аналітики
4. Перелік метрик потрібен
Обирайте правильні метрики та створюйте
першокласні продукти!
Дякую за увагу!
Якщо цікава тема метрик, чи потрібна
допомога вам чи вашій компанії:
TG: andrii.mandrika
FB: andrii.mandrika
Ln: andrii-mandrika
FB: Hard Skills for Product Managers
Ln: Hard Skills for Product Managers

More Related Content

What's hot

Get inside your Buyers Head - Improve Funnel Conversion Rates
Get inside your Buyers Head - Improve Funnel Conversion RatesGet inside your Buyers Head - Improve Funnel Conversion Rates
Get inside your Buyers Head - Improve Funnel Conversion Rates
David Skok
 
Software Outsourcing: Outsource Your Project or Build a Team
Software Outsourcing: Outsource Your Project or Build a TeamSoftware Outsourcing: Outsource Your Project or Build a Team
Software Outsourcing: Outsource Your Project or Build a Team
Softheme
 
How to Create a Customer Success Charter
How to Create a Customer Success CharterHow to Create a Customer Success Charter
How to Create a Customer Success Charter
ServiceSource
 
Transform Data to Insight
Transform Data to InsightTransform Data to Insight
Transform Data to Insight
Workday, Inc.
 
2023 Gen Z and Millennial Survey.pdf
2023 Gen Z and Millennial Survey.pdf2023 Gen Z and Millennial Survey.pdf
2023 Gen Z and Millennial Survey.pdf
NgocAnhLe57
 
Stratechi Sales Plan Presentation by McKinsey Alum.pdf
Stratechi Sales Plan Presentation by McKinsey Alum.pdfStratechi Sales Plan Presentation by McKinsey Alum.pdf
Stratechi Sales Plan Presentation by McKinsey Alum.pdf
Stratechi.com
 
The experience is the product (for Mind The Product 2016)
The experience is the product (for Mind The Product 2016)The experience is the product (for Mind The Product 2016)
The experience is the product (for Mind The Product 2016)
Peter Merholz
 
Marketing to Developers: Why Happy is Our Hack with DigitalOcean's CMO
Marketing to Developers: Why Happy is Our Hack with DigitalOcean's CMOMarketing to Developers: Why Happy is Our Hack with DigitalOcean's CMO
Marketing to Developers: Why Happy is Our Hack with DigitalOcean's CMO
saastr
 
Demand and Portfolio Management
Demand and Portfolio ManagementDemand and Portfolio Management
Demand and Portfolio Management
Intland Software GmbH
 
Develop Better People Managers
Develop Better People ManagersDevelop Better People Managers
Develop Better People Managers
LinkedIn Learning Solutions
 
Consulting Proposal Template PowerPoint Presentation Slides
Consulting Proposal Template PowerPoint Presentation SlidesConsulting Proposal Template PowerPoint Presentation Slides
Consulting Proposal Template PowerPoint Presentation Slides
SlideTeam
 
Charging for Customer Success
Charging for Customer Success Charging for Customer Success
Charging for Customer Success
Gainsight
 
Innovation in GCC - Global Capability Center
Innovation in GCC - Global Capability CenterInnovation in GCC - Global Capability Center
Innovation in GCC - Global Capability Center
Dr. Shivananda Koteshwar
 
Portfolio Management in an Agile World - Rick Austin
Portfolio Management in an Agile World - Rick AustinPortfolio Management in an Agile World - Rick Austin
Portfolio Management in an Agile World - Rick Austin
LeadingAgile
 
Zenefits
Zenefits  Zenefits
Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...
Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...
Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...
SlideTeam
 
Product roadmap 101
Product roadmap 101Product roadmap 101
Product roadmap 101
Murali Erraguntala
 
Risk Management Toolkit - Framework, Best Practices and Templates
Risk Management Toolkit - Framework, Best Practices and TemplatesRisk Management Toolkit - Framework, Best Practices and Templates
Risk Management Toolkit - Framework, Best Practices and Templates
Aurelien Domont, MBA
 
An Introduction to Scaled Agile Framework (SAFe)
An Introduction to Scaled Agile Framework (SAFe)An Introduction to Scaled Agile Framework (SAFe)
An Introduction to Scaled Agile Framework (SAFe)
CA Technologies
 
Role of Data in Digital Transformation
Role of Data in Digital TransformationRole of Data in Digital Transformation
Role of Data in Digital Transformation
VMware Tanzu
 

What's hot (20)

Get inside your Buyers Head - Improve Funnel Conversion Rates
Get inside your Buyers Head - Improve Funnel Conversion RatesGet inside your Buyers Head - Improve Funnel Conversion Rates
Get inside your Buyers Head - Improve Funnel Conversion Rates
 
Software Outsourcing: Outsource Your Project or Build a Team
Software Outsourcing: Outsource Your Project or Build a TeamSoftware Outsourcing: Outsource Your Project or Build a Team
Software Outsourcing: Outsource Your Project or Build a Team
 
How to Create a Customer Success Charter
How to Create a Customer Success CharterHow to Create a Customer Success Charter
How to Create a Customer Success Charter
 
Transform Data to Insight
Transform Data to InsightTransform Data to Insight
Transform Data to Insight
 
2023 Gen Z and Millennial Survey.pdf
2023 Gen Z and Millennial Survey.pdf2023 Gen Z and Millennial Survey.pdf
2023 Gen Z and Millennial Survey.pdf
 
Stratechi Sales Plan Presentation by McKinsey Alum.pdf
Stratechi Sales Plan Presentation by McKinsey Alum.pdfStratechi Sales Plan Presentation by McKinsey Alum.pdf
Stratechi Sales Plan Presentation by McKinsey Alum.pdf
 
The experience is the product (for Mind The Product 2016)
The experience is the product (for Mind The Product 2016)The experience is the product (for Mind The Product 2016)
The experience is the product (for Mind The Product 2016)
 
Marketing to Developers: Why Happy is Our Hack with DigitalOcean's CMO
Marketing to Developers: Why Happy is Our Hack with DigitalOcean's CMOMarketing to Developers: Why Happy is Our Hack with DigitalOcean's CMO
Marketing to Developers: Why Happy is Our Hack with DigitalOcean's CMO
 
Demand and Portfolio Management
Demand and Portfolio ManagementDemand and Portfolio Management
Demand and Portfolio Management
 
Develop Better People Managers
Develop Better People ManagersDevelop Better People Managers
Develop Better People Managers
 
Consulting Proposal Template PowerPoint Presentation Slides
Consulting Proposal Template PowerPoint Presentation SlidesConsulting Proposal Template PowerPoint Presentation Slides
Consulting Proposal Template PowerPoint Presentation Slides
 
Charging for Customer Success
Charging for Customer Success Charging for Customer Success
Charging for Customer Success
 
Innovation in GCC - Global Capability Center
Innovation in GCC - Global Capability CenterInnovation in GCC - Global Capability Center
Innovation in GCC - Global Capability Center
 
Portfolio Management in an Agile World - Rick Austin
Portfolio Management in an Agile World - Rick AustinPortfolio Management in an Agile World - Rick Austin
Portfolio Management in an Agile World - Rick Austin
 
Zenefits
Zenefits  Zenefits
Zenefits
 
Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...
Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...
Designing And Implementing Brand Leadership Strategy Powerpoint Presentation ...
 
Product roadmap 101
Product roadmap 101Product roadmap 101
Product roadmap 101
 
Risk Management Toolkit - Framework, Best Practices and Templates
Risk Management Toolkit - Framework, Best Practices and TemplatesRisk Management Toolkit - Framework, Best Practices and Templates
Risk Management Toolkit - Framework, Best Practices and Templates
 
An Introduction to Scaled Agile Framework (SAFe)
An Introduction to Scaled Agile Framework (SAFe)An Introduction to Scaled Agile Framework (SAFe)
An Introduction to Scaled Agile Framework (SAFe)
 
Role of Data in Digital Transformation
Role of Data in Digital TransformationRole of Data in Digital Transformation
Role of Data in Digital Transformation
 

Similar to Andrii Mandrika: Product metrics framework - або як обирати метрики для вашого продукту (UA)

Как продвигать мобильное приложение в Google Ads? Основы мобильного маркетинга
Как продвигать мобильное приложение в Google Ads? Основы мобильного маркетингаКак продвигать мобильное приложение в Google Ads? Основы мобильного маркетинга
Как продвигать мобильное приложение в Google Ads? Основы мобильного маркетинга
Netpeak
 
Платний трафік у 2017: тільки кейси, ніякої теорії
Платний трафік у 2017: тільки кейси, ніякої теоріїПлатний трафік у 2017: тільки кейси, ніякої теорії
Платний трафік у 2017: тільки кейси, ніякої теорії
Netpeak
 
Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...
Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...
Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...
Lviv Startup Club
 
Интернет-маркетинг: инструкция по эксплуатации
Интернет-маркетинг: инструкция по эксплуатацииИнтернет-маркетинг: инструкция по эксплуатации
Интернет-маркетинг: инструкция по эксплуатации
Netpeak
 
Lean marketing for digital product (Growth Marketing)
Lean marketing for digital product (Growth Marketing)Lean marketing for digital product (Growth Marketing)
Lean marketing for digital product (Growth Marketing)
Nazar Mazur
 
Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...
Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...
Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...
Netpeak
 
Стратегія розвитку рекламних кампаній на основі воронки продажів
Стратегія розвитку рекламних кампаній на основі воронки продажівСтратегія розвитку рекламних кампаній на основі воронки продажів
Стратегія розвитку рекламних кампаній на основі воронки продажів
Netpeak
 
Email-маркетинг, который точно работает
Email-маркетинг, который точно работаетEmail-маркетинг, который точно работает
Email-маркетинг, который точно работает
Netpeak
 
Модуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptx
Модуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptxМодуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptx
Модуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptx
RostyslavDmytruk
 
Лекція 6 baldrige award
Лекція 6 baldrige awardЛекція 6 baldrige award
Лекція 6 baldrige award
Pavlo Syrvatka
 
Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...
Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...
Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...
Netpeak
 
Вирівнювання в інноваціях 4.0
Вирівнювання в інноваціях 4.0Вирівнювання в інноваціях 4.0
Вирівнювання в інноваціях 4.0
APPAU_Ukraine
 
Модуль_4_Виробничі_процеси_в_компанії.pptx
Модуль_4_Виробничі_процеси_в_компанії.pptxМодуль_4_Виробничі_процеси_в_компанії.pptx
Модуль_4_Виробничі_процеси_в_компанії.pptx
RostyslavDmytruk
 
Модуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptx
Модуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptxМодуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptx
Модуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptx
RostyslavDmytruk
 
Модуль_5_Планування_закупівель_та_постачання_в_компанії.pptx
Модуль_5_Планування_закупівель_та_постачання_в_компанії.pptxМодуль_5_Планування_закупівель_та_постачання_в_компанії.pptx
Модуль_5_Планування_закупівель_та_постачання_в_компанії.pptx
RostyslavDmytruk
 
Upravlinnya znannyamy
Upravlinnya znannyamyUpravlinnya znannyamy
Upravlinnya znannyamy
vladimir gorak
 
Upravlinnya znannyamy
Upravlinnya znannyamyUpravlinnya znannyamy
Upravlinnya znannyamy
vladimir gorak
 
3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx
3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx
3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx
RostyslavDmytruk
 
Метрики клаєнтського досвіду.pdf
Метрики клаєнтського досвіду.pdfМетрики клаєнтського досвіду.pdf
Метрики клаєнтського досвіду.pdf
DOMDepartmentofMarke
 
Звідки ростуть ноги у сервісу
Звідки ростуть ноги у сервісуЗвідки ростуть ноги у сервісу
Звідки ростуть ноги у сервісу
Dmytro Dzhedzhula
 

Similar to Andrii Mandrika: Product metrics framework - або як обирати метрики для вашого продукту (UA) (20)

Как продвигать мобильное приложение в Google Ads? Основы мобильного маркетинга
Как продвигать мобильное приложение в Google Ads? Основы мобильного маркетингаКак продвигать мобильное приложение в Google Ads? Основы мобильного маркетинга
Как продвигать мобильное приложение в Google Ads? Основы мобильного маркетинга
 
Платний трафік у 2017: тільки кейси, ніякої теорії
Платний трафік у 2017: тільки кейси, ніякої теоріїПлатний трафік у 2017: тільки кейси, ніякої теорії
Платний трафік у 2017: тільки кейси, ніякої теорії
 
Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...
Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...
Юрій Грузинський “Платний трафік для бізнесу у 2017 му тільки кейси, ніякої т...
 
Интернет-маркетинг: инструкция по эксплуатации
Интернет-маркетинг: инструкция по эксплуатацииИнтернет-маркетинг: инструкция по эксплуатации
Интернет-маркетинг: инструкция по эксплуатации
 
Lean marketing for digital product (Growth Marketing)
Lean marketing for digital product (Growth Marketing)Lean marketing for digital product (Growth Marketing)
Lean marketing for digital product (Growth Marketing)
 
Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...
Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...
Рост органического трафика на 200%: как работает стратегия и "умное" SEO на п...
 
Стратегія розвитку рекламних кампаній на основі воронки продажів
Стратегія розвитку рекламних кампаній на основі воронки продажівСтратегія розвитку рекламних кампаній на основі воронки продажів
Стратегія розвитку рекламних кампаній на основі воронки продажів
 
Email-маркетинг, который точно работает
Email-маркетинг, который точно работаетEmail-маркетинг, который точно работает
Email-маркетинг, который точно работает
 
Модуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptx
Модуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptxМодуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptx
Модуль_2_Сплануй_2022_Січень,_лютий,_березень_перша_ціль_для_бізнесу.pptx
 
Лекція 6 baldrige award
Лекція 6 baldrige awardЛекція 6 baldrige award
Лекція 6 baldrige award
 
Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...
Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...
Як за допомогою інструментів інтернет-маркетингу вивести агробізнес на нові р...
 
Вирівнювання в інноваціях 4.0
Вирівнювання в інноваціях 4.0Вирівнювання в інноваціях 4.0
Вирівнювання в інноваціях 4.0
 
Модуль_4_Виробничі_процеси_в_компанії.pptx
Модуль_4_Виробничі_процеси_в_компанії.pptxМодуль_4_Виробничі_процеси_в_компанії.pptx
Модуль_4_Виробничі_процеси_в_компанії.pptx
 
Модуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptx
Модуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptxМодуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptx
Модуль_1_Роль_та_процеси_в_компанії_Точки_контролю_та_безпеки_у.pptx
 
Модуль_5_Планування_закупівель_та_постачання_в_компанії.pptx
Модуль_5_Планування_закупівель_та_постачання_в_компанії.pptxМодуль_5_Планування_закупівель_та_постачання_в_компанії.pptx
Модуль_5_Планування_закупівель_та_постачання_в_компанії.pptx
 
Upravlinnya znannyamy
Upravlinnya znannyamyUpravlinnya znannyamy
Upravlinnya znannyamy
 
Upravlinnya znannyamy
Upravlinnya znannyamyUpravlinnya znannyamy
Upravlinnya znannyamy
 
3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx
3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx
3_Як_реагувати_топ_менеджеру_на_зовнішнє_середовище.pptx
 
Метрики клаєнтського досвіду.pdf
Метрики клаєнтського досвіду.pdfМетрики клаєнтського досвіду.pdf
Метрики клаєнтського досвіду.pdf
 
Звідки ростуть ноги у сервісу
Звідки ростуть ноги у сервісуЗвідки ростуть ноги у сервісу
Звідки ростуть ноги у сервісу
 

More from Lviv Startup Club

Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...
Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...
Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...
Lviv Startup Club
 
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Lviv Startup Club
 
Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)
Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)
Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)
Lviv Startup Club
 
Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)
Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)
Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)
Lviv Startup Club
 
Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)
Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)
Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)
Lviv Startup Club
 
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Lviv Startup Club
 
Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...
Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...
Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...
Lviv Startup Club
 
Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...
Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...
Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...
Lviv Startup Club
 
Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...
Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...
Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...
Lviv Startup Club
 
Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...
Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...
Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...
Lviv Startup Club
 
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Lviv Startup Club
 
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Lviv Startup Club
 
Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)
Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)
Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)
Lviv Startup Club
 
Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)
Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)
Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)
Lviv Startup Club
 
Denis Shemyakin: Communication and Stakeholder Engagement (UA)
Denis Shemyakin: Communication and Stakeholder Engagement (UA)Denis Shemyakin: Communication and Stakeholder Engagement (UA)
Denis Shemyakin: Communication and Stakeholder Engagement (UA)
Lviv Startup Club
 
Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)
Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)
Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)
Lviv Startup Club
 
Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)
Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)
Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)
Lviv Startup Club
 
Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...
Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...
Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...
Lviv Startup Club
 
Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...
Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...
Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...
Lviv Startup Club
 
Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)
Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)
Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)
Lviv Startup Club
 

More from Lviv Startup Club (20)

Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...
Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...
Rostyslav Chayka: Тренди та виклики української аутсорс індустрії в 2024 році...
 
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
 
Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)
Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)
Oleksandr Krakovetskyi: How AI is Redefining IT Outsourcing Strategies (UA)
 
Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)
Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)
Viktor Chekh: Делівері центр в Колумбії: перешкоди, досвід і результат (UA)
 
Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)
Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)
Anatoliy Klepach: Як не "продавати", а будувати відносини з клієнтами? (UA)
 
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
 
Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...
Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...
Maryna Ruban: Як SEO допомагає впізнаваності бренду та покращує його репутаці...
 
Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...
Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...
Maksym Sydorenko: Фішки автоматизації в LinkedIn: як отримувати якісні ліди? ...
 
Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...
Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...
Evgeniy Bachinskiy: BCP Real Talk. Making a plan that won't go down the drain...
 
Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...
Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...
Vladyslav Tkachuk: Ідентичність у сервісному бізнесі: як вирізнятися на ринку...
 
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
Valeriy Kozlov: Transition to Fact-Based, Data-Driven Decision Making in B2B ...
 
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
Oleksa Stelmakh: Scaling of IT Outsourcing Company: From 1 to 100 and from 10...
 
Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)
Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)
Oleksii Minakov: Як IT-компанії стати AI-powered? (UA)
 
Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)
Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)
Vitalii Dnistrovskyi: M&A в українському аутсорсі (UA)
 
Denis Shemyakin: Communication and Stakeholder Engagement (UA)
Denis Shemyakin: Communication and Stakeholder Engagement (UA)Denis Shemyakin: Communication and Stakeholder Engagement (UA)
Denis Shemyakin: Communication and Stakeholder Engagement (UA)
 
Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)
Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)
Oleksandr Klymchuk: PMO Maturity and Continuous Improvement (UA)
 
Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)
Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)
Maksym Vyshnivetskyi: PMO KPIs (UA) (#12)
 
Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...
Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...
Artem Bykovets: Чому люди не стають раптово кросс-функціональними, хоча в нас...
 
Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...
Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...
Evgen Osmak: Methods of key project parameters estimation: from the shaman-in...
 
Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)
Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)
Helen Lubchak: Тренди в управлінні проєктами та miltech (UA)
 

Andrii Mandrika: Product metrics framework - або як обирати метрики для вашого продукту (UA)

  • 1. Product Metrics Framework Або як обирати та класифікувати метрики для вашого продукту Андрій Мандріка
  • 2. Давайте познайомимось § Андрій Мандріка § 12+ років досвіду в IT. Керую продуктами останніх 9 років. § Ex-Head of Product: Rocket, Ex-Product Manager: Dreamteam.gg, Parimatch Tech § З нуля побудував продуктову організацію в Rocket. § Останні 2 роки допомагаю українським компаніям та продактам покращувати їх продуктові навички та процеси. За цей час навчив вже 400 продактів та проконсультував 10 компаній. § А також, керую проєктом KOLOси в фонді KOLO, який за рік зібрав 1.5млн $ на ЗСУ. alumnus
  • 3. Чому не можна так їхати? «Ви не можете ефективно керувати тим, що не можете виміряти»
  • 4. Але різних метрик можуть бути сотні, і тому потрібна система для їх класифікації. Та й взагалі, щоб не забути подумати про якусь важливу категорію метрик для свого продукту=)
  • 5. Google HEART Mixpanel framework AARRR Funnel By measurement object By department Metrics Marketing & Sales Product Product Usage (Behavioural) Acquisition Reach Activation Activation Adoption Engagement Task- Success Engagement Active Usage Retention Retention Retention Revenue Business- Specific Referral Happiness Product Performance (Technical) Operational Business Як класифікувати метрики продукту?
  • 6. Money, Active users Product Marketing / Sales: Business Result: Money, New users OPs: People, Processes Як функціонує бізнес?
  • 7. Acquisition (Marketing&Sales) Metrics – Business (Result)/Finance Metrics - Product Metrics – Operational (OPs) Metrics – як, звідки, наскільки ефективно ми залучаємо нових користувачів/клієнтів в продукт та скільки нам це коштує. на скільки ефективно продукт «переробляє» залучених користувачів для отримання бізнес результату. скільки і чого залишається в бізнесу після взаємодії користувача з продуктом. на скільки ефективно працюють люди та процеси в середині бізнесу. При чому ці метрики можуть бути в кожному відділі свої. Які можуть бути метрики в бізнесі?
  • 8. Sales & Marketing § CPC, CPM, CPL, CPA, CAC § MQL, SAL, SQL, SOL § CTR, Open Rate, Answer Rate § Organic/Paid Ratio § ROMI, ROAS § Growth rate, K- factor Product § Conversion Rate (CR) § Activation Rate § Engagement Rate § Retention Rate (RR) § Churn Rate § AOV § Frequency, Stickiness Factor § NPS Finance/Bus iness Result § ARPU, ARPPU § MRR, ARR § LTV § Revenue § Cost § Gross/Net Profit § Contribution Margin § EBITDA § ROI § Payback period + § DAU/ WAU/ MAU Operational § Cycle/Lead time § Nmbr of ops/goods per time § Utilization rate § Employee turnover Класифікація метрик за зоною відповідальності
  • 9. Sales & Marketing § CPC, CPM, CPL, CPA, CAC § MQL, SAL, SQL, SOL § CTR, Open Rate, Answer Rate § Organic/Paid Ratio § ROMI, ROAS § Growth rate, K- factor Product § Conversion Rate (CR) § Activation Rate § Engagement Rate § Retention Rate (RR) § Churn Rate § AOV § Frequency, Stickiness Factor § NPS Finance / Business Result § ARPU, ARPPU § MRR, ARR § LTV § Revenue § Cost § Gross/Net Profit § Contribution Margin § EBITDA § ROI § Payback period + § DAU/ WAU/ MAU Operational § Cycle/Lead time § Nmbr of ops/goods per time § Utilization rate § Employee turnover АЛЕ! Не можна сказати, що за якусь метрику відповідає тільки один відділ!
  • 10. By measurement object By department Metrics Marketing & Sales Product Product Usage (Behavioural) Product Performance (Technical) Operational Business Класифікація продуктових метрик за об'єктом виміру
  • 11. Product Usage Metrics (User Behavioral) – Product Performance Metrics (Technical) – поведінкові або користувацькі метрики дозволяють зрозуміти, як ведуть себе користувачі під час використання продукту. метрики продуктивності, або його технічні метрики, дозволяють зрозуміти стан самого продукту та його інфраструктури, що необхідні для його можливого використання. На які питання відповідають продуктові метрики? Технічний стан продукту Використання продукту
  • 12. Product Usage Metrics (User Behavioral) § Conversion Rate (CR) § Activation Rate § Engagement Rate § Retention Rate (RR) § Churn Rate § AOV § Frequency, Stickiness Factor § NPS Product Performance Metrics (Technical) § Page Loading Time § Latency, Uptime, Downtime, Response time § Requests/Bytes per minute § CPU/Memory Usage § Error rate § App size Класифікація продуктових метрик за обʼєктом виміру Як правило, коли ми розмовляємо про продуктові метрики, то маємо на увазі саме поведінкові метрики користувачів, але і їх є велика кількість та потрібно вміти їх групувати.
  • 13. Acquisition Activation Retention Referral Revenue AARRR Framework на основі воронки AARRR метрики, або Піратські метрики – фреймворк для опису ключових категорій метрик, які необхідні для оцінки росту продукту, у вигляді лінійної воронки, по якій проходять користувачі під час взаємодії з продуктом. Концепт був запропонований відомим підприємцем та венчурним капіталістом з кремнієвої долини - Dave McClure
  • 14. AARRR Framework на основі воронки Як, звідки, чи ефективно ми залучаємо нових користувачів в продукт і скільки це нам коштує? Як ми доводимо користувачів до отримання першої цінності від використання продукту? Як користувачі повертаються в продукт? Як користувачі нам платять за використання продукту та скільки грошей залишається в бізнесу? Як користувачі рекомендують наш продукт іншим, щоб залучати нових користувачів? Acquisition Activation Retention Referral Revenue
  • 15. Mixpanel product metrics framework Mixpanel product metrics guide
  • 17. https://clevertap.com/blog/google-heart-framework/ Можна використовувати, як для всього продукту, так і для окремої функції/ задачі в продукті! Цілі – що ми хочемо, щоб користувачі досягли в продукті? Сигнали – за якими діями користувача ми можемо зрозуміти, що ми наближаємося до цілі? Метрики – як ми можемо виміряти дії користувача? Сердечний фреймворк UX метрик від Google
  • 18. Product Metrics Combined Framework Reach/ Acquisition Activation + Adoption Engagement Retention Monetization / Business / Revenue Happiness Business- Specific Product Performance (Technical) Operational Що буде, якщо скомбінувати категорії з різних фреймворків?
  • 19. Метрики залучення користувачів – допомагають зрозуміти, як, звідки, наскільки ефективно ми залучаємо нових користувачів/клієнтів в продукт та скільки нам це коштує. Acquisition Metrics Категорії метрик: Вартість: Скільки коштувало? Spend/Budget, CPC, CPM, CPL, CPA, CPI, CAC Ефективність: Етапів та грошей CTR, CR, Open/Answer Rate, Organic/Paid Ratio, ROMI, ROAS Зростання: Скільки привели? New users/Leads/Buyers/Installs/Orders/Purchases, Growth factor, K-factor Аналізуються, як загалом так і по кожному каналу залучення та окремій кампанії. Від витрачених грошей, до нових людей в продукті, та до отриманого прибутку на виході. Для кожного каналу метрики можуть бути різні, але все одно в рамках цих категорій.
  • 20. Що міряти якщо продукт/функція не має залучення ззовні? Юзер база найбільшого продукту Цільова аудиторія сфери відповідальност і продукту/ функції Користувачі, які використовують продукт/модуль /функцію Всі клієнти Glovo Клієнти, що успішно отримали хоча б 1 замовлення Клієнти, які зробили швидке повторне замовлення Міряти потенційне охоплення серед існуючої користувацької бази
  • 21. Метрики активації – допомагають зрозуміти, як ми доводимо нових користувачів до першого отримання цінності від використання продукту. Саме тієї ключової цінності заради якої користувачі і наймають продукт. Activation & Adoption Metrics Метрики адаптації – допомагають зрозуміти, як ми доводимо активованих користувачів до формування звички використовувати продукт. Adoption Activation Product first touch First core action Aha moment Habit t, Time User flow Retention Metric: Activation Rate Metric: Adoption Rate
  • 22. Метрики повернення користувачів – допомагають зрозуміти, як користувачі повертаються в продукт. Найголовніші метрики для довготривалого успіху продукту! Показує на скільки продукт добре утримує користувачів за рахунок вирішення їх задач та проблем! Retention Metrics Для правильного формування метрик Retention потрібно розуміти основну дію, за якою повертаються користувачі та органічний інтервал виникнення задачі. Основними метриками повернення є Retention Rate, Churn Rate, User/Client Lifetime, тощо.
  • 23. Метрики залученості в продукт – допомагають зрозуміти, на скільки глибоко користувачі занурюються в продукт під час використання. По факту, цими метриками ми можемо виміряти цінність для користувача від використання продукту. Engagement Metrics Категорії метрик: Варіативність: Які різні дії можуть бути виконані користувачем, або з яким типом контенту він взаємодіє в рамках виконання основної дії Інтенсивність: Що в рамках основної дії чи сесії збільшує цінність і для користувача і для бізнесу (дії, гроші, час) Частота: Як добре повинна бути виконана основна дія Ефективність: Як часто користувач виконує основну дію за період Task-Success: Як користувачі доходять до основної дії під час кожного використання
  • 24. В залежності від виду продукту, аналізуються різні метрики інтенсивності! Engagement Metrics Види продуктів та метрики залученості в них: Увага: Час проведений в продукті, К-сть сеансів/сторінок/екранів/статей/замовлень на 1 юзера, Глибина скроллу Транзакції: Середній чек, К-сть товарів в корзині, % покинутих корзин, Частота покупок Ефективніть: К-сть виконаних дій на одиницю часу або юзера, Час на виконання дії Аналізуються, як загалом так і по кожній окремій функції продукту.
  • 25. Бізнес метрики або метрики монетизації – допомагають зрозуміти, як ми заробляємо гроші та скільки в бізнесу їх залишається після вирахування різних видів витрат. Business/Monetization Metrics Категорії метрик: Загальні фінансові: Revenue, Spend, Gross/Net Profit, Margin, EBITDA, Cashflow, Burn rate, Payback period, ROI На один юніт/клієнта: AOV, ARPU, ARPPU, Contribution Margin, CAC, LTV Специфічні під модель монетизації та домен: MRR, MRR Churn, ARR, GMV, GGR Loan-to-Deposit Ratio, Return on Assets
  • 26. Як правило, фінансові метрики аналізуються в комплексних стандартних фінансових звітах типу CashFlow та PnL – постфактум, та прогнозуються майбутні значення метрик використовуючи фінансові моделі, в тому числі і юніт економіку. Як аналізувати Revenue/Monetization Metrics? Процес побудови та використання фін. Моделей дозволяє зрозуміти вплив інших категорій метрик на значення фінансових метрик, а також проводити, так званий - What-if аналіз. Наприклад, як зміниться прибуток в наступному місяці, якщо ми збільшимо конверсію в покупку на 5%, або якщо запустимо функцію Х.
  • 27. Метрики Щастя – допомагають зрозуміти рівень задоволеності користувачів від використання продукту. Єдина категорія користувацьких продуктових метрик, що заснована не на дії користувача, а на його думці. Happiness Metrics Можуть вимірюватися наступними метриками: NPS Net Promoter Score CSAT Customer Satisfaction Score CES Customer Effort Score App Rating CTR/Answer Rate АЛЕ! Потрібно пам'ятати, що оцінка дуже залежить від сегменту користувачів, місця, часу та форми запитання.
  • 28. Тепер коли ми знаємо ключові категорії метрик і що вони вимірюють, ми можемо створити перелік метрик для будь-якого продукту або функції – задаючи питання по кожній категорії метрик
  • 29. Шаблон переліку метрик продукту Link to Template
  • 30. § Потрібно тримати баланс по кількості метрик в кожній категорії. Для щоденного відслідковування бажано виділити не більше ніж по 1-2 з кожної категорії. Навіть за допомогою проксі метрик. Правила створення переліку метрик § Це нормально, якщо ваш продукт/функція взагалі не впливає на якусь категорію метрик. Наприклад, внутрішній продукт на монетизацію. § Обов'язково додаємо коротку назву, опис та формулу метрики, щоб всі члени команди однаково розуміли суть метрики. § Якщо зараз ви не готові працювати над якоюсь категорією, то в першій версії – немає сенсу детально розписувати метрики по ній. Наприклад, Рефералка § Якщо не можемо відповісти – навіщо нам відслідковувати метрику, то не додаємо її в перелік ваших метрик.
  • 31. Як використовувати далі перелік метрик?
  • 32. Як використовувати далі перелік метрик? https://www.geckoboard.com/dashboard-examples/executive/aarrr-pirate-metrics-dashboard/ Формувати дашборди для відслідковування стану продукту по кожній ключовій категорії метрик. Виділивши з кожної категорії хоча б по 1 метриці
  • 33. Як використовувати далі перелік метрик? Перетворити перелік метрик в ієрархію метрик для розуміння взаємозв'язків між цими метриками.
  • 34. Як використовувати далі перелік метрик? А на основі ієрархії метрик можна побудувати фін. модель продукту для моделювання різних продуктових ситуацій, what-if аналізу, пошуку точок росту продукту та прогнозування майбутнього стану продукту.
  • 35. Як використовувати далі перелік метрик? Для визначення зон відповідальності команд та навіть продуктів Team Goals/Metrics Marketing Team Awareness + Acquisition, Monetization Growth Team Acquisition, Activation, Adoption, Retention, Monetization Feature Team 1 Core Value: Engagement, Organic Retention, Happiness Feature Team 2 Core Value: Engagement, Organic Retention, Monetization, Happiness Customer Support Team Retention + Churn, Happiness, Ops
  • 36. Як використовувати далі перелік метрик? Як базу знань всіх членів команди
  • 37. Метрики продуктивности команды Releases Release Flow time Release Time Sp/Day Release size, sp AvSize Issue, sp Number Issue Number Bugs % Bugs Functionality Velocity planned business tech feedbacks auto tests Act Velocity planned business tech feedbacks auto tests Velocity actual business tech feedbacks auto tests # Issue planned # Issue accepted % Issue accepted Quality Size tech debt, sp # Critical Bugs on Prod finded # Bugs on Prod found # Bugs on Prod fixed # New test cases Total test cases # New test cases automated Total test cases automated Total % tests automated Ітогі подвєдьом...
  • 38. 1. Ми не можемо ефективно керувати тим, що не можемо виміряти
  • 39. 2. Для того, щоб не заплутатись в безлічі метрик - краще спробувати перелічити їх по категоріях Google HEART Mixpanel framework AARRR Funnel By measurement object By department Metrics Marketing & Sales Product Product Usage (Behavioural) Acquisition Reach Activation Activation Adoption Engagement Task- Success Engagement Active Usage Retention Retention Retention Revenue Business- Specific Referral Happiness Product Performance (Technical) Operational Business
  • 40. 3. Можна формувати свої фреймворки. Головне розуміти – навіщо=) Product Metrics Combined Framework Reach/ Acquisition Activation + Adoption Engagement Retention Monetization / Business / Revenue Happiness Business- Specific Product Performance (Technical) Operational
  • 41. § Щоб не забути, про якусь важливу категорію метрик § Як стартова точка для формування аналітики та дашбордів вашого продукту § Щоб визначити зони відповідальності відділів, команд, окремих працівників § Щоб зрозуміти взаємозв’язки між різними метриками § Щоб зрозуміти вклад кожної метрики в загальну ціль чи результат § Щоб сформувати базу знань вашої аналітики 4. Перелік метрик потрібен
  • 42. Обирайте правильні метрики та створюйте першокласні продукти! Дякую за увагу! Якщо цікава тема метрик, чи потрібна допомога вам чи вашій компанії: TG: andrii.mandrika FB: andrii.mandrika Ln: andrii-mandrika FB: Hard Skills for Product Managers Ln: Hard Skills for Product Managers