M. Perez, G. Fazzi, 30 Novembre - 1 Dicembre 2021 -
Webinar: Lezioni apprese nei mesi della pandemia e idee per il futuro
Titolo: Nuovi metodi per le indagini su individui e famiglie: l’emergenza come stimolo all’innovazione
IL CHIAMATO ALLA CONVERSIONE - catechesi per candidati alla Cresima
14a Conferenza Nazionale di Statistica
1. Nuovi metodi per le
Indagini su individui e
famiglie: l'emergenza come
stimolo all'innovazione
MONICA PEREZ, GABRIELLA FAZZI
Direzione centrale raccolta dati | Istat
30.11-1.12//2021
2. La pandemia ha modificato i comportamenti e le abitudini delle
persone, soprattutto nel modo di interagire con la P.A.: «digitalizzazione
indotta» sarà un effetto permanente o solo temporaneo?
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
2
Effetti della pandemia
Per l’Istat difficoltà a condurre interviste faccia-a-faccia presso le famiglie/individui per motivi di tutela
sanitaria. Preferenza per strumenti a distanza CAWI/CATI
3. Nella fase di «picco» della crisi sanitaria:
Cambiamento temporaneo della tecnica di
raccolta dati da CAPI a CATI
per il rispetto delle misure a tutela della salute dei
rispondenti e dei rilevatori. Analisi in figura dell’effetto
di «caduta» per pandemia e ripresa grazie al
cambiamento di tecnica
Adattamento dei disegni di indagine verso processi
di rilevazione più sostenibili (es. Indagine Bambini e
ragazzi, da CAWI assistita a CAWI autonoma per gli
studenti; da PAPI a CAWI per i dirigenti scolastici)
Riprogrammazione delle indagini censuarie
I Censimenti 2020 (Popolazione e abitazioni,
Agricoltura, Istituzioni pubbliche) che fanno elevato
ricorso alla tecnica CAPI sono stati «posticipati» o
«sospesi per un anno»
3
Azioni intraprese dall’Istat per la continuità della produzione statistica
50.0
55.0
60.0
65.0
70.0
75.0
80.0
85.0
90.0
95.0
100.0
JAN
FEB
MAR
APR
MAY
JUN
JUL
AUG
SEP
OCT
NOV
DEC
JAN
FEB
MAR
APR
MAY
JUN
JUL
AUG
SEP
interviste complete per indagine e mese (in % sul
campione teorico)
HBS
LFS
2019 2020
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
4. Sempre più istituzioni e cittadini fanno ricorso alle nuove tecnologie di comunicazione
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
4
Effetti della pandemia
Giugno 2020
La regina Elisabetta II, 94 anni, prende parte
alla prima video conference call pubblica per
parlare con quattro infermieri
-
5,000,000
10,000,000
15,000,000
20,000,000
25,000,000
30,000,000
Gen Mar Mag Lug Set Nov Gen Mar Mag Lug Set Nov Gen Mar Mag Lug Set
2019 2020 2021
Identità SPID Erogate
Fonte: https://avanzamentodigitale.italia.it/it
5. 5
Impatto della digitalizzazione indotta (CAWI) nell’ambito di alcune delle
principali indagini sociali
Indagine edizione
CAWI in %
della lista
Censimento della popolazione e delle
abitazioni*
(indagine multi-tecnica)
2018 45,5
2019 46,3
Aspetti della vita quotidiana**
(indagine multi-tecnica)
2018 23,6
2019 30,6
2020 31,0
Discriminazioni lavorative- persone LGBT in
unione civile** (indagine solo CAWI)
2020 39,7
Bambini e ragazzi*** (indagine solo CAWI) 2021 40,6
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
*Obbligo di risposta e sanzione; ** Obbligo di risposta; ***Su base volontaria
6. Come valorizzare il cambiamento in atto per la raccolta dati
delle indagini sociali?
Scelta di tecniche più evolute per la raccolta dati che consentano di
bilanciare la crescente «digitalizzazione» con elevati standard di
qualità dei dati raccolti
Alcune esperienze e sperimentazioni già avviate dall’Istat
6
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
7. Video-Mediated Interview (VMI), intervista condotta tramite videochiamata in cui telecamera e microfono
permettono un’interazione verbale e non verbale, sincrona ma da remoto
7
Sperimentazione della Video Mediated Interview
Obiettivi Analizzare la propensione alla risposta
Monitorare l’interazione fra intervistatore e intervistato
Studiare l’effetto sulla qualità del dato raccolto
Disegno di indagine Questionario del Censimento della Popolazione e delle abitazioni
8 città e circa 120 famiglie in ogni città, indirizzi già estratti nel 2019
VMI come tecnica esclusiva, interviste tramite Teams
3 settimane di rilevazione, giugno 2021, 26 intervistatori
Nessun obbligo di risposta. Invito con informativa cartacea
Valutazione Analisi dei paradata, dei dati raccolti confrontati con quelli del 2019
Osservazione delle interviste
Domande specifiche sul gradimento della tecnica a intervistatori e intervistati
Debriefing degli intervistatori
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
8. Maggiore propensione ad accettare l’intervista
piuttosto che a rifiutarla se:
• l’intestatario è nato in Italia
• la famiglia ha figli minorenni
8
La partecipazione alla VMI
Famiglie Interviste Tasso di risposta
Brescia 109 58 53%
Bologna 115 32 28%
Milano 144 10 7%
Palermo 132 7 5%
Torino 120 16 13%
Udine 137 45 33%
Venezia 112 15 13%
Totale* 869 183 21%
* Reggio Calabria non ha potuto portare avanti la sperimentazione
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
9. Condivisione dello schermo e del questionario
«Con la condivisione dello schermo e con questa modalità credo di essere stata anche più attenta rispetto alle vecchie
interviste» (intervistata di Brescia, over 65)
«Per il rilevatore crea maggiore attenzione, gli intervistati si sentono più tranquilli a vedere lo schermo, controllano
quello che mettiamo e una volta mi ha anche corretto» (rilevatore di Palermo)
Interazione intervistatore / intervistato
Flessibilità, organizzazione e sicurezza
Ottimizzazione del tempo, eliminazione dei tempi e costi di spostamento, maggiore flessibilità, maggiore sicurezza (non
solo sanitaria), maggiore sensazione di riservatezza rispetto alla CAPI.
9
Punti di forza della VMI
Interessato
Collaborativ
o
Attento
Accurato
A suo agio
Fiducioso
Intervistati
Su una scala da 1 a 10 quanto si è sentito a suo agio
nel rispondere all’intervista in videochiamata? 9,4
Intervistatori
Valutazione del comportamento dall’intervistato
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
10. Bisogno di dati più solidi
numero di partecipanti coinvolti
strutturazione sperimentale del disegno di indagine
possibilità di studiare l’effetto tecnica
Sperimentare l’uso di piattaforme di video-call diverse da Teams
mantenendo le garanzie di sicurezza e privacy
che permettano di partecipare anche da mobile senza dover installare app
10
Passi successivi
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
11. 11
Respondent driven sampling basato su web (Web-RDS)
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
Web-RDS è utilizzato per raggiungere popolazioni «nascoste» di cui non
è disponibile la lista di partenza per la selezione del campione
Ciascun partecipante all’indagine svolge, oltre al ruolo di
«rispondente», il ruolo di «reclutatore» coinvolgendo altre persone tra
i suoi contatti, che diventano potenziali rispondenti all’indagine
Il reclutamento di altri partecipanti, azione necessaria per alimentare la
propagazione del campione, avviene tramite l’invio di un link (che serve
per accedere al questionario) generato automaticamente al termine
della compilazione del questionario
Il metodo ha maggiore possibilità di successo se la compilazione
avviene tramite smartphone per la maggiore facilità e immediatezza di
diffusione del link che può essere trasmesso tramite canali di
messaggeria istantanea (wathsapp, etc)
Partirà nelle prossime settimane una sperimentazione,
tutelata da privacy, sulle Discriminazioni lavorative nei
confronti delle persone LGBT
12. Investimenti nell’uso di nuove tecnologie per facilitare l’accesso alle indagini
sperimentazione del QR code in un’indagine web rivolta agli studenti (Bambini e ragazzi,2020)
invio del link di accesso al questionario tramite sistemi di messaggistica istantanea (Discriminazioni
lavorative nei confronti delle persone LGBT, 2021)
accesso ai questionari tramite SPID (Censimento popolazione, 2021)
sviluppo di plugin per invio massivo di comunicazioni email con allegati personalizzati (Bambini e
ragazzi,2020)
12
Verso la digitalizzazione delle indagini statistiche
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
13. 13
Prospettive per il futuro: Smart surveys
ESSnet Smart surveys EU project sta realizzando
un lavoro preparatorio alla definizione di una
piattaforma europea idonea a realizzare indagini
intelligenti, perseguendo un duplice obiettivo:
- valutare attraverso test di funzionalità e
usabilità e sondaggi pilota alcune applicazioni
sviluppate precedentemente per la conduzione
delle indagini TUS (Time Use survey) e HBS
(Household Budget Survey) –WP2
- definizione di un framework concettuale per lo
sviluppo di piattaforma europea flessibile e
modulare, idonea a condividere e riutilizzare
soluzioni e componenti per la gestione delle
indagini e in grado di offrire adeguati requisiti
per indagini smart (riservatezza, trasparenza e
verificabilità del processo, etc) – WP3
Le smart surveys (c.d. sondaggi intelligenti)
combinano dati acquisiti in modo tradizionale con
dati acquisiti tramite sensori, raccolti tramite smart
devices in modalità attiva o passiva
Minore disturbo statistico, maggiore accuratezza
Problemi di copertura, campione rappresentativo solo di
target predefinito
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
Fonte:F. Ricciato et al. / Trusted smart statistics: Motivations and
principles
Rapporto di fiducia tra le entità coinvolte: cittadini, società
private, Istituzioni, Uffici di statistica
14. o Si impara il comportamento
degli utenti tramite una serie di
domande rivolte all'intervistato
o modello di interazione: alta
attenzione per breve tempo
o su carta, via telefono, via web.
VMI …
o si acquisiscono dati individuali
per ulteriori elaborazioni
14
o Si impara il comportamento degli
utenti interagendo con il
rispondente tramite il suo
dispositivo mobile e estraendo
informazioni dai dati del sensore
raccolti da/attraverso il dispositivo
o modello di interazione: bassa
attenzione per lungo tempo
o tramite dispositivo mobile
personale si acquisiscono dati
individuali per ulteriori
elaborazioni
Indagini tradizionali Smart Surveys
Trusted Smart
Surveys
o Si impara il comportamento degli utenti
interagendo continuamente con il
rispondente tramite il suo dispositivo
mobile e estraendo informazioni dai dati
del sensore raccolti da/attraverso il
dispositivo
o modello di interazione: bassa attenzione
per lungo tempo
o I dati individuali non lasciano mai lo
spazio privato del singolo rispondente
o Si acquisiscono soltanto i risultati
aggregati finali di elaborazioni
statistiche, e soltanto per le domande
che hanno subito un'approvazione ai
processi
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
Prospettive per il futuro: Smart surveys
l'obiettivo è estrarre informazioni statistiche dai dati del
sensore, non necessariamente acquisire i dati grezzi in
quanto tali
15. • La crescente digitalizzazione della raccolta dei dati necessari alla produzione statistica riduce il burden statistico
ed i costi finanziari, favorendo la partecipazione dei cittadini alle rilevazioni statistiche
• L’impatto sulla qualità dei dati raccolti deve tuttavia essere accuratamente valutato: “effetto selezione” (i
rispondenti in grado di interagire con le tecnologie e/o che dispongono di smart devices sono collettivi specifici non
rappresentativi della popolazione obiettivo) e l’ “ accuratezza ” dei dati raccolti (mancanza di supervisione esperta e
interazione)
• La combinazione di diverse tecniche di rilevazione (indagini multi-tecnica) resta, al momento, la strategia di
rilevazione più efficace sia per raggiungere i diversi target di popolazione che per assicurare la qualità dei dati nel
loro complesso
• I benefici derivanti dalla digitalizzazione non devono produrre esclusione sociale rispetto a specifici collettivi di
popolazione, tutte le persone hanno lo stesso diritto di partecipare alle indagini statistiche
• L’evoluzione delle tecniche di rilevazione e più in generale le smart surveys hanno grandi potenzialità e
rappresentano una grande sfida per le indagini sociali su individui e famiglie sul piano metodologico, tecnologico
e organizzativo.
• Il passaggio da un approccio «normativo» ad uno «collaborativo» nella raccolta dei dati (citizen driven data) apre
ulteriori e più promettenti scenari per la produzione statistica nell’ambito delle indagini sociali, facendo leva sulla
reputazione scientifica e l’indipendenza dell’Istituto nazionale di statistica
15
Considerazioni finali
NUOVI METODI PER LE INDAGINI SU INDIVIDUI E FAMIGLIE: LA PANDEMIA COME STIMOLO ALL’INNOVAZIONE
In questo contesto in cui aumenta l’utilizzo di tecnologie, social network e applicazioni di messaggistica istantanea, possono trovare spazio e applicazione nuove metodologie e tecniche di indagine basate su web.
Un metodo che può beneficiare della diffusione del web e dei smart device è il web based Respondent driven sampling in cui ciascun partecipante all’indagine, oltre al ruolo di rispondente, svolge il ruolo del reclutatore di altre persone che diventano potenziali rispondenti all’indagine, contribuendo così la propagazione del campione dei rispondenti secondo una logica a «valanga». Il reclutamento avviene tramite l’invio di un link per accedere al questionario che viene generato automaticamente al termine della compilazione del questionario e che la persona (rispondente) può inviare ad altre persone tra i suoi contatti, contribuendo così ad alimentare la catena dei potenziali partecipanti.
Questo metodo, che è di solito utilizzato per raggiungere popolazioni «nascoste» di cui non è disponibile la lista di partenza per la selezione del campione, ha maggiore possibilità di successo se la compilazione avviene tramite smartphone. Questo consente maggiore facilità immediatezza di diffusione del link che può essere inviato direttamente tramite canali di messaggeria istantanea (wathsapp, ).
L’Istat lo sta sperimentando applicato all’indagine sulle Discriminazioni lavorative nei confronti delle persone LGBT, rivolgendosi al target degli omosessuali e bisessuali non in unione civile, che partirà nelle prossime settimane.
L’Italia ha aderito all’ESSnet smart surveys 2020-2022, un progetto che sta portando avanti un lavoro preparatorio alla realizzazione di una piattaforma europea adatta a condividere e accogliere soluzioni e componenti per realizzare indagini intelligenti
Sia gli interessati (fontane) che i titolari dei dati (bucket) possono fungere da fonti di dati per gli uffici di statistica (SO). Sondaggi intelligenti affidabili rappresentano un esempio di flusso informativo Citizen-to-Government (C2G) in cui gli SO accedono ai dati direttamente dagli interessati. L’accesso ai dati degli operatori di rete mobile (MNO) sono un esempio di flusso di informazioni Business-to-Government (B2G) in cui gli SO accedono ai dati detenuti da una società privata. In entrambi i casi, l'obiettivo dell'Ufficio di statistica è estrarre informazioni statistiche dai dati, non necessariamente acquisire i dati grezzi in quanto tali.