Bogdana Huma, Testarea statistica a diferentelor de performanta

1. Testarea statistică a
diferențelor de performanță
Bogdana Humă
Doctorand
Facultatea de Sociologie și Asistență Socială
Universitatea din București
Ziua Doctoranzilor
28 octombrie 2010
CATIIS - Program doctoral interregional şi transnaţional de excelenţă în domeniile "Calculatoare şi
tehnologia informaţiei" şi "Ingineria sistemelor" pentru o economie bazată pe cunoaştere
POSDRU Axa 1.5 „Programe doctorale şi postdoctorale în sprijinul cercetării”

2. Folosim testarea statistică
pentru a…
…verifica dacă observațiile noastre, bazate pe
simțul comun, sunt datorate întâmplării
– Să presupunem că avem două aplicaţii
– Măsurăm rezultatele lor, conform unor indicatori
• Ex.: dimensiunea fișierului de output
– Dacă rulăm aplicaţiile o singură dată, putem
observa o diferenţă?
• Putem fi siguri că acea diferenţă nu este
întâmplătoare?

3. Testarea statistică…
…își are rostul atunci când rezultatele
obținute sunt datorate parțial unor procese
aleatoare
– Deci există erori aleatoare de măsurare
• Întrebare: oare diferența observată este datorată
erorilor de măsurare, sau este o diferență reală între
valori?
…nu este necesară dacă nu există erori de
măsurare

4. Smiley & Sady

5. Exemplu
Avem 30 de imagini pe care le salvăm în
Paintbrush din 24-bit bmp în formate mai
mici: jpg, gif, tif și png
Care format este mai mic – gif sau jpg?
– Calculăm mărimea medie gif și mărimea medie jpg
– Calculăm diferența
– Care este probabilitatea ca această diferență să fie
rezultatul erorilor de măsurare?

6. Întrebări
Care este probabilitatea ca această
diferen ă să fie rezultatul unor proceseț
aleatoare care generează erori de
măsurare?
Ne putem a tepta să întâlnim diferen eș ț
asemănătoare i în alte cazuri decât celeș
studiate?

7. Cum aplicăm testul t?
Eșantion necesar: 20-30 de măsurători
– La 30 de cazuri precizia este maximă
In Excel este aplicat testul t:
– Input: două serii de date
– Output: probabilitatea ca diferența să fie iluzorie
Opțiuni:
– nivelul alfa (stabilit conevnțional la 0.05)
– numărul de cozi (1 tail, 2 tails)

8. Pe scurt...
Testul t este necesar pentru comparații între
rezultatele unor măsurători cu erori aleatoare
Eșantion optim: 30 de cazuri
Aplicare: Excel
Opțiuni:
– Număr de cozi (pe motive teoretice)
– Probabilitatea maximă de eroare acceptată
(convențional e 5%)
Mulțumesc pentru atenție!
bogdana.huma@gmail.com