2. GAO történeteGAO története
► Alapítás: 1921 Kezdeti időszak: csak pénzügyiAlapítás: 1921 Kezdeti időszak: csak pénzügyi
ellenőrzés, könyvvizsgálatellenőrzés, könyvvizsgálat
► A II. Világháború után kezdtek el koncentrálni másA II. Világháború után kezdtek el koncentrálni más
típusú ellenőrzésekretípusú ellenőrzésekre
► A 70-es 80-as években kezdték el fejleszteni azA 70-es 80-as években kezdték el fejleszteni az
elemzési, programértékelési tevékenységüket éselemzési, programértékelési tevékenységüket és
ehhez vettek fel közgazdászokat, statisztikusokat,ehhez vettek fel közgazdászokat, statisztikusokat,
stb.stb.
► Névváltozás 2004-ben: General Accounting Office-Névváltozás 2004-ben: General Accounting Office-
ról Government Accountability Office-raról Government Accountability Office-ra
► „„congressional watchdog”congressional watchdog”
3. ►Elnök: Comptroller GeneralElnök: Comptroller General
►A kongresszusi pártokból álló bizottság 3A kongresszusi pártokból álló bizottság 3
főre tesz javaslatot. Az USA elnöke ezekfőre tesz javaslatot. Az USA elnöke ezek
közül választ.közül választ.
►Mandátum: 15 év, nem újítható megMandátum: 15 év, nem újítható meg
►2008 óta ügyvezető elnök van2008 óta ügyvezető elnök van
►Létszám:kb. 3100 fő ; ¾-ük Washington DC-Létszám:kb. 3100 fő ; ¾-ük Washington DC-
ben dolgozik ¼ a 11 regionálisben dolgozik ¼ a 11 regionális
kirendeltségenkirendeltségen
6. Ellenőrzési Program dokumentálásaEllenőrzési Program dokumentálása
1.Design Matrix -Tervezési Mátrix1.Design Matrix -Tervezési Mátrix
-Vizsgálati kérdések (researchable questions)-Vizsgálati kérdések (researchable questions)
-Szükséges Információ és Információforrások-Szükséges Információ és Információforrások
-Ellenőrzés által lefedett területek,módszertan-Ellenőrzés által lefedett területek,módszertan
beleértve az adatok megbízhatóságánakbeleértve az adatok megbízhatóságának
vizsgálatátvizsgálatát
- Ellenőrzés korlátai, akadályai : pl.: azEllenőrzés korlátai, akadályai : pl.: az
ellenőrzöttektől kapott adatok megbízhatósága,ellenőrzöttektől kapott adatok megbízhatósága,
nem küldik meg az adatbázis, tanúsítványokat stb.nem küldik meg az adatbázis, tanúsítványokat stb.
határidőre, alacsony válaszadási arány ahatáridőre, alacsony válaszadási arány a
kérdőívekrekérdőívekre
- Mi lehet az ellenőrzés eredménye/ üzeneteMi lehet az ellenőrzés eredménye/ üzenete
7. Vizsgálandó
Kérdések
Információforrá
sok,
Kritériumok
Feladatkör,
témakör/
Módszertan
Ellenőrzés
korlátai,
akadályai
Mi lehet az
ellenőrzés/elemz
és eredménye/
üzenete
Mely kérdéseket akar
a vizsgálatot végző
team megválaszolni?
Azonosítsa a
kérdéseket,
amelyeket a team
meg kell, hogy
kérdezzen a vizsgálat
célkitűzéseinek
teljesítéséhez;
Biztosítsa, hogy
minden fő kérdés
konkrét, objektív,
semleges, mérhető
és végrehajtható
legyen Biztosítsa a
kulcsfontosságú
szakmai fogalmak
definiálását.
Minden főbb
értékelési kérdés
külön sorban jelenjen
meg.
Milyen
információkra van
szüksége a teamnek
a vizsgálati
kérdések
megválaszolásához
? Honnan
szerezhetőek be
ezek az
információk?
Azonosítsa a
dokumentumokat,
adatokat,
tanulmányokat és az
információk típusát,
amelyet a teamnek
be kell szereznie;
Azonosítsa a belső
kontrollokat és
megfelelőséget (ha
szükséges);
Azonosítsa a
kritériumok
meghatározásához
szükséges
dokumentumokat;
Azonosítsa a témára
vonatkozó még
nyitott korábbi
javaslatokat,
jelentős
megállapításokat;
Hogyan fogja a team
megválaszolni a
kérdéseket?
Bizonyítékgyűjtési
stratégia,
Mintavétel módszere,
esettanulmányok, fókusz
csoport, kérdőívek,
benchmarking, legjobb
gyakorlat, adatbázis
Írja le milyen mértékben
akarja lefedni az adott
témát (scope of strategy)
Minta nagysága (sample
size)
Elemzési technikák
felsorolása
Pl:Költség-haszon
elemzés
Milyen tényezők
akadályozhatják a
vizsgálatot?
tervezési korlátok,
és ezek hogyan
befolyásolják a
jelentést
Pl.:
megkérdőjelezhető
adatok, nem
megbízható
adatbázis,
korlátozott
hozzáférés
adatokhoz,
információhoz, nincs
adat a teljes, vizsgált
időszakra
Titkos adatok,
Az adatok nem
extrapolálhatók, nem
lehet általánosítani
azok alapján,
nem lehet általános
véleményt adni a
teljes sokaságra
vonatkozóan
.
Melyek a vizsgálat
várható eredményei?
Az első oszlopban
megfogalmazott
vizsgálati kérdésekre
adott lehetséges
válaszok, amelyek a
tervezési szakaszban
szerzett információk
alapján már
körvonalazódtak
8. 2.Projekt Terv2.Projekt Terv
►Ellenőrzési munkaszakaszok és feladatokEllenőrzési munkaszakaszok és feladatok
►Kezdő és befejezési dátumKezdő és befejezési dátum
►Feladatvégzésre kijelölt munkatársakFeladatvégzésre kijelölt munkatársak
Elősegíti a vezetéssel a kommunikációt,Elősegíti a vezetéssel a kommunikációt,
menetközben módosítható ha a körülményekmenetközben módosítható ha a körülmények
változnak; új információ merül fel;változnak; új információ merül fel;
9. Munkaszakaszok és feladatok Kezdés Befejezés Feladatra kijelölt
munkatársak
Phase 2– Planning and Design/ Tervezés
Obtain and enter engagement code into JIS 12/01/09 Leigh White
Start engagement folder structure in DM; start
engagement documentation
12/01/09 02/01/10 Leigh White, Brian
Hartman
Through discussions with team and EAM-identified
stakeholders, determine that stakeholder name and
type are appropriate
12/01/09 03/01/10 Leigh White
Találkozás a kongresszusi képviselő munkatársaival 11/30/09 Steve Elstein, Leigh White,
Antoinette Capaccio
Obtain background information/
Háttér információ megszerzése
12/01/09 03/01/10 Leigh White, Brian
Hartman
Coordinate with CBO and CRS 01/15/10 04/01/10 Leigh White
Előzetes terv és módszertan készítése 12/15/09 02/15/10 Leigh White, Brian
Hartman
Obtain management approval to proceed with
engagement /Vezetői jóváhagyás
01/12/10 Leigh White
01/12/10
Initiation
Prepare and send notification letter to agency/ Értesítő
levél küldése az ellenőrzött szervnek
10/27/09 Leigh White
Schedule, attend, and document entrance
conference(s)/ Vizsgálatindító megbeszélés
12/01/09 John Stephenson, Steve
Elstein, Leigh White
10. Obtain program documents, analyze EPA strategic plans and
GPRA goals/ Programdokumentumok bekérése, stratégia és
programcélok elemzése
10/27/09 1/12/10 Leigh White
Conduct audit work with EPA Region 6 in Dallas 1/12/10 4/02/10 Leigh White, Brian
Hartman
Conduct audit work with EPA Region 10 in Seattle and attend
Corrective Action training
2/01/10 2/05/10 Leigh White, Brian
Hartman
Meet with EPA to request data from EPA’s RCRA Info database
and collect information on the database to conduct data
reliability assessments
3/11/10 Brian Hartman, Cindy
Gilbert
Begin conducting data analysis of the database and data reliability 3/31/10 5/14/10 Brian Hartman, Cindy
Gilbert, Melinda Cordero
Conduct audit work in Louisiana at Louisiana Department of
Environmental Quality
4/05/10 4/07/10 Leigh White, Brian
Hartman
Prepare:
Design Matrix / Design Paper
Project Plan
Commitment Letter and Terms of the Work
3/22/10 04/30/10 Steve, Elstein, Leigh
White, Brian Hartman
Conduct audit work with EPA Region 3 in Philadelphia (to coincide
w/ commitment travel)
5/10/10 5/10/10 Leigh White, Brian
Hartman
Reach agreement on engagement plan and assure independence 5/13/10 5/13/10 John Stephenson, Steve
Elstein, Leigh White,
Brian Hartman, ARM,
OGC, SI
Discuss engagement approach with requester 5/11/10 5/11/10 John Stephenson, Steve
Elstein, Leigh White,
Brian Hartman
Obtain management approval to proceed with engagement Commitment
5/13/10
11. Phase 3 – Bizonyítékok beszerzése és elemzése/ „Helyszíni ellenőrzés”
Conduct interviews with industry officials
Conduct audit work with EPA Region 4 and Georgia program
Interviews with environmental groups and ASTSWAMO
Conduct audit work with Pennsylvania program
Conduct audit work with EPA Region 5 and one state in the
region
Conduct audit work with second Region 5 states
Conduct interviews and gather documentation from EPA
headquarters regarding the establishment of the CA GPRA
universe and goals, enforcement, budget and other
5/03/10 5/28/10 Steve Elstein, Leigh White, Joanna Owusu,
Brian Hartman
6/14/10 6/25/10 Leigh White, Joanna Owusu, Brian Hartman
5/03/10 5/28/10 Brian Hartman, Joanna Owusu, Leigh White
5/10 5/10 Brian Hartman
7//10 7//10 Leigh White, Joanna Owusu, Brian Hartman
7//10 7//10 Leigh White, Joanna Owusu, Brian Hartman
5/03/10 6/30/10 Steve Elstein, Leigh White, Joanna Owusu,
Brian Hartman
Conduct analysis of RCRA Info data for entire universe 5/03/10 7/30/10 Brian Hartman, Melinda Cordero
Conduct analysis of state documentation of goal
accomplishment (Environmental indicator forms)
4/1/10 7/30/10 Brian Hartman, Leigh White
Conduct analysis of available information and document
status of selected facilities
6/01/10 8/06/10 Brian Hartman, Joanna Owusu, Leigh White
Conduct any follow-up discussions with EPA based on
region/state visits
7/26/10 8/06/10 Leigh White, Joanna Owusu, Brian Hartman
Schedule, prepare for, and hold message check meeting
(optional meeting)
John Stephenson, Steve Elstein, Leigh
White, Joanna Owusu, Brian Hartman
Prepare document to be used to reach message agreement
(note: AIC to be on A/L during one week of this time period)
8/02/10 9/03/10 Steve Elstein, Leigh White, Joanna Owusu,
Brian Hartman
Message Agreement meeting: A jelentés fő
megállapításainak és üzenetének megvitatása
/Kongresszusi kollégákkal való kommunikáció
Message
Agreement
9/10/10
12. Phase 4 – Product Development and Distribution= Jelentés elkészítése
Begin drafting product/ Számvevőszéki jelentés első
változatának elkészítése
9/13/10 10/15/10 Steve Elstein, Leigh White, Joanna
Owusu, Brian Hartman
Schedule, hold, and document Exit Conference/ Záró
megbeszélés
10/13/10 10/13/10 John Stephenson, Steve Elstein, Leigh
White, Joanna Owusu, Brian Hartman
Obtain and document stakeholder concurrence with product 10/18/10 10/27/10 Steve Elstein, Leigh White, Brian Hartman,
ARM, OGC, SI
First Partner approves draft for Second Partner review First Partner Approval
10/27/10
Second Partner reviews draft and reaches concurrence with
First Partner
10/27/10 10/29/10
Notify Engagement Review Meeting four weeks prior to
agency comment/third party
Steve Elstein, Leigh White, Brian Hartman
Index draft 10/18/10 10/29/10 Leigh White, Joanna Owusu, Brian
Hartman
Reference draft and incorporate revisions to product 11/01/10 11/10/10 Leigh White, Joanna Owusu, Brian
Hartman
Request PAG copyediting services
(Copyediting will ensure product is consistent with GAO style.
PAG will “template” product. PAG needs up to 2 days for
every 20 pages. Testimony and correspondence do not have
to be templated but must be edited.)
11/08/10 Leigh White, Brian Hartman
Review edited and templated draft; request PAG lock the file
in PDF before transmittal to agency for comment
11/08/10 11/12/10 Leigh White, Joanna Owusu, Brian
Hartman
Notify requesters and/or cognizant congressional committees
of jurisdiction
11/12/10 11/12/10 John Stephenson, Steve Elstein, Leigh
White, Brian Hartman
13. Transmit product to agency/ Számvevőszéki jelentés megküldése
Ellenőrzötteknek
To Agency/Third Party for Comment
11/12/10
Notify ERM that draft has been sent to agency for comment/third party
views
Leigh White, Brian Hartman
Team receives agency comments and/or /third party views/
Ellenőrzöttek észrevételének megérkezése
Agency Comments Received
12/13/10
First Partner determines need for Second Partner Concurrence and
stakeholder concurrence
12/13/10 12/13/10 John Stephenson
Notify ERM of receipt of agency comments/third party views 12/13/10 Leigh White
Team begins addressing agency comments/third party views and
prepares GAO’s response;
12/13/10 12/17/10 Leigh White
Index and reference revisions to product 12/13/10 12/17/10 Leigh White
First Partner approves product and notifies requester of impending
issuance
12/17/10 12/17/10 John Stephenson
Coordinate processing of final product with PAG, including a quality
assurance review by Knowledge Services
12/17/10 12/23/10 Leigh White
Inform PAG that product is ready for distribution and file is to be placed
in web posting folder
12/17/10 12/23/10 Leigh White
NO LATER THAN COB on the day preceding delivery, send an e-mail to
Distribution (Distribution@GAO.GOV) to initiate delivery of product
Leigh White
Date of product delivery Product Issuance
1/12/11
Complete engagement documentation for post-issuance activities. Leigh White
All necessary tasks are complete and engagement code is closed in Completion
1/28/11
14. Vizsgálatindító megbeszélésVizsgálatindító megbeszélés
►A tervezési szakasz elején és nem a végénA tervezési szakasz elején és nem a végén
►Az ellenőrzöttek lehetőséget kapnak aAz ellenőrzöttek lehetőséget kapnak a
javaslattételre (ráirányíthatják a figyelmet azjavaslattételre (ráirányíthatják a figyelmet az
általuk kockázatosnak ítélt területekre)általuk kockázatosnak ítélt területekre)
►A vizsgálatA vizsgálat célcéljának tisztázása, azjának tisztázása, az
ellenőrzöttek informálása annak érdekében,ellenőrzöttek informálása annak érdekében,
hogy felkészüljenek a vizsgálatrahogy felkészüljenek a vizsgálatra
►Személyes kapcsolatSzemélyes kapcsolat
►Esetleges félreértések tisztázásaEsetleges félreértések tisztázása
15. Helyszíni ellenőrzésHelyszíni ellenőrzés
►GAO: nem szeparálja el egymástól élesen a tervezési ésGAO: nem szeparálja el egymástól élesen a tervezési és
helyszíni ellenőrzés szakaszáthelyszíni ellenőrzés szakaszát
►Tervezés és interjúk párhuzamosan: információkTervezés és interjúk párhuzamosan: információk
visszacsatolása a tervezésbevisszacsatolása a tervezésbe
Lásd: Projekt TervLásd: Projekt Terv
Tervezési szakaszTervezési szakasz: 2009. dec.1-től 2010. május 13-ig (5 hó): 2009. dec.1-től 2010. május 13-ig (5 hó)
Audit interjúk az ellenőrzötteknél már ez idő alatt.Audit interjúk az ellenőrzötteknél már ez idő alatt.
Tervezési Mátrix elkészítésének határideje: 2010.április 30.Tervezési Mátrix elkészítésének határideje: 2010.április 30.
„„Helyszíni ellenőrzés”: 2010. május 3-tól szeptember 10-ig.Helyszíni ellenőrzés”: 2010. május 3-tól szeptember 10-ig.
16. Záró megbeszélés(Exit conference)Záró megbeszélés(Exit conference)
► A számvevőszéki jelentés első (draft) változataA számvevőszéki jelentés első (draft) változata
elkészülését követően tartják;elkészülését követően tartják;
► Célja: annak biztosítása,hogy a SzámvevőszékCélja: annak biztosítása,hogy a Számvevőszék
megállapításai helytállóak, pontosak, aktuálisak ésmegállapításai helytállóak, pontosak, aktuálisak és
megfelelően alátámasztottak;megfelelően alátámasztottak;
► Időt, energiát takarít meg vele mindkétIdőt, energiát takarít meg vele mindkét
fél;Esetleges félreértések tisztázása;fél;Esetleges félreértések tisztázása;
► A megbeszélést követően a SzámvevőszékiA megbeszélést követően a Számvevőszéki
jelentés a meetingen elhangzottakkaljelentés a meetingen elhangzottakkal
összhangban módosításra kerül majdösszhangban módosításra kerül majd egyszeriegyszeri
30 napos észrevételezésre30 napos észrevételezésre kiküldik;kiküldik;
17. Stratégiai Tervezés és szervezeti felépítésStratégiai Tervezés és szervezeti felépítés
összhangjaösszhangja
Stratégiai TervStratégiai Terv célkitűzéscélkitűzéseihez igazodik aeihez igazodik a
szervezeti felépítésszervezeti felépítés
I.I. Időbeni és minőségi szolgáltatás nyújtása a kormánynak azIdőbeni és minőségi szolgáltatás nyújtása a kormánynak az
állampolgárok jóléte és pénzügyi biztonságára hatással lévőállampolgárok jóléte és pénzügyi biztonságára hatással lévő
aktuális és erősödő kihívások tekintetébenaktuális és erősödő kihívások tekintetében
II.II. Válaszolni a változó biztonsági fenyegetésekre és a globálisVálaszolni a változó biztonsági fenyegetésekre és a globális
egymásrautaltság kihívásairaegymásrautaltság kihívásaira
III.III. Segíteni a Kormányt a nemzeti kihívásokhoz valóSegíteni a Kormányt a nemzeti kihívásokhoz való
alkalmazkodásbanalkalmazkodásban
IV.IV. Maximálni a Számvevőszék által létrehozott értéket aMaximálni a Számvevőszék által létrehozott értéket a
Kongresszusnak nyújtott minőségi, időbeni szolgáltatásokKongresszusnak nyújtott minőségi, időbeni szolgáltatások
biztosításával és a legjobb gyakorlatot képviselőbiztosításával és a legjobb gyakorlatot képviselő
kormányzati intézménnyé válnikormányzati intézménnyé válni
18.
19.
20. Highlight page- 1 oldalas összefoglalóHighlight page- 1 oldalas összefoglaló
Jelentés címe, amely magában foglalja a fő javaslatot vagy aJelentés címe, amely magában foglalja a fő javaslatot vagy a
jelentés legfőbb megállapítását, üzenetét;jelentés legfőbb megállapítását, üzenetét;
A „Miért, mely okból készült a jelentés”(„Why GAO did thisA „Miért, mely okból készült a jelentés”(„Why GAO did this
study”) rész tartalmazza a felkérést (ha volt ilyen) és a vizsgálatstudy”) rész tartalmazza a felkérést (ha volt ilyen) és a vizsgálat
célkitűzéseit (általában 3 cél,=vizsgálati kérdés van);célkitűzéseit (általában 3 cél,=vizsgálati kérdés van);
Főbb megállapítások („What GAO found”) rész az ellenőrzés -Főbb megállapítások („What GAO found”) rész az ellenőrzés -
az előző részben említett- célkitűzéseinek megfelelőaz előző részben említett- célkitűzéseinek megfelelő
sorrendjében, azzal teljes összhangban tartalmazza a feltártsorrendjében, azzal teljes összhangban tartalmazza a feltárt
tényeket;tényeket;
Javaslatok: szintén azonos sorrendben, a célkitűzésekkel ésJavaslatok: szintén azonos sorrendben, a célkitűzésekkel és
megállapításokkal; A GAO, amennyiben úgy ítéli meg, hogy azmegállapításokkal; A GAO, amennyiben úgy ítéli meg, hogy az
nem szükséges nem minden megállapítás esetében tesznem szükséges nem minden megállapítás esetében tesz
javaslatot.javaslatot.
Kontaktszemély elérhetősége; (általában a vizsgálatvezető)Kontaktszemély elérhetősége; (általában a vizsgálatvezető)
Figyelemfelkeltő kép, diagram stb., amely alátámasztja aFigyelemfelkeltő kép, diagram stb., amely alátámasztja a
jelentés megállapítását; elősegíti a jelentés lényegijelentés megállapítását; elősegíti a jelentés lényegi
mondanivalójának, üzenetének a közvetítését;mondanivalójának, üzenetének a közvetítését;
21. Megállapítások alátámasztottságának 4Megállapítások alátámasztottságának 4
elemeeleme
1)1) kritérium: aminek lennie kellene, akritérium: aminek lennie kellene, a
tervezett, vagy ideális állapot (criteria)tervezett, vagy ideális állapot (criteria)
2)2) alapvető helyzet megállapítása (condition)alapvető helyzet megállapítása (condition)
3)3) ok, ami miatt kialakult a helyzet, ami miattok, ami miatt kialakult a helyzet, ami miatt
eltérés van a tényleges és aeltérés van a tényleges és a
tervezett/ideális állapot között (cause)tervezett/ideális állapot között (cause)
4)4) hatás: mi az eltérés hatása, mithatás: mi az eltérés hatása, mit
eredményez a kívánatos állapottól valóeredményez a kívánatos állapottól való
eltérés (effect)eltérés (effect)
30. BevezetőBevezető Eredmények röviden Háttér információkEredmények röviden Háttér információk
képet ad a jelentés
céljáról
általában 3 célkitűzés
van
Összefoglalja a célokra
adott válaszokat és
megállapításokat a célok
sorrendjében
Felkészíti az olvasót a
javaslatokra
Tömör információ a
megállapítások
értelmezéséhez
31. Megállapítások:
részletezi az Eredmények röviden rész tartalmát ugyanabban a sorrendben
A Tervezési Mátrixban meghatározott célok, vizsgálati kérdésekre, al-kérdésekre
adott válaszok ugyanabban a sorrendben
32. Következtetések Javaslatok Ellenőrzöttek észrevételei
Logikailag követi a
megállapítások sorrendjét:
célkitűzések-
megállapítások-
következtetések-
javaslatok
Megvilágítja a
megállapítások
fontosságát
Összefoglalja az
ellenőrzött intézmény
észrevételeinek lényegét
és hangvételét
Ha szükséges cáfolatot
is tartalmaz
Nem minden
megállapítás nyomán
van javaslat.
33. Nonfinacial
benefits/Nem
pé nzügyi
hatások
Nonfinacial
benefits/Nem
pé nzügyi
hatások
Financial
benefits;
Pé nzügyi hatások
Financial
benefits;
Pé nzügyi hatások
Leading, recognizing,
and listening to staff/
Vezeté s, elismeré s é s
a munkaerő
vé lemé nyé nek
figyelembevé tele
Leading, recognizing,
and listening to staff/
Vezeté s, elismeré s é s
a munkaerő
vé lemé nyé nek
figyelembevé tele
Attracting
and retaining
staff/
Munkaerő
vonzása é s
megtartása
Attracting
and retaining
staff/
Munkaerő
vonzása é s
megtartása
Getting work
Done/
munkavé gz
é s
körülmé nyei
Getting work
Done/
munkavé gz
é s
körülmé nyei
Quality of work
life /
Munkakörülmé nyek
min sé geő
Quality of work
life /
Munkakörülmé nyek
min sé geő
Testimonies
/
kongresszu
si
beszámoló
Testimonies
/
kongresszu
si
beszámoló
Timeliness/
Id szer séő ű
g
Timeliness/
Id szer séő ű
g
Developing,
supporting,
and using staff/
a munkaerő
„fejleszté se”,
támogatása é s
tudásuk
hasznosítása
Developing,
supporting,
and using staff/
a munkaerő
„fejleszté se”,
támogatása é s
tudásuk
hasznosítása
GAO’s Performance Measurement
Strategy/
GAO teljesítmé ny mé ré si
straté giájaClient/
Ügyfé l
People/
Munkaerő
Internal
Operations/Belső
m ködé sű
Results/
Eredmé nye
k
Past
recommendations
implemented/
Javaslatok
teljesülé se
Past
recommendations
implemented/
Javaslatok
teljesülé se
Products with
recommendations/
Javaslatokat
tartalmazó
jelenté sek
Products with
recommendations/
Javaslatokat
tartalmazó
jelenté sek
34. Toward a Balanced PerformanceToward a Balanced Performance
ScorecardScorecard (kiegyensúlyozott stratégiai(kiegyensúlyozott stratégiai
mutatószám-rendszer)mutatószám-rendszer)
►Egy átfogó perspektívát kínálEgy átfogó perspektívát kínál
►Nemcsak a pénzügyi adatokra koncentrálNemcsak a pénzügyi adatokra koncentrál
►Elősegíti, hogy a szervezet a legfontosabbElősegíti, hogy a szervezet a legfontosabb
célokra fókuszáljoncélokra fókuszáljon
►Jövőképet kínál, amely munkatársakat aJövőképet kínál, amely munkatársakat a
szervezeti célkitűzések elérésére sarkalljaszervezeti célkitűzések elérésére sarkallja
►Megmutatja a fejlődés, fejlesztések irányátMegmutatja a fejlődés, fejlesztések irányát
35. Eredmények: PénzügyiEredmények: Pénzügyi
hatásokhatások
39,6
51
45,9
58,1
42 43 42
0
10
20
30
40
50
60
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
$Billions
Mennyit takarított meg a kormány a Számvevőszék ellenőrzéseinek eredményeként?
GAO adat 2009-ben: minden általuk elköltött $ 80$ hasznot hozott az államnak (ROI)
36. Eredmények: Nem-pénzügyi hatásokEredmények: Nem-pénzügyi hatások
1 409 1 342 1 354 1 398
1 200
1 315
1 200
0
150
300
450
600
750
900
1 050
1 200
1 350
1 500
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Number
Pl.: jogszabályok változása, közszolgáltatások fejlesztése, minisztériumok és egyéb
közintézmények megfelelő menedzsmentjének támogatása
37. Javaslatok végrehajtása %Javaslatok végrehajtása %
85 82 82 83 80 80 80
0
20
40
60
80
100
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Percent
Az indikátor mé ri 4 é vre visszamen leg a megtett javaslatok teljesülé sé t az adottő
pé nzügyi é vben
40. Aktualitás/IdőszerűségAktualitás/Időszerűség %%
92 93 95 95 95 95 95
0
20
40
60
80
100
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Percent
Az adatokat az ügyfelek (képvisel k)elektronikus kérd íves elégedettségő ő
felmérésével gy jtötték beű
41. Új munkaerőÚj munkaerő
94 94 96 96 95 99 95
0
20
40
60
80
100
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Percent
Felvett munkatársak száma a tervezetthez ké pest %
42. Megtartási rátaMegtartási ráta
Ha invesztálunk a munkaerőbe akkor szeretnénk megtartani!
FY 05FY 05
ActualActual
FY 06FY 06
ActualActual
FY 07FY 07
ActualActual
FY 08FY 08
ActualActual
FY 09FY 09
TargetTarget
FY 09FY 09
ActualActual
FY 10FY 10
TargetTarget
90%90% 90%90% 90%90% 90%90% 90%90% 94%94% 90%90%
94%94% 94%94% 94%94% 93%93% 94%94% 96%96% 94%94%
Nyugdíjazáss
al együtt
Nyugdíjazás
né lkül
43. Munkaerő képzéseMunkaerő képzése
76 76 77 76 79 76
0
20
40
60
80
100
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Percent
É ves felmérés/kérd ív a munkatársak között a (1)küls tréningek, konferenciák és a (2)belső ő ő
továbbképzések pozitív vagy negatív hatásairó l a munkavégzés tekintetében.
(1) external training and conferences and (2) on-the-job training had on the staff’s ability to
do their jobs during the last 12 months.
44. Staff UtilizationStaff Utilization/Munkaerő képességeinek/Munkaerő képességeinek
hatékony felhasználásahatékony felhasználása
75 75 73 75 75 78 75
0
20
40
60
80
100
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Percent
Kérd íves felmérés kérdéseire adott válaszok alapjánő (1) a munkám során megfelel en tudtamő
használni a szaktudásomat, képességeimet (2) GAO lehet séget biztosított megfelel szintő ő ű
kreatív munkavégzésre (3)Általában a „tudás-kihasználtságot” hatékonynak érzem
The survey questions we used for this measure ask staff how often the following occurred in the
last 12 months: (1) my job made good use of my skills; (2) GAO provided me with opportunities to
do challenging work; and (3) in general, I was utilized effectively. Favorable responses were either
“very positive impact” or “generally positive impact.”
45. Effective Leadership by SupervisorsEffective Leadership by Supervisors//
Hatékony menedzsment, vezetésHatékony menedzsment, vezetés
80 79 79 81 80 83 80
0
20
40
60
80
100
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Percent
A mér szám a munkaer kérd ívre adott válaszain alapul: Hogyan értékelik vezet jüket képes-ő ő ő ő
e a team tagjait motiválni,a bizalmat er síteni, a feladatokat delegálni, elismerni a jó munkát,ő
döntésképes-e, példamutató , el segíti-e a pozitív munkahelyi légkörtő
This measure is based on staff’s favorable responses to questions related to their immediate
supervisor’s ability to empower staff, trust, recognize good work, be decisive, lead by example,
and promote a positive work environment.
46. Munkahelyi légkörMunkahelyi légkör
76 73 74 77 75 79 75
0
20
40
60
80
100
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Percent
Ez a felmérés bemutatja, hogy a munkatársak mennyire értenek vagy nem értenek
egyet a következ állításokkal: (1) együttm ködési készség és team munka jellemzi aző ű
osztályomat (2)korrekten és tisztelettel kezelnek a kollégák (3)a munka morálom jó (4)
kikérik a véleményünket (5) általában elégedett vagyok a munkámmal
/(1) a spirit of cooperation and teamwork exists in my work unit; (2) I am treated fairly
and with respect in my work unit; (3) my morale is good; (4) sufficient effort is made in
my work unit to get the opinions and thinking of people who work here; and (5) overall,
I am satisfied with my job at GAO.
47. Internal Operations: Getting Work DoneInternal Operations: Getting Work Done
/Belső működés: munkavégzés/Belső működés: munkavégzés
4,1 4,1 4,05 4 4 4,03 4
0
1
2
3
4
5
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Scale
Az indikátor a számvev i munkát végz k értékelését mutatja 1-t l 5-ig skálán a 19 háttér-ő ő ő
szolgáltatást illet en beleértve az internet, intranet, IT szolgáltatást, postázást /ő This measure
reflects staff’s rating on a scale of 1 (low) to 5 (high) for 19 services that help employees get their
jobs done which include Internet and intranet services, IT customer support, mail services, and
voice communication.
48. Internal Operations: Quality of Work LifeInternal Operations: Quality of Work Life//
Belső működés: munkakörülmények minőségeBelső működés: munkakörülmények minősége
Ez az indikátor számvev k általi értékelését mutatja 12 háttér-szolgáltatásnak, amelyekő
befolyásolják a munka min ségét beleértve a bérezés, juttatások rendszerét, bérszámfejtés,ő
épület karbantartását, biztonsági szolgálat, munkahelyi biztonság és egészségügyi
szolgáltatások/ This measure reflects staff’s rating on a scale of 1 (low) to 5 (high) for 12
services that effect quality of work life which include assistance related to pay and benefits,
building maintenance and security, and workplace safety and health.
3,98 4 3,98 4,01 4 4,01 4
0
1
2
3
4
5
2005
Actual
2006
Actual
2007
Actual
2008
Actual
2009
Target
2009
Actual
2010
Target
Fiscal Year
Scale
GAO’s Annual Performance Measurement Structure
For many years, GAO has chosen to track certain aspects of our work and those indicators of our performance have evolved and changed over time.
We currently have 15 performance measures organized into four categories:
Results (4)
Client (2)
People (7)
Internal Operations (2)
To ensure that our performance measures remain sound and relevant, the Inspector General (IG) periodically reviews them on a rotating basis;
The IG may test, for example, a measure for compliance with policies and procedures and examine the transparency of our reporting (data limitations, recalculations)
We call this our “balanced scorecard” because these measures
give us, the Congress, and the public a comprehensive assessment of how well the agency is performing in multiple key areas
supplement information about our financial and budget data and systems
every year we develop a budget for the coming fiscal year and prepare financial statements for the past fiscal year for review by an independent auditor to
help the agency focus on activities that are most important to us and our client (the Congress) and that support our broad strategic goals that include
(1) providing objective, nonpartisan, accurate information to the Congress and the public and
(2) ensuring that we are a world-class professional services organization and employer
provide performance targets that serve as directions for improvement
help to guide staff behavior towards shared agency goals and objectives
Every year in our performance and accountability report we present current fiscal year and trend data on our results and other measures as well as other analyses of our performance. We also describe the kind of work that helped us to achieve or exceed the targets during the past fiscal year.
Results Measures
Financial benefits and nonfinancial benefits serve as our primary outcome measures; two “pipeline” measures—past recommendations implemented and new products with recommendations—complete this set of measures. Financial and Nonfinancial benefits
Financial and nonfinancial benefits result from GAO recommendations implemented by federal agencies and the Congress; recommendations result from many of our performance audits and financial audits
We use financial benefits and nonfinancial benefits as indicators of our ability to enhance the economy, efficiency, ethics, equity, and effectiveness of the federal government
Our financial benefits helped us to achieve a return on investment in fiscal year 2009 of $80 for every dollar we spent
Financial benefits
We have developed a processes for identifying benefits and documenting those that we can quantify that we describe in detail in our full FY 09 P&A report on pp. 79-80.
Nonfinancial Benefits Many of the benefits that result from our work cannot be quantified.
We document and count the number of nonfinancial benefits.
Like financial benefits, our nonfinancial benefits help to
change laws or regulations, / jogszabályváltozások
improve service delivery to the public, and/or – a közszolgáltatások fejlesztésének elősegítése
promote sound agency and governmentwide management- minisztériumok és egyéb közintézmények megfelelő menedzsmentjének támogatása
Recommendations Implemented and Products with Recommendations
I call the measures past recommendations implemented and new products with recommendations “pipeline” measures because we could not realize financial and nonfinancial benefits if we did not
(1) track whether agencies and the Congress were actually implementing our recommendations and
(2) develop recommendations in most of our reports
Recommendations Implemented
This measure indicates the percentage of GAO recommendations made 4 years ago in GAO reports that agencies and/or the Congress implemented; for example, the data show that
80 percent of the recommendations we made in FY 2005 were implemented by FY 09; similarly,
83 percent of the recommendations GAO made in 2004 were implemented by FY 08.
Every year our staff track recommendations we made in our Recommendations Follow-up System to determine this.
Experience shows that it takes time for agencies/the Congress to implement recommendations; for example, of the more than 2,100 recommendations made in FY 2005 (in over 400 products), 13% were implemented by FY 06; 31% FY 07; 45% FY 08; 80% by end of FY 09
Products with Recommendations
We track the percentage of new written products we issue each year with recs because we want to encourage staff to develop recs that will result in financial and nonfinancial benefits
About 68 percent of the 576 written products we issued in FY 09 included recs; we issue over 1,200 products each year (can include, for example, chapter and letter reports, testimonies, oral briefings)
As you can see, not all of our products include recs and this is OK because the Congress sometimes just wants an informational report and it and the agencies find them just as useful as our products with recs. This measure allows us to respond to requests for informational reports.
Client Measures: Testimonies – the number of hearings at which our senior executives testify—reflects the importance and value of our institutional knowledge in assisting the Congress
We testify on a wide variety of issues such as
the auto industry bailout,
home loan foreclosures,
screening cargo on passenger aircraft,
the war in Iraq,
the influenza pandemic, and
The Recovery Act
Timeliness
The likelihood that our products will be used is enhanced if they are delivered when needed to congressional decision makers
We use our electronic client feedback survey to determine whether requesters of our testimonies and more significant written products believe these products were delivered on time
All testimonies and significant products meeting our criteria represented more than 50 percent of our congressionally requested work
In FY 2009 We used the client feedback survey as our primary timeliness measure for the first time in FY 2006, though we have collected data from the survey since FY 2004
Because the survey response rate is currently low—28 percent—we are trying new approaches to increase the response rate to our client feedback survey
Encouraging our directors to discuss the survey with our clients when they are about to deliver the product
Following up electronically with congressional staff who haven’t responded
We also supplement these measures with feedback from our clients via
The Comptroller General’s discussions with congressional Leadership and Members
Continuous outreach to congressional committees talk with our clients frequently about whether our products are meeting their needs
In addition, we track internally the proportion of our products that are issued by the date agreed to with our clients
People Measures
indicate how well we are attracting , retaining, and developing high-quality staff
the first 3 measures in this group (new hire rate and retention rate with and without retirements) are based on information from an external database that handles the payroll and personnel data for GAO and other federal agencies
New Hire Rate
This measure is the ratio of the number of people GAO hired to the number we planned to hire
Our annual workforce plan, approved by the Executive Committee, specifies the number of planned hires for the upcoming year
Each year we develop a workforce plan that considers our strategic goals, project workload changes such as attrition, promotions, and skill needs
CAO uses its own database along with the external database I mentioned earlier, to track progress in meeting our hiring targets and the number of new hires
Retention Rate:This measure indicators whether we are retaining the staff we choose to hire and invest our training dollars in
Retention data— the number of people on board at the beginning of the fiscal year compared with the number onboard at the end of the fiscal year—is maintained in GAO’s database
We exceeded our retention rate with and without retirements by 4 and 2 percentage points, respectively, possibly because of the economy, which encouraged some staff to delay retirement and slowed the number of staff transfers and resignations.
People Measures:The last four measures (staff development, staff utilization, leadership, and organizational climate) are based on the responses to selected questions from our annual employee feedback survey
Staff Development
Based on responses to 3 of 6 survey questions related to staff development
In part, a measure of how much positive or negative impact (1) external training and conferences and (2) on-the-job training had on the staff’s ability to do their jobs during the last 12 months.
In FY 2006 we changed the way we calculated this measure (We dropped a separate question related to computer-based training because we felt it was covered in other questions.) Thus, we did not include FY 2005 data on this chart because these data are not comparable to the data shown for subsequent years.
Staff Utilization
Based on responses to 3 of 6 survey questions related to how well staff believe their skills were used.
Effective Leadership by Supervisor
Based on responses to 10 of 20 survey questions about a respondent’s immediate supervisor and his/her ability to empower, trust, recognize good performance, be decisive, and lead by example.
Organizational Climate
Based responses to 5 of 13 survey questions related to how well GAO/unit is creating a positive, motivating work environment that affects staff morale and job satisfaction.
Internal Operations Measures:indicate how well our internal operations help our employees do their jobs and improve their work lives
help us to improve GAO’s business and management processes
are based on results from our annual customer satisfaction survey of employees that asks them to rate on a 5-point scale their experiences and satisfaction with certain services and work life areas
were added to our balanced scorecard of performance measures in fiscal year 2006, though we have been collecting baseline data since 2003
Getting Work Done
Confidential survey administered by a contractor asks employees to rate 19 work-related services (e.g., IT support, report production, travel, procurement)
The contractor collects the information and analyzes the data
Quality of Work Life
Confidential survey administered by a contractor asks employees to rate 12 quality of work life areas (e.g., building maintenance, employee benefits assistance, and parking)