This learning tool was created in the framework of the Erasmus+ TOTVET project financed with the support from the European Commission.

1. Moduł IV: Monitorowanie i ocena
PreparingTutorsfor
WorkBasedLearning
Developed in the framework of the Erasmus+ Project 2018-1-RO01-KA202-049191
TOTVET - Training of Tutors and VET professionals for high quality in Work
Based Learning and Dual Learning
This publication reflects the views only of the author, and the Commission cannot be held
responsible for any use which may be made of the information contained therein. 1
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

2. Streszczenie
Wykorzystując to narzędzie, będziesz mógł:
Nauczyć się
 wdrażać plan monitorowania i oceny, który zaprojektowałeś
i opracowałeś we wcześniejszych fazach przygotowywania
szkolenia
Zrozumieć
 szkolenie i uczenie się na temat monitorowania i oceny
TOTVET - Training of Tutors and VET professionals for high quality in Work Based Learning and Dual Learning 2

3. Będzie możliwe
stosowanie samooceny w mierzeniu umiejętności
przed i po treningu (doskonalenie umiejętności
i efektywność treningu)
https://drive.google.com/open?id=1d-
zERADUfMScd9ZWtaL64SDtal9h3CX4
3TOTVET - Training of Tutors and VET professionals for high quality in Work Based Learning and Dual Learning

4. STRESZCZENIE
Główne kwestie
1. Ocena szkolenia
2. Określenie postępu w oparciu o samoocenę
3. Badania ewaluacyjne szkolenia
4
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

5. Ocena szkolenia
Istnieją dwa główne elementy, które należy rozważyć:
 Kto jest odpowiedzialny za procesy walidacji i oceny?
 Jakie zasoby czasu, ludzi i pieniędzy są dostępne do celów
walidacji i oceny? (W tym przypadku weź pod uwagę wpływ
zmienności na nie. Na przykład nieoczekiwane cięcie budżetu
lub siły roboczej. Innymi słowy, przewiduj i planuj
nieprzewidziane wydatki na radzenie sobie ze zmianami).
5
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

6. Pomiar poprawy w oparciu o samoocenę
 Umiejętność „wstępnie wyszkolona” to ponowna ocena, którą należy
przeprowadzić po treningu na poziomie umiejętności istniejącym przed
treningiem.
 Zazwyczaj będzie się to znacznie różnić od oceny umiejętności nabytej przed
szkoleniem, ponieważ z tego powodu nie w pełni rozumiemy kompetencje
i umiejętności w zakresie obszaru danych umiejętności zanim nie zostaniemy
w nim przeszkoleni.
 Ludzie często przeceniają swoje umiejętności przed treningiem. Po szkoleniu
wiele osób zdaje sobie sprawę, że faktycznie posiadało niższe kompetencje niż
początkowo sądzono (tj. przed szkoleniem).
 Należy na to pozwolić, próbując zmierzyć rzeczywistą poprawę za pomocą
samooceny. Jest to powód do ponownego przeglądu (po treningu) wstępnie
wyszkolonej oceny umiejętności.
 Ponadto, w wielu sytuacjach po szkoleniu, ludzkie kompetencje w danej
dziedzinie/umiejętności mogą się znacznie poszerzyć. Uczestnicy zdają sobie
sprawę, jak duży i złożony jest przedmiot, i stają się bardziej świadomi swoich
rzeczywistych zdolności i możliwości poprawy.
6
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

7. Ogólne obowiązki trenera - oprócz oceny szkolenia
 Z biegiem lat role trenera zmieniły się, ale podstawowym celem trenera jest zapewnienie
wydajnych i skutecznych programów treningowych. Poniżej przedstawiono elementy podstawowej
roli trenera. Należy jednak pamiętać, że różne okoliczności będą wymagać modyfikacji tych
działań.
1. Podstawową rolą trenera jest oferowanie i zapewnianie wydajnych i skutecznych programów
szkoleniowych, które mają umożliwić uczestnikom zdobycie wiedzy, umiejętności oraz postaw.
2. Trener planuje i projektuje programy szkoleniowe lub w inny sposób uzyskuje je
(na przykład programy nauczania na odległość lub e-technologie w Internecie lub na płycie
CD/DVD), zgodnie z wymaganiami określonymi na podstawie wyników TNIA (Analiza i ocena
potrzeb szkoleniowych lub po prostu TNA, Analiza potrzeb szkoleniowych) dla odpowiedniego
personelu organizacji.
3. Programy szkoleniowe wymienione w punktach 1 i 2 muszą całkowicie opierać się na metodzie,
która została: (a) ukończona przez trenera w imieniu i na wniosek odpowiedniej organizacji (b).
4. Po rozmowie z kierownictwem organizacji, które weźmie pod uwagę koszty i wartości (np. ROI -
zwrot z inwestycji w szkolenie), trener uzgodni z kierownictwem organizacji najbardziej
odpowiednią formę i metody szkolenia.
5. Jeśli odpowiednią formą zaspokojenia potrzeby szkoleniowej jest bezpośredni kurs szkoleniowy
lub warsztat lub program dostarczony przez Intranet, trener zaprojektuje ten program przy użyciu
najbardziej skutecznych metod oraz technik i integrując w bezpośrednie praktyki z różnymi
formami e-technologii wszędzie tam, gdzie jest to możliwe lub pożądane.
7
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

8. 6. Jeśli odpowiednią formą zaspokojenia potrzeby szkoleniowej jest jakaś forma
otwartego programu edukacyjnego lub programu e-technologii, trener, przy wsparciu
kierownictwa organizacji, planuje jej wykorzystanie i jest przygotowany do wspierania
ucznia w korzystaniu z odpowiednich materiałów.
7. Trener, po kontakcie z potencjalnymi uczniami, najlepiej za pośrednictwem
kierowników liniowych, w celu poszukiwania działań przedprogramowych
i/lub działań w zakresie oceny początkowej, powinien zapewnić odpowiednie
programy szkoleniowe uczniom.)
8. W trakcie i na końcu programu trener powinien upewnić się, że:
(a) przestrzegana jest skuteczna forma walidacji szkolenia/uczenia się
(b) uczniowie wypełniają plan działania w celu wdrożenia ich nauki po powrocie do
pracy.
9. W razie potrzeby, po zapoznaniu się z wynikami walidacji, przedstaw analizę zmian
wiedzy, umiejętności i postaw uczniów w stosunku do kierownictwa organizacji, z
wszelkimi zaleceniami uznanymi za niezbędne. Przegląd obejmowałby rozważenie
skuteczności treści programu oraz skuteczności metod zastosowanych w celu
umożliwienia uczenia się, to znaczy, czy program spełniał cele programu i cele
uczniów.
10. Kontynuuj zapewnianie efektywnych możliwości uczenia się zgodnie
z wymaganiami organizacji.
11. Należy umożliwić własne CPD (Ciągłe Doskonalenie Zawodowe) wszystkimi
możliwymi środkami rozwojowymi - programami szkoleniowymi i metodami
samorozwoju.
12. Zorganizuj i poprowadź warsztaty edukacyjne dla kierowników liniowych na temat
wykonywania przez nich obowiązków szkoleniowych i ewaluacyjnych.
8
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

9. Badania ewaluacyjne szkolenia
 Oto wiele różnych sposobów oceny szkolenia oraz uczenia się.
 Pamiętaj, że ewaluacja jest również dla szkolonego - ewaluacja
nie jest tylko dla trenera lub organizacji.
 Informacje zwrotne i wyniki testów pomagają szkolonemu
dowiedzieć się, gdzie się znajduje, i bezpośrednio wpływają na
zaufanie szkolonego i jego determinację do kontynuowania rozwoju
- w niektórych przypadkach wraz z własnym przyszłym rozwojem
osobistym.
 Kluczowe znaczenie dla poprawy szkolenia i uczenia się ma kwestia
nadania większego sensu i celu w ich życiu, a nie tylko skupienie
się na umiejętnościach i rozwoju oraz szkoleniach związanych
z pracą.
 Uczenie się i szkolenie umożliwia pozytywne zmiany i ulepszenia -
dla ludzi i pracodawców - gdy praca ludzi jest dostosowana do życia
ludzi - ich mocnych stron, potencjału osobistego, celów i marzeń -
zarówno poza pracą, jak i w pracy.
9
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

10.  Ocena szkolenia może być skuteczna tylko wtedy, gdy samo
szkolenie jest skuteczne i odpowiednie. Testowanie
niewłaściwych rzeczy w niewłaściwy sposób dostarczy Ci
nieprzydatnych danych, a tym samym może być jeszcze
bardziej nieprzydatne dla uczniów.
 Przy ocenie rozwoju osobistego należy wziąć pod uwagę
style uczenia się. Style uczenia się są zasadniczo
perspektywą preferowanych przez ludzi stylów pracy,
myślenia i komunikacji. Testy pisemne nie pozwalają
wszystkim typom ludzi wykazać się swoimi
kompetencjami.
 Ocena zachowania wiedzy jest bardzo ograniczoną formą
oceny. Nie będzie wskazywać, jak dobrze ludzie
wykorzystują swoją naukę i rozwój w praktyce.
10
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

11. Jak rozwijasz system monitorowania i oceny?
KROKI
 Krok 1: Zidentyfikuj cele i zadania programu.
 Krok 2: Zdefiniuj wskaźniki.
 Krok 3: Zdefiniuj metody gromadzenia danych i oś czasu.
 Krok 4: Zidentyfikuj role i obowiązki związane z M&E.
 Krok 5: Utwórz plan analizy i raportowanie
 Krok 6: Zaplanuj rozpowszechnianie i raportowanie
11
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

12. Krok 1: Zidentyfikuj cele i zadania programu
Pierwszym krokiem do stworzenia planu M&E jest
identyfikacja celów programu. Jeśli program ma już model
logiczny
https://drive.google.com/open?id=1XPNGAHZt3HWA6rCxEP
q62Q3_dSE5qCj9
lub teorię zmiany, wówczas cele programu są
najprawdopodobniej już zdefiniowane. Jeśli nie, plan M&E to
świetne miejsce na rozpoczęcie.
Zidentyfikuj cele programu.
Zdefiniowanie celów programu rozpoczyna się od udzielenia
odpowiedzi na trzy pytania:
1. Jaki problem próbuje rozwiązać program?
2. Jakie kroki są podejmowane w celu rozwiązania tego
problemu?
3. Skąd osoby zaangażowane w program dowiedzą się, kiedy
program skutecznie rozwiązał problem?
12
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

13. Krok 2: Zdefiniuj wskaźniki
Po zdefiniowaniu celów programu nadszedł czas, aby zdefiniować
wskaźniki do śledzenia postępów w osiąganiu tych celów.
Wskaźniki programu powinny być mieszanką tych, które mierzą
proces lub tego, co jest wykonywane
w programie, i tych, które mierzą wyniki.
Wskaźniki procesu śledzą postęp programu.
https://drive.google.com/open?id=1KHFmVc9dzTZAv6aozqqdwG1
zhn8gD1GR
Pomagają odpowiedzieć na pytanie: „Czy działania są wdrażane
zgodnie z planem?” Niektóre przykłady wskaźników procesu to:
1. Liczba szkoleń przeprowadzonych w przedsiębiorstwie
2. Liczba działań informacyjnych prowadzonych
w miejscach przyjaznych młodzieży
13
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

14. Krok 3: Zdefiniuj metody gromadzenia danych i oś czasu
Po utworzeniu wskaźników monitorowania nadszedł czas,
aby zdecydować o metodach gromadzenia danych
i częstotliwości rejestrowania różnych danych w celu
śledzenia wskaźników. Powinna to być rozmowa między
pracownikami programu, interesariuszami i darczyńcami.
Metody te będą miały istotne implikacje
w zależności od tego, jakie metody gromadzenia danych będą
stosowane i w jaki sposób będą raportowane wyniki.
Źródło danych monitorowania zależy w dużej mierze od tego,
co każdy wskaźnik próbuje zmierzyć. Program będzie
prawdopodobnie potrzebował wielu źródeł danych, aby
odpowiedzieć na wszystkie pytania dotyczące
programowania. Poniżej znajduje się tabela przedstawiająca
kilka przykładów tego, jakie dane mogą być gromadzone
i jak.
14
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

15. Krok 4: Zidentyfikuj role i obowiązki M&E
Kolejnym elementem planu M&E jest sekcja dotycząca
ról i obowiązków. Ważne jest, aby na wczesnym etapie
planowania zdecydować, kto jest odpowiedzialny za
gromadzenie danych dla każdego wskaźnika.
Prawdopodobnie będzie to mieszanka pracowników
M&E, pracowników naukowych i pracowników
programu. Wszyscy będą musieli współpracować, aby
gromadzić dane dokładnie i terminowo.
15
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

16. Krok 5: Utwórz plan analizy i szablony
raportowania
Plan M&E powinien zawierać część ze szczegółami na
temat tego, jakie dane będą analizowane i jak
prezentowane będą wyniki. Czy personel badawczy musi
przeprowadzić testy statystyczne, aby uzyskać potrzebne
odpowiedzi?
16
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

17. Krok 6: Zaplanuj rozpowszechnianie i raportowanie
tych, którzy planują szkolenie
Plan M&E powinien obejmować plany wewnętrznego rozpowszechniania
wśród zespołu programowego, a także szerszego rozpowszechniania
wśród zainteresowanych stron i darczyńców. Na przykład zespół
programowy może chcieć przeglądać dane co miesiąc, aby podejmować
decyzje programowe i opracowywać przyszłe plany pracy, podczas gdy
spotkania z darczyńcą w celu przeglądu danych i postępów programu
mogą odbywać się co kwartał lub co rok. Rozpowszechnianie materiałów
drukowanych lub cyfrowych może następować częściej. Opcje te należy
omówić z zainteresowanymi stronami i zespołem w celu ustalenia
uzasadnionych oczekiwań dotyczących przeglądu danych i opracowania
planów rozpowszechniania na wczesnym etapie programu. Jeśli te plany
są gotowe od samego początku i stają się rutyną dla projektu, spotkania
i inne rodzaje okresowych przeglądów mają znacznie większą szansę na
bycie produktywnymi, na które wszyscy czekają.
17
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

18. Wnioski
 Po wykonaniu tych 6 kroków zarys planu M&E powinien wyglądać
następująco:
 Wprowadzenie do programu
 Cele i zadania programu
 Model logiczny/Struktura logiczna/Teoria zmian
 Wskaźniki
 Tabela ze źródłami danych, czasem zbierania i odpowiedzialnym pracownikiem
 Role i obowiązki
 Opis roli każdego zestawu w gromadzeniu, analizie i/lub raportowaniu danych
M&E
 Raportowanie
 Plan analiz
 Tabela szablonów raportowania
 Plan rozpowszechniania
 Opis, w jaki sposób i kiedy dane M&E korzystają z usług wewnętrznych
i zewnętrznych
18
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning

19. Trener
 Zapewnienie niezbędnej pracy przedprogramowej oraz
planowanie programu.
 Określenie na początku programu poziomu wiedzy
i umiejętności stażystów/szkolących się.
 Zapewnienie szkoleń i zasobów edukacyjnych, aby
umożliwić uczącym się naukę w ramach celów programu
i własnych celów.
 Monitorowanie uczenia się w miarę postępu programu.
 Pod koniec programu ocena i otrzymywanie raportów
od osób uczących się osiągniętych poziomów uczenia się.
 Zapewnienie opracowania przez szkolących się planu
działania w celu wzmocnienia, ćwiczenia i wdrożenia
uczenia się.
19
TOTVET - Training of Tutors and VET
professionals for high quality in Work Based
Learning and Dual Learning