SlideShare a Scribd company logo
1 of 18
Download to read offline
Opitaanko virheistä – tutkinta
oppimisen välineenä
Leena Norros
Turvallisuus ihmisten toimintana -seminaari
5.6.2014 Helsinki
VTT Technical Research Centre of Finland
Place for a photo
(no lines around photo)
211/06/2014 2
Johdanto
LÄHTÖKOHTAISESTI
Olisi outoa, totuuden vastaista tai vähintäänkin poleemista väittää, että virheistä ei
opita
Tutkinnan kautta myös muiden virheistä voidaan oppia
MUTTA
Merkit viittaavat kyllä siihenkin että oppiminen ei ole kovin tehokasta
TÄSSÄ ESITYKSESSÄ POHDITAAN
Miten turvallisuuskriittisessä ja vakiointia vaativassa työssä on mahdollista oppia
työssä - Esimerkkinä ohjeenkäyttötutkimus
Miten onnettomuustutkinnassa voitaisiin tuottaa oppimista paremmin edistävää
tietoa – Esimerkkinä luotsausonnettomuustutkimus
Mitä onnettomuustutkinnassa tulisi suositella ohjaavuuden lisäämisen sijaan
- Johtopäätöksiä edellisistä
311/06/2014 3
Pyrkimys vakiointiin vs. joustavuuden
salliminen
Turvallisuuskriittisessä työssä on tyypillistä tieto- ja viestintätekniikan
keinoin toteutettu kohteen automaattinen ohjaus ja monipuolinen
informaatiotarjonta kohteen tapahtumista
Työtä tukevat myös moninaiset turvallisuuden puolustusjärjestelmät:
Esim. turvallisuusperusteiset käytännöt ja työkulttuuri, säännökset
ja ohjeet, automaattiset turvatoiminnot, hätätilanneohjeet ja
hätäohjauspaikat, jne.
Näiden keinojen tavoite on vähentää järjestelmän toiminnan vaihtelua
ja pienentää epävarmuutta
MUTTA: Eri toimialoilta kertynyt kokemus osoittaa, että vakiointiin
pyrkivä turvallisuusajattelu on mennyt liian pitkälle: siitä ei ole lisähyötyä
tai se voi jopa olla haitallista (Bieder & Bourrier 2013, Amalberti 2006)
4
Standardisoinnin & ohjeistamisen
hyöty
Vakiointi
Standardisoinnin & ohjeistamisen
haitat
Joustavuus
Vakioinnin tuomaa
turvallisuutta ei haluta
korostaa joustavuuden
tuomien hyötyjen
kustannuksella.
Vakiointi jei tue
odottamattomien
tilanteiden hallintaa
Vakiointi vaikeuttaa
normaalityössä
oppimista
Automaation toiminnan
tulkintavaikeudet
Informatisoi, tallentaa ja
edistää oppimista
Ohjaa prosessin
turvalliseen tilaan
Vähentää stressiä ja
työkuormaa vaikeassa
tilanteessa
Tukee toimintojen
koordinointia ja
kommunikaatiota
Standardisointi ja ohjeohjaus turvallisuuden takaajina –
monimerkityksinen asia
511/06/2014 5
Vakiointistrategia heijastuu myös
onnettomuustukintaan ja tutkinnasta oppimiseen
Onnettomuusmalli:
Tilanne ja toiminta kuvataan tapahtumasarjana ja epäonnistumisina siinä
Oppiminen rajoittuu kyseiseen yksittäistapaukseen (Rasmussen &
Svedung 2000, Hollnagel 2002, Nuutinen & Norros 2009)
Tutkinnan johtopäätökset :
Kattava ja tiukka ohjeistaminen ja huippuunsa kehitetty turvatekniikka
johtavat tapahtumien selittämiseen ohjepoikkeamina => toimenpiteinä
ohjekuri ja ohjeenkäytön harjoittelu ja seurauksena ”oppimisansa”
(Rosness 2013)
Onnettomuusanalyysien on vaikea tuottaa yleistä näyttöä joustavuuden
myönteisistä turvallisuusvaikutuksista
611/06/2014 6
Väliyhteenveto
Kun työtä vakioidaan vahvasti
Joustavuus vähenee
Oppiminen vaikeutuu > molemmat vaarantavat turvallisuutta
Kun vakiointiajattelu myös tutkinnassa
Yleistäminen tutkinnasta ei tehokasta
Oppiminen vaikeutuu
Joustavuuden hyötyä vaikea havaita
> vaikutus turvallisuuden parantamiseen heikkenee
Mitä on tehtävä?
Normaalityön tutkimus turvallisuuden ja mahdollisen onnettomuuden
näkökulmasta
Onnettomuuksien tutkimus normaalityön näkökulmasta
711/06/2014 7
Miten turvallisuuskriittisessä ja vakiointia vaativassa
työssä on mahdollista varautua yllättäviin tilanteisiin ja
oppia työssä?
Keinoja joiden avulla ihmiset voivat lisätä järjestelmän kykyä
toimia turvallisesti eri tilanteissa, esim:
Skjerve et al. 2004) :
Varmistukset
Valpas (mindful) toimintatapa
Improvisointi
Furniss et al. 2011, Saurin et. Al, 2013
Käytäytymispiirteitä joilla voisi olla turvallisuutta ylläpitävä merkitys
Omissa tutkimuksissamme
Tunnistamme systemaattisemmin käytäntöjen erot ja työvälineiden
roolin niissä
Osoitamme konkreettisemmin turvallisuutta edistävän vaikutuksen ja
osoitamme kytkennän oppimiseen
811/06/2014 8
Tulkitseva toimintatapa lisää joustavuutta suhteessa
tilanteeseen ja edistää oppimista
Olemme pragmatistisen käytäntökäsitteen nojalla erotelleet kolme
erilaista tiedollis-toiminnallista suhdetta ympäristöön (Norros 2004)
Tulkitseva: kohdistuu tapahtumaan yksityisenä tapaukseen, josta luodaan
oletuksia ja testataan niitä ja rakennetaan yleistävää tulkintaa
=> tehokkain yllättävissä tilanteissa, tehokkain oppimisen kannalta =>
edistää parhaiten turvallisuutta
Toteava : kohdistuu tapahtumaan yleisenä luokittelemalla tapauksen,
vahvistaa oletuksia
Reaktiivinen: kohdistuu tapahtuman yksittäisiin piirteisiin, tilanne vie
Tätä tyypittelyä on käytetty analysoitaessa turvallisuuskriittisten
prosessien ohjaajien ohjeenkäyttöä (Savioja et al. 2014, Norros et al. 2014)
Ohjeorientaatiota l. omaksuttua käsitystä ohjeen roolista työssä ja
omassa toiminnassa
Ohjeiden todellista käyttöä simuloiduissa hätätilanteissa
Ohjesuunnittelijoiden ohjeorientaatiota
9
Heuristinen yhteenveto tuloksista
OHJEET
Suunnittelijoiden
tekeminä
ORIENTAATIO
työhön ja
ohjeisiin
TOIMINTATAVAT
ohjeohjatussa
hätätilanteen
hallinnassa
guide
express
Operaattorien käsitys
hyvästä toiminnasta ja
ohjeenkäytöstä työnsä
keskeisisissä tehtävissä
on vallitsevasti
tulkitseva
Viranomaisyhteisöjen ja
operoivien organisaatioiden
turvallisuusajattelussa
konfirmnatiivisuus on
korostunut
Monet ohjaajat toimivat
konfirmatorisella tavalla
Ohjesuunnittlelussa
operaattorityö käsitetään
tulkitsevalla tavalla mutta
itse ohjeenkäyttö
konfirmatiivisesti
(alustavia tuloksia)
1011/06/2014 10
Miten onnettomuustutkinnassa voitaisiin tuottaa
oppimista paremmin edistävää tietoa?
Esimerkkinä
luotsausonnettomuustutkimus:
Kohteena oli 10 luotsaustilanteessa
Suomen rannikkoväylillä sattunutta
merionnettomuutta (Norros et al. 2006)
Ne tulkittiin merkkinä vakavammista
turvallisuusongelmista
Kukin tapaus tutkittiin ja raportoitiin
erikseen
Lisäksi vertaileva ja yhteisiä selittävä
tekijöitä etsivä tutkimus
1111/06/2014 11
Käytäntönä ollut onnettomuustutkintamenettely
Noudatetaan systemaattisia menetelmiä, joita kehitetään yhdessä
kansainvälisten viranomaisjärjestöjen kanssa
Tähdätään tutkintaprosessin parempaan jäsentämiseen ja päättelyn
johdonmukaisuuden lisäämiseen (tutkinnan laatu)
Menetelmien käsitteelliseen perustaan ei ole kiinnitetty kovinkaan
paljon huomiota:
onnettomuustapahtuma ja
ihmisen toiminta osana tapahtumaa
1211/06/2014 12
Onnettomuusmallit (Hollnagel 2002)
Onnettomuus tapahtumasarjana
Syyketjun paljastaminen, syiden poistaminen
Fahlbruch (2000): monimutkaisia interaktioita vaikea kuvata
yksinkertaisina syy-seuraus -rakenteina
Reason (1998): ongelman korjaaminen aiheuttaa helposti uusia
ongelmia
Vaaratekijämallit
Myötävaikuttavat tekijät, suojaukset, Reason 1990
Svenson & Salo 2002, selitykset redusoituvat
Systeemimallit
Toiminnan rakentuminen, vaatimusten tasapainottelu, adaptiivisuus
Miten erottaa hyvä adaptaatio huonosta adaptaatiosta?
1311/06/2014 13
Käytetyn systeemisen tutkintamenetelmän periaatteet
1. Mallinnettava työ tasapainotettavien tavoitteiden ja toimialueen
ominaisvaatimusten näkökulmasta
2. Analysoitava onnettomuustapahtumat sekä kausaalisesta että
toimintatavalliselta, tekojen perustelujen näkökulmasta (ymmärtävä
selittäminen, toimintatavat)
3. Onnettomuuksissa mukana olleiden ihmisten käyttäytymistä on
tarkasteltava asia- ja toimintayhteydessään ja historiallisesti
14
Luotsausonnettomuustutkinnassa käytetty
menetelmä: proseduuri ja tulokset
Mitä? Tapahtumasarja ja
työn yleisten
vaatimustenmäärittely >
toimintatavan kriteerien
hahmotus
Miksi? Toimintajärjestelmän
jännitteet: turvallisuutta
uhkaavat tekijät ja
kehitysmahdollisuudet
Miten? Tilannetekijöiden
merkityksen arviointi ja niiden
huomioonotto onnettomuuden
aikaisessa työ- ja
yhteistyötavassa
Onnettomuuden
faktojen metsästys
Tutkittavan työn
perustehtävän
mallinnus
Toimintaedellytysten ja
tilannekohtaisten
vaatimusten arviointi
Tutkittavan työn
ymmärtäminen
toimintajärjestel-
mänä
Ihmisten toiminnan
säännönmukai-
suuksien kuvaus
Johtopäätösten ja
suositusten
laatiminen
1511/06/2014 15
Tulosten kiteytys
Perinteistä navigointitapaa muistuttavat piirteet edistävät toiminnan tilannekohtaista
joustavuutta;
MUTTA
Laivojen koko on suuri suhteessa väylien turvalliselle luotsaukselle asettamiin rajoihin
vaaditaan tarkempaa ajon suunnittelua
väyläsuunnitelmat ovat osittain puutteellisia
käännösten monitoroinnille ja yhteistyölle vaativissa ei muodostu todellisia
edellytyksiä.
=> painetta teknisesti välittyneen ja yhteistyöhön perustuvan navigointitavan
omaksumiseen
Navigointilaitteet ovat vaikeakäyttöisiä luotsauksen kannalta tärkeissä
suunnitteluoperaatioissa
=> vaikeuttavat tekniikan hyväksikäyttöä navigoinnissa
Ruorimiehiä ei käytetä / ei ole käytettävissä korvaamaan navigointivälineiden puutteita
1611/06/2014 16
Tutkintametodin suhteen tehdyt päätelmät
Metodi mahdollisti luotsiyhteisölle tyypillisten (toistuvien)
luotsauskäytäntöjen tunnistamisen, jotka selittivät onnettomuuksien
esiintymistä tutkituissa tilanteissa
Havainnot vastaavista käytännöistä normaalitilanteissa viittaavat riskiin
joutua onnettomuuteen
Puutteellisten käytäntöjen pysyvyyden syitä ja niiden kehityksen esteitä
saatiin esiin
Toimenpidesuositukset kohdistettiin näihin
(Norros et al. 2006, Norros & Nuutinen 2009)
1711/06/2014 17
Johtopäätöksiä
Yksittäistapahtumista yleistämistä on mahdollista ja tulisi kehittää
mallintamalla
saadaan esiin yleisiä turvallisuutta uhkaavia ja edistäviä tekijöitä
työtavoissa ja -kulttuurissa
saadaan konkreettisia aineksia koulutuksen ja työvälineiden
kehittämiseen ja suunnitteluun niin, että vakioinnin ja joustavuuden
balanssi toteutuu
Ohjeet ja teknologiset välineet ovat osa ihmisten toimintaa ja
osaamista – tutkinnan inhimillisten tekijöiden osuus ja tekninen tutkinta
tukemaan tosiaan
Ohjeistamista ja vakioimista ei tule vaatia erittelemättä - perehdyttävä
työn vaatimuksiin ohjaavuustasoa määriteltäessä
Myös normaalityön toimintatapojen tutkimusta ja kehittämistä pitäisi
korostaa suosituksissa
Edellä kuvattu lähestymistapa tukee myös toiminnan laadun ja
tehokkuuden parantumista, mikä motivoi organisaatioita kehittämiseen
1811/06/2014 18
Kirjallisuusviitteet
Amalberti, R. 2006. Optimum system safety and optimum system resilience: Agonistic or antagonistic concepts?
Resilience engineering. Concepts and percepts. Hollnagel, E., D. Woods and N. Leveson. Aldershot, Ashgate: 253-
271.
Bourrier, M. and Bieder, C. 2013. Trapping safety into rules: An introduction. Trapping safety into rules. How desirable
or avoidable is proceduralization. Bieder, C. and M. Bourrier. Farnham, UK, Ashgate: 1-9.
Furniss, D., Back, J., Blandford, A., Hildebrandt, M. and Broberg, H. 2011. A resilience markers framework for small
teams. Reliability Engineering and System Safety(96): 2-10.
Hollnagel, E. 2002. Understanding accidents - From root cause to performance variability. IEEE 7th Conference on
Human Factors and Power Plants, Scottsdale, Arizona.
Norros, L. 2004. Acting under Uncertainty. The Core-Task Analysis in Ecological Study of Work. Espoo, VTT, Available
also http://www.vtt.fi/inf/pdf/publications/2004/P546.pdf
Norros, L., Liinasuo, M. and Savioja, P. 2014. Operators’ orientations to procedure guidance in NPP process control.
Cognition, Technology & Work
Norros, L. and Nuutinen, M. 2009. Learning from accidents: Analysis of normal practices. Risky work environments -
Reappraising human work within fallible systems Owen, C., P. Béguin and G. Wackers. Farnham, England, Ashgate:
17-51.
Norros, L., Nuutinen, M. and Larjo, K. 2006. Luotsauksen toimintatavat ja kulttuuri onnettomuustapausten valossa.,
Helsinki., Accident Investigation Board Finland.
Nuutinen, M. and Norros, L. 2009. Core-Task Analysis in accident investigation - analysis of maritime accidents in
piloting situations. Cognition Technology and Work(11): 129-150.
Rasmussen, J. and Svedung, I. 2000. Proactive risk management in a dynamic society. Karlstad, Swedish Rescue
Services.
Rosness, R. 2013. The proceduralization of traffic safety and safety management in the Norwegian Rail Administration:
A comparative case study. Trapping safety into rules. How desirable or avoidable is proceduralization? . Bieder, C. and
M. Bourrier. Farnham, UK, Ashgate 173-190.
Savioja, P., Norros, L., Salo, L. and Aaltonen, I. 2014. Identifying Resilience in Proceduralised Accident Management
Activity of NPP operating crews. Safety Science Volume 68(October): 258–274.
Saurin, T. A., Wachs, P. and Henriqson, E. 2013. Identification of non-techn ical skills from the resilience engineering
perspective: A case study of an electricity distibutor Safety Science(51): 37-48.

More Related Content

Similar to Norros Leena, turkimusprofessori; Opitaanko virheistä? tutkinta oppimisen välineenä

26.5.2016 Yhteiset tehtävät, Lappeenranta
26.5.2016 Yhteiset tehtävät, Lappeenranta26.5.2016 Yhteiset tehtävät, Lappeenranta
26.5.2016 Yhteiset tehtävät, LappeenrantaTyöterveyslaitos
 
Prosessialan opiskelijoiden turvallisuusosaamisen kehittäminen
Prosessialan opiskelijoiden turvallisuusosaamisen kehittäminenProsessialan opiskelijoiden turvallisuusosaamisen kehittäminen
Prosessialan opiskelijoiden turvallisuusosaamisen kehittäminenSari Tappura
 
Miten Argumentaatiokaaviot Tukevat Yhdessä Lukemista Verkossa
Miten Argumentaatiokaaviot Tukevat Yhdessä Lukemista VerkossaMiten Argumentaatiokaaviot Tukevat Yhdessä Lukemista Verkossa
Miten Argumentaatiokaaviot Tukevat Yhdessä Lukemista Verkossahameenkyo
 
pro_gradu_jussi_väistö_v2_tulostus
pro_gradu_jussi_väistö_v2_tulostuspro_gradu_jussi_väistö_v2_tulostus
pro_gradu_jussi_väistö_v2_tulostusJussi V
 
Liikkuva koulu osana monialaisia oppimiskokonaisuuksia – oppilaat kehittämis...
Liikkuva koulu osana monialaisia oppimiskokonaisuuksia –  oppilaat kehittämis...Liikkuva koulu osana monialaisia oppimiskokonaisuuksia –  oppilaat kehittämis...
Liikkuva koulu osana monialaisia oppimiskokonaisuuksia – oppilaat kehittämis...Henriikka Vartiainen
 
Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...
Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...
Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...Sari Tappura
 
Tt tutkimuksellisena-lahestymistapana
Tt tutkimuksellisena-lahestymistapanaTt tutkimuksellisena-lahestymistapana
Tt tutkimuksellisena-lahestymistapanaEsko Johnson
 
Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...
Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...
Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...Kokeileva Suomi
 
Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14
Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14
Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14Kirsi Ronkainen
 
Psykologinen henkilöarviointi rekrytoinnissa
Psykologinen henkilöarviointi rekrytoinnissaPsykologinen henkilöarviointi rekrytoinnissa
Psykologinen henkilöarviointi rekrytoinnissaLAL Luonnontieteilijät
 
Ilmiöjakson suunnittelu lukiossa
Ilmiöjakson suunnittelu lukiossaIlmiöjakson suunnittelu lukiossa
Ilmiöjakson suunnittelu lukiossaAnne Rongas
 
Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?
Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?
Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?Harri Laihonen
 
Lääveri Kaipio käytettävyys
Lääveri Kaipio käytettävyysLääveri Kaipio käytettävyys
Lääveri Kaipio käytettävyyslaakariliitto
 
Mika Susi: EK:n yleiskatsaus toimitilojen turvallisuudesta
Mika Susi: EK:n yleiskatsaus toimitilojen turvallisuudestaMika Susi: EK:n yleiskatsaus toimitilojen turvallisuudesta
Mika Susi: EK:n yleiskatsaus toimitilojen turvallisuudestaSenaatti-kiinteistöt
 
Kokemuksia tietoturvallisuuden johtamisesta
Kokemuksia tietoturvallisuuden johtamisestaKokemuksia tietoturvallisuuden johtamisesta
Kokemuksia tietoturvallisuuden johtamisestajapijapi
 
Poliisin päihdeprojektin tutkimus
Poliisin päihdeprojektin tutkimusPoliisin päihdeprojektin tutkimus
Poliisin päihdeprojektin tutkimusKari Virtanen
 

Similar to Norros Leena, turkimusprofessori; Opitaanko virheistä? tutkinta oppimisen välineenä (19)

26.5.2016 Riskienarviointi
26.5.2016 Riskienarviointi26.5.2016 Riskienarviointi
26.5.2016 Riskienarviointi
 
26.5.2016 Yhteiset tehtävät, Lappeenranta
26.5.2016 Yhteiset tehtävät, Lappeenranta26.5.2016 Yhteiset tehtävät, Lappeenranta
26.5.2016 Yhteiset tehtävät, Lappeenranta
 
Prosessialan opiskelijoiden turvallisuusosaamisen kehittäminen
Prosessialan opiskelijoiden turvallisuusosaamisen kehittäminenProsessialan opiskelijoiden turvallisuusosaamisen kehittäminen
Prosessialan opiskelijoiden turvallisuusosaamisen kehittäminen
 
Miten Argumentaatiokaaviot Tukevat Yhdessä Lukemista Verkossa
Miten Argumentaatiokaaviot Tukevat Yhdessä Lukemista VerkossaMiten Argumentaatiokaaviot Tukevat Yhdessä Lukemista Verkossa
Miten Argumentaatiokaaviot Tukevat Yhdessä Lukemista Verkossa
 
pro_gradu_jussi_väistö_v2_tulostus
pro_gradu_jussi_väistö_v2_tulostuspro_gradu_jussi_väistö_v2_tulostus
pro_gradu_jussi_väistö_v2_tulostus
 
Liikkuva koulu osana monialaisia oppimiskokonaisuuksia – oppilaat kehittämis...
Liikkuva koulu osana monialaisia oppimiskokonaisuuksia –  oppilaat kehittämis...Liikkuva koulu osana monialaisia oppimiskokonaisuuksia –  oppilaat kehittämis...
Liikkuva koulu osana monialaisia oppimiskokonaisuuksia – oppilaat kehittämis...
 
Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...
Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...
Turvallisuuden johtajat, esimiesten johtajuus, osaaminen ja sitoutuminen turv...
 
Tt tutkimuksellisena-lahestymistapana
Tt tutkimuksellisena-lahestymistapanaTt tutkimuksellisena-lahestymistapana
Tt tutkimuksellisena-lahestymistapana
 
Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...
Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...
Nelli Hankonen: Satunnaistetut käyttäytymistieteellisesti muotoillut kenttäko...
 
Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14
Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14
Toimiva sairaala ll loppuseminaariesitys kirsi ronkainen 10 12 14
 
Psykologinen henkilöarviointi rekrytoinnissa
Psykologinen henkilöarviointi rekrytoinnissaPsykologinen henkilöarviointi rekrytoinnissa
Psykologinen henkilöarviointi rekrytoinnissa
 
Ilmiöjakson suunnittelu lukiossa
Ilmiöjakson suunnittelu lukiossaIlmiöjakson suunnittelu lukiossa
Ilmiöjakson suunnittelu lukiossa
 
Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?
Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?
Tuloksellisuusdialogi – avain julkisen sektorin tuloksellisuuden kehittämiseen?
 
Lääveri Kaipio käytettävyys
Lääveri Kaipio käytettävyysLääveri Kaipio käytettävyys
Lääveri Kaipio käytettävyys
 
Mika Susi: EK:n yleiskatsaus toimitilojen turvallisuudesta
Mika Susi: EK:n yleiskatsaus toimitilojen turvallisuudestaMika Susi: EK:n yleiskatsaus toimitilojen turvallisuudesta
Mika Susi: EK:n yleiskatsaus toimitilojen turvallisuudesta
 
Kokemuksia tietoturvallisuuden johtamisesta
Kokemuksia tietoturvallisuuden johtamisestaKokemuksia tietoturvallisuuden johtamisesta
Kokemuksia tietoturvallisuuden johtamisesta
 
Luottamuksen rakentuminen verkossa - Kirsimarja Blomqvist
Luottamuksen rakentuminen verkossa - Kirsimarja Blomqvist Luottamuksen rakentuminen verkossa - Kirsimarja Blomqvist
Luottamuksen rakentuminen verkossa - Kirsimarja Blomqvist
 
Opiskelijatutkimuksen päivä 2014: Anne Virtanen_Työssäoppiminen - harjoittelu...
Opiskelijatutkimuksen päivä 2014: Anne Virtanen_Työssäoppiminen - harjoittelu...Opiskelijatutkimuksen päivä 2014: Anne Virtanen_Työssäoppiminen - harjoittelu...
Opiskelijatutkimuksen päivä 2014: Anne Virtanen_Työssäoppiminen - harjoittelu...
 
Poliisin päihdeprojektin tutkimus
Poliisin päihdeprojektin tutkimusPoliisin päihdeprojektin tutkimus
Poliisin päihdeprojektin tutkimus
 

More from Finnish Institute of Occupational Health

Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...
Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...
Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...Finnish Institute of Occupational Health
 
Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...
Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...
Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...Finnish Institute of Occupational Health
 
Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...
Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...
Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...Finnish Institute of Occupational Health
 
Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...
Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...
Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...Finnish Institute of Occupational Health
 
Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...
Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...
Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...Finnish Institute of Occupational Health
 

More from Finnish Institute of Occupational Health (18)

Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...
Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...
Kopperoinen Tuomas, Oulun Työterveys: Asiantuntijasta managereiksi työterveys...
 
Hiilamo Heikki Työn arvot
Hiilamo Heikki Työn arvotHiilamo Heikki Työn arvot
Hiilamo Heikki Työn arvot
 
Karjalainen Seppo, Oulu, Työterveysyhteistyöllä eteenpäin
Karjalainen Seppo, Oulu, Työterveysyhteistyöllä eteenpäin Karjalainen Seppo, Oulu, Työterveysyhteistyöllä eteenpäin
Karjalainen Seppo, Oulu, Työterveysyhteistyöllä eteenpäin
 
Tuisku Katinka HUS/HYKS - Masennus; voiko työ ja nettiterapia parantaa?
Tuisku Katinka HUS/HYKS -  Masennus; voiko työ ja nettiterapia parantaa?Tuisku Katinka HUS/HYKS -  Masennus; voiko työ ja nettiterapia parantaa?
Tuisku Katinka HUS/HYKS - Masennus; voiko työ ja nettiterapia parantaa?
 
Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...
Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...
Miranda Helena, Helsingin kaupungin Työterveyskeskus - TEY ry 60 v. Selkä suo...
 
Kallio Tuula, Etera. Ikäjohtaminen
Kallio Tuula, Etera. IkäjohtaminenKallio Tuula, Etera. Ikäjohtaminen
Kallio Tuula, Etera. Ikäjohtaminen
 
Rokkanen Tanja, Varma Onko ikä työkykykysymys?
Rokkanen Tanja, Varma Onko ikä työkykykysymys?Rokkanen Tanja, Varma Onko ikä työkykykysymys?
Rokkanen Tanja, Varma Onko ikä työkykykysymys?
 
Husman Kaj Huoltoa tarvitaanko sitä vielä?
Husman Kaj Huoltoa tarvitaanko sitä vielä?Husman Kaj Huoltoa tarvitaanko sitä vielä?
Husman Kaj Huoltoa tarvitaanko sitä vielä?
 
Suomaa Leo STM Tarvitaanko suojelua?
Suomaa Leo STM Tarvitaanko suojelua?Suomaa Leo STM Tarvitaanko suojelua?
Suomaa Leo STM Tarvitaanko suojelua?
 
Vartia Maarit Mitä kiire aiheuttaa
Vartia Maarit Mitä kiire aiheuttaaVartia Maarit Mitä kiire aiheuttaa
Vartia Maarit Mitä kiire aiheuttaa
 
Kalakoski Virpi Kapasiteetin rajat_turvallisuudessa_2014-06-05
Kalakoski Virpi Kapasiteetin rajat_turvallisuudessa_2014-06-05Kalakoski Virpi Kapasiteetin rajat_turvallisuudessa_2014-06-05
Kalakoski Virpi Kapasiteetin rajat_turvallisuudessa_2014-06-05
 
Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...
Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...
Pääkkönen Rauno , Työterveyslaitos, Hallitut poikkeamat säilytetty kapasiteet...
 
Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...
Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...
Hakala Liisa STM Päätöksenteon sujuminen - Korjaavat toimenpiteet turvallisuu...
 
Lindström Oy Case Merja Koivu
Lindström Oy Case Merja KoivuLindström Oy Case Merja Koivu
Lindström Oy Case Merja Koivu
 
Sorsa Matti Päätöksenteon haasteet ryhmässä
Sorsa Matti Päätöksenteon haasteet ryhmässäSorsa Matti Päätöksenteon haasteet ryhmässä
Sorsa Matti Päätöksenteon haasteet ryhmässä
 
Monni Tiina-Mari, TKK Organisaation rakenteiden kehittämisen näkökulma
Monni Tiina-Mari, TKK Organisaation rakenteiden kehittämisen näkökulmaMonni Tiina-Mari, TKK Organisaation rakenteiden kehittämisen näkökulma
Monni Tiina-Mari, TKK Organisaation rakenteiden kehittämisen näkökulma
 
Oedewald Pia VTT Turvallisuuskulttuurin tutkimuksen keskeiset havainnot
Oedewald  Pia VTT Turvallisuuskulttuurin tutkimuksen keskeiset havainnotOedewald  Pia VTT Turvallisuuskulttuurin tutkimuksen keskeiset havainnot
Oedewald Pia VTT Turvallisuuskulttuurin tutkimuksen keskeiset havainnot
 
Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...
Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...
Anneli Taina AVI Kokonaisturvallisuuden kansallinen merkitys hyvinvoinnille 5...
 

Norros Leena, turkimusprofessori; Opitaanko virheistä? tutkinta oppimisen välineenä

  • 1. Opitaanko virheistä – tutkinta oppimisen välineenä Leena Norros Turvallisuus ihmisten toimintana -seminaari 5.6.2014 Helsinki VTT Technical Research Centre of Finland Place for a photo (no lines around photo)
  • 2. 211/06/2014 2 Johdanto LÄHTÖKOHTAISESTI Olisi outoa, totuuden vastaista tai vähintäänkin poleemista väittää, että virheistä ei opita Tutkinnan kautta myös muiden virheistä voidaan oppia MUTTA Merkit viittaavat kyllä siihenkin että oppiminen ei ole kovin tehokasta TÄSSÄ ESITYKSESSÄ POHDITAAN Miten turvallisuuskriittisessä ja vakiointia vaativassa työssä on mahdollista oppia työssä - Esimerkkinä ohjeenkäyttötutkimus Miten onnettomuustutkinnassa voitaisiin tuottaa oppimista paremmin edistävää tietoa – Esimerkkinä luotsausonnettomuustutkimus Mitä onnettomuustutkinnassa tulisi suositella ohjaavuuden lisäämisen sijaan - Johtopäätöksiä edellisistä
  • 3. 311/06/2014 3 Pyrkimys vakiointiin vs. joustavuuden salliminen Turvallisuuskriittisessä työssä on tyypillistä tieto- ja viestintätekniikan keinoin toteutettu kohteen automaattinen ohjaus ja monipuolinen informaatiotarjonta kohteen tapahtumista Työtä tukevat myös moninaiset turvallisuuden puolustusjärjestelmät: Esim. turvallisuusperusteiset käytännöt ja työkulttuuri, säännökset ja ohjeet, automaattiset turvatoiminnot, hätätilanneohjeet ja hätäohjauspaikat, jne. Näiden keinojen tavoite on vähentää järjestelmän toiminnan vaihtelua ja pienentää epävarmuutta MUTTA: Eri toimialoilta kertynyt kokemus osoittaa, että vakiointiin pyrkivä turvallisuusajattelu on mennyt liian pitkälle: siitä ei ole lisähyötyä tai se voi jopa olla haitallista (Bieder & Bourrier 2013, Amalberti 2006)
  • 4. 4 Standardisoinnin & ohjeistamisen hyöty Vakiointi Standardisoinnin & ohjeistamisen haitat Joustavuus Vakioinnin tuomaa turvallisuutta ei haluta korostaa joustavuuden tuomien hyötyjen kustannuksella. Vakiointi jei tue odottamattomien tilanteiden hallintaa Vakiointi vaikeuttaa normaalityössä oppimista Automaation toiminnan tulkintavaikeudet Informatisoi, tallentaa ja edistää oppimista Ohjaa prosessin turvalliseen tilaan Vähentää stressiä ja työkuormaa vaikeassa tilanteessa Tukee toimintojen koordinointia ja kommunikaatiota Standardisointi ja ohjeohjaus turvallisuuden takaajina – monimerkityksinen asia
  • 5. 511/06/2014 5 Vakiointistrategia heijastuu myös onnettomuustukintaan ja tutkinnasta oppimiseen Onnettomuusmalli: Tilanne ja toiminta kuvataan tapahtumasarjana ja epäonnistumisina siinä Oppiminen rajoittuu kyseiseen yksittäistapaukseen (Rasmussen & Svedung 2000, Hollnagel 2002, Nuutinen & Norros 2009) Tutkinnan johtopäätökset : Kattava ja tiukka ohjeistaminen ja huippuunsa kehitetty turvatekniikka johtavat tapahtumien selittämiseen ohjepoikkeamina => toimenpiteinä ohjekuri ja ohjeenkäytön harjoittelu ja seurauksena ”oppimisansa” (Rosness 2013) Onnettomuusanalyysien on vaikea tuottaa yleistä näyttöä joustavuuden myönteisistä turvallisuusvaikutuksista
  • 6. 611/06/2014 6 Väliyhteenveto Kun työtä vakioidaan vahvasti Joustavuus vähenee Oppiminen vaikeutuu > molemmat vaarantavat turvallisuutta Kun vakiointiajattelu myös tutkinnassa Yleistäminen tutkinnasta ei tehokasta Oppiminen vaikeutuu Joustavuuden hyötyä vaikea havaita > vaikutus turvallisuuden parantamiseen heikkenee Mitä on tehtävä? Normaalityön tutkimus turvallisuuden ja mahdollisen onnettomuuden näkökulmasta Onnettomuuksien tutkimus normaalityön näkökulmasta
  • 7. 711/06/2014 7 Miten turvallisuuskriittisessä ja vakiointia vaativassa työssä on mahdollista varautua yllättäviin tilanteisiin ja oppia työssä? Keinoja joiden avulla ihmiset voivat lisätä järjestelmän kykyä toimia turvallisesti eri tilanteissa, esim: Skjerve et al. 2004) : Varmistukset Valpas (mindful) toimintatapa Improvisointi Furniss et al. 2011, Saurin et. Al, 2013 Käytäytymispiirteitä joilla voisi olla turvallisuutta ylläpitävä merkitys Omissa tutkimuksissamme Tunnistamme systemaattisemmin käytäntöjen erot ja työvälineiden roolin niissä Osoitamme konkreettisemmin turvallisuutta edistävän vaikutuksen ja osoitamme kytkennän oppimiseen
  • 8. 811/06/2014 8 Tulkitseva toimintatapa lisää joustavuutta suhteessa tilanteeseen ja edistää oppimista Olemme pragmatistisen käytäntökäsitteen nojalla erotelleet kolme erilaista tiedollis-toiminnallista suhdetta ympäristöön (Norros 2004) Tulkitseva: kohdistuu tapahtumaan yksityisenä tapaukseen, josta luodaan oletuksia ja testataan niitä ja rakennetaan yleistävää tulkintaa => tehokkain yllättävissä tilanteissa, tehokkain oppimisen kannalta => edistää parhaiten turvallisuutta Toteava : kohdistuu tapahtumaan yleisenä luokittelemalla tapauksen, vahvistaa oletuksia Reaktiivinen: kohdistuu tapahtuman yksittäisiin piirteisiin, tilanne vie Tätä tyypittelyä on käytetty analysoitaessa turvallisuuskriittisten prosessien ohjaajien ohjeenkäyttöä (Savioja et al. 2014, Norros et al. 2014) Ohjeorientaatiota l. omaksuttua käsitystä ohjeen roolista työssä ja omassa toiminnassa Ohjeiden todellista käyttöä simuloiduissa hätätilanteissa Ohjesuunnittelijoiden ohjeorientaatiota
  • 9. 9 Heuristinen yhteenveto tuloksista OHJEET Suunnittelijoiden tekeminä ORIENTAATIO työhön ja ohjeisiin TOIMINTATAVAT ohjeohjatussa hätätilanteen hallinnassa guide express Operaattorien käsitys hyvästä toiminnasta ja ohjeenkäytöstä työnsä keskeisisissä tehtävissä on vallitsevasti tulkitseva Viranomaisyhteisöjen ja operoivien organisaatioiden turvallisuusajattelussa konfirmnatiivisuus on korostunut Monet ohjaajat toimivat konfirmatorisella tavalla Ohjesuunnittlelussa operaattorityö käsitetään tulkitsevalla tavalla mutta itse ohjeenkäyttö konfirmatiivisesti (alustavia tuloksia)
  • 10. 1011/06/2014 10 Miten onnettomuustutkinnassa voitaisiin tuottaa oppimista paremmin edistävää tietoa? Esimerkkinä luotsausonnettomuustutkimus: Kohteena oli 10 luotsaustilanteessa Suomen rannikkoväylillä sattunutta merionnettomuutta (Norros et al. 2006) Ne tulkittiin merkkinä vakavammista turvallisuusongelmista Kukin tapaus tutkittiin ja raportoitiin erikseen Lisäksi vertaileva ja yhteisiä selittävä tekijöitä etsivä tutkimus
  • 11. 1111/06/2014 11 Käytäntönä ollut onnettomuustutkintamenettely Noudatetaan systemaattisia menetelmiä, joita kehitetään yhdessä kansainvälisten viranomaisjärjestöjen kanssa Tähdätään tutkintaprosessin parempaan jäsentämiseen ja päättelyn johdonmukaisuuden lisäämiseen (tutkinnan laatu) Menetelmien käsitteelliseen perustaan ei ole kiinnitetty kovinkaan paljon huomiota: onnettomuustapahtuma ja ihmisen toiminta osana tapahtumaa
  • 12. 1211/06/2014 12 Onnettomuusmallit (Hollnagel 2002) Onnettomuus tapahtumasarjana Syyketjun paljastaminen, syiden poistaminen Fahlbruch (2000): monimutkaisia interaktioita vaikea kuvata yksinkertaisina syy-seuraus -rakenteina Reason (1998): ongelman korjaaminen aiheuttaa helposti uusia ongelmia Vaaratekijämallit Myötävaikuttavat tekijät, suojaukset, Reason 1990 Svenson & Salo 2002, selitykset redusoituvat Systeemimallit Toiminnan rakentuminen, vaatimusten tasapainottelu, adaptiivisuus Miten erottaa hyvä adaptaatio huonosta adaptaatiosta?
  • 13. 1311/06/2014 13 Käytetyn systeemisen tutkintamenetelmän periaatteet 1. Mallinnettava työ tasapainotettavien tavoitteiden ja toimialueen ominaisvaatimusten näkökulmasta 2. Analysoitava onnettomuustapahtumat sekä kausaalisesta että toimintatavalliselta, tekojen perustelujen näkökulmasta (ymmärtävä selittäminen, toimintatavat) 3. Onnettomuuksissa mukana olleiden ihmisten käyttäytymistä on tarkasteltava asia- ja toimintayhteydessään ja historiallisesti
  • 14. 14 Luotsausonnettomuustutkinnassa käytetty menetelmä: proseduuri ja tulokset Mitä? Tapahtumasarja ja työn yleisten vaatimustenmäärittely > toimintatavan kriteerien hahmotus Miksi? Toimintajärjestelmän jännitteet: turvallisuutta uhkaavat tekijät ja kehitysmahdollisuudet Miten? Tilannetekijöiden merkityksen arviointi ja niiden huomioonotto onnettomuuden aikaisessa työ- ja yhteistyötavassa Onnettomuuden faktojen metsästys Tutkittavan työn perustehtävän mallinnus Toimintaedellytysten ja tilannekohtaisten vaatimusten arviointi Tutkittavan työn ymmärtäminen toimintajärjestel- mänä Ihmisten toiminnan säännönmukai- suuksien kuvaus Johtopäätösten ja suositusten laatiminen
  • 15. 1511/06/2014 15 Tulosten kiteytys Perinteistä navigointitapaa muistuttavat piirteet edistävät toiminnan tilannekohtaista joustavuutta; MUTTA Laivojen koko on suuri suhteessa väylien turvalliselle luotsaukselle asettamiin rajoihin vaaditaan tarkempaa ajon suunnittelua väyläsuunnitelmat ovat osittain puutteellisia käännösten monitoroinnille ja yhteistyölle vaativissa ei muodostu todellisia edellytyksiä. => painetta teknisesti välittyneen ja yhteistyöhön perustuvan navigointitavan omaksumiseen Navigointilaitteet ovat vaikeakäyttöisiä luotsauksen kannalta tärkeissä suunnitteluoperaatioissa => vaikeuttavat tekniikan hyväksikäyttöä navigoinnissa Ruorimiehiä ei käytetä / ei ole käytettävissä korvaamaan navigointivälineiden puutteita
  • 16. 1611/06/2014 16 Tutkintametodin suhteen tehdyt päätelmät Metodi mahdollisti luotsiyhteisölle tyypillisten (toistuvien) luotsauskäytäntöjen tunnistamisen, jotka selittivät onnettomuuksien esiintymistä tutkituissa tilanteissa Havainnot vastaavista käytännöistä normaalitilanteissa viittaavat riskiin joutua onnettomuuteen Puutteellisten käytäntöjen pysyvyyden syitä ja niiden kehityksen esteitä saatiin esiin Toimenpidesuositukset kohdistettiin näihin (Norros et al. 2006, Norros & Nuutinen 2009)
  • 17. 1711/06/2014 17 Johtopäätöksiä Yksittäistapahtumista yleistämistä on mahdollista ja tulisi kehittää mallintamalla saadaan esiin yleisiä turvallisuutta uhkaavia ja edistäviä tekijöitä työtavoissa ja -kulttuurissa saadaan konkreettisia aineksia koulutuksen ja työvälineiden kehittämiseen ja suunnitteluun niin, että vakioinnin ja joustavuuden balanssi toteutuu Ohjeet ja teknologiset välineet ovat osa ihmisten toimintaa ja osaamista – tutkinnan inhimillisten tekijöiden osuus ja tekninen tutkinta tukemaan tosiaan Ohjeistamista ja vakioimista ei tule vaatia erittelemättä - perehdyttävä työn vaatimuksiin ohjaavuustasoa määriteltäessä Myös normaalityön toimintatapojen tutkimusta ja kehittämistä pitäisi korostaa suosituksissa Edellä kuvattu lähestymistapa tukee myös toiminnan laadun ja tehokkuuden parantumista, mikä motivoi organisaatioita kehittämiseen
  • 18. 1811/06/2014 18 Kirjallisuusviitteet Amalberti, R. 2006. Optimum system safety and optimum system resilience: Agonistic or antagonistic concepts? Resilience engineering. Concepts and percepts. Hollnagel, E., D. Woods and N. Leveson. Aldershot, Ashgate: 253- 271. Bourrier, M. and Bieder, C. 2013. Trapping safety into rules: An introduction. Trapping safety into rules. How desirable or avoidable is proceduralization. Bieder, C. and M. Bourrier. Farnham, UK, Ashgate: 1-9. Furniss, D., Back, J., Blandford, A., Hildebrandt, M. and Broberg, H. 2011. A resilience markers framework for small teams. Reliability Engineering and System Safety(96): 2-10. Hollnagel, E. 2002. Understanding accidents - From root cause to performance variability. IEEE 7th Conference on Human Factors and Power Plants, Scottsdale, Arizona. Norros, L. 2004. Acting under Uncertainty. The Core-Task Analysis in Ecological Study of Work. Espoo, VTT, Available also http://www.vtt.fi/inf/pdf/publications/2004/P546.pdf Norros, L., Liinasuo, M. and Savioja, P. 2014. Operators’ orientations to procedure guidance in NPP process control. Cognition, Technology & Work Norros, L. and Nuutinen, M. 2009. Learning from accidents: Analysis of normal practices. Risky work environments - Reappraising human work within fallible systems Owen, C., P. Béguin and G. Wackers. Farnham, England, Ashgate: 17-51. Norros, L., Nuutinen, M. and Larjo, K. 2006. Luotsauksen toimintatavat ja kulttuuri onnettomuustapausten valossa., Helsinki., Accident Investigation Board Finland. Nuutinen, M. and Norros, L. 2009. Core-Task Analysis in accident investigation - analysis of maritime accidents in piloting situations. Cognition Technology and Work(11): 129-150. Rasmussen, J. and Svedung, I. 2000. Proactive risk management in a dynamic society. Karlstad, Swedish Rescue Services. Rosness, R. 2013. The proceduralization of traffic safety and safety management in the Norwegian Rail Administration: A comparative case study. Trapping safety into rules. How desirable or avoidable is proceduralization? . Bieder, C. and M. Bourrier. Farnham, UK, Ashgate 173-190. Savioja, P., Norros, L., Salo, L. and Aaltonen, I. 2014. Identifying Resilience in Proceduralised Accident Management Activity of NPP operating crews. Safety Science Volume 68(October): 258–274. Saurin, T. A., Wachs, P. and Henriqson, E. 2013. Identification of non-techn ical skills from the resilience engineering perspective: A case study of an electricity distibutor Safety Science(51): 37-48.