====== 6. Výkonové a osobnostní testy ====== Téma má přidělen: --- //[[martin.malec@email.cz|Martin Malec]] 2014/01/02 17:02// Prohlašuji za hotové, pokud při učení narazíte že tam něco chybí nenechávejte si to pro sebe, aktualizujte stránku sami a dejte nám ostatním nějak vědět:)) ===== Oficiální obsah tématu ===== Přehled výkonových testů a osobnostních dotazníků užívaných pro diagnostiku schopností, dovedností a osobnostních charakteristik za účelem personálního výběru. Možnosti a limity testování. Omezení sebeposuzovacích metod. Psychologické aspekty online testování. Predikování pracovního chování na základě výsledků testů. Prediktivní validita a reliabilita testů užívaných při výběru pracovníků. ===== Empirická studie ===== U tohoto tématu student/-ka představí odbornou empirickou studii zjišťující prediktivní validitu vybraného výkonového testu nebo osobnostního dotazníku při predikování pracovní výkonnosti. Bude umět do hloubky uvažovat nad příčinami zjištěné souvislosti mezi výsledkem v daném testu/dotazníku a mezi skutečnou pracovní výkonností. ===== Povinná literatura ===== - Furnham, A., & Chamorro-Premuzic, T. (2010). //{{:download:prace:chamoro-premuzic_furnham_2010_the_psychology_of_personnel_selection_str._30_51.pdf|The Psychology of Personnel Selection.}}// New York: Cambridge University Press (strany 102 – 157, 170 – 174). - Leary, M. R. & Hoyle, R. H. (2009). //{{:download:prace:handbook_of_individual_differences_in_social_behav.pdf|Handbook of Individual Differences in Social Behavior.}}// New York: The Guilford Press (strany 36 – 39, 49 – 52, 135 – 137, 259 – 266, 371 – 375). - Svoboda, M., Humpolíček, P. & Šnorek V. (2013). //{{:download:prace:svoboda_et_al_2013_-_psychodiagnostika_dospelych_ocr.pdf|Psychodiagnostika dospělých.}}// Praha: Portál (strany 21 – 34 a vybrané kapitoly o výkonových a osobnostních testech užívaných za účelem personálního výběru). download: [[download:prace:download&#vykonove_a_osobnostni_testy]] ===== Doporučená literatura ===== Manuály vybraných výkonových testů a osobnostních dotazníků užívaných za účelem personálního výběru, např. - Test struktury inteligence - Test pozornosti d2 - {{:download:prace:neo_komplet.pdf|NEO pětifaktorový osobnostní inventář}}, - Dotazník interpersonální diagnózy ICL - [[http://www.unifr.ch/ztd/HTS/inftest/WEB-Informationssystem/cs/4cz001/5cbc8f64f2f44ecc85d40d5102b241a8/hb.htm|Dotazník motivace k výkonu LMI]] (Svoboda, str.429+) - aj. ====== Zpracování tématu ====== ===== Přehled výkonových testů a osobnostních dotazníků užívaných pro diagnostiku schopností, dovedností a osobnostních charakteristik za účelem personálního výběru. ===== Neopisuju tady jak přesně ty testy vypadají, od toho je předmět psychodiagnostika, a všechno z toho je ve Svobodovi. Využití psychometriky jako takové je Evropě až na výjimky poměrně málo časté, liší se hodně v jednotlivých zemích: {{:prace:vyuziti_psychometriky_firmami_v_evrope.jpg?nolink|}} ==== Výkonové testy ==== === testy inteligence === * WAIS-III, WAIS-IV ([[http://en.wikipedia.org/wiki/Wechsler_Adult_Intelligence_Scale|Wechslerovy testy]], 1997, 2008) * IST-2000R - Test struktury inteligence (Amthauer) * [[http://en.wikipedia.org/wiki/Woodcock-Johnson_Tests_of_Cognitive_Abilities|WJ III/WJ-IE]] (Woodcock-Johnson 1977-2001) ==== testy schopností ==== Málokdy testy schopností predikují víc než z 30 % skutečný rozptyl v prac.výkonu. (Schmidt & Hunter, 1998) * paměťové testy (Wechsler,...) * škály potenciálu pro práci se zákazníkem (SKASUK) ==== Osobnostní dotazníky ==== === Pracovní motivace === * **LMI Dotazník motivace k výkonu** (Schuler, Prochaska) (Testcentrum 2003): "osobnostní dotazník, určený k měření obecně pojatého konceptu motivace k výkonu v profesním kontextu". Motivace k výkonu = podíl osobnosti na vlastní výkonnosti. 14 škál, 170 položek, 7stupňová Likertova škála. České normy 2011. Škály: Nebojácnost (nejvíc odpovídá nízkému Neuroticismu v Big5), Flexibilita, Samostatnost, Preference obtížnosti, Důvěra v úspěch, Dominance, Cílevědomost, Ochota učit se, Soutěživost, Kompenzační úsilí, Angažovanost, Hrdost (na výkon), Orientace na status, Flow, Internalita, Vytrvalost, Sebekontrola (tyto dvě poslední odpovídají Svědomitosti u Big5). [[http://www.unifr.ch/ztd/HTS/inftest/WEB-Informationssystem/cs/4cz001/5cbc8f64f2f44ecc85d40d5102b241a8/hb.htm|Popisy škál]]. * Svoboda, str.429+ * vhodný pro výběrová řízení, v rámci personálního rozvoje, při volbě povolání.. podle manuálu je potřeba odpovědět na případné otázky probandů. Nepředpokládá se ale zpětná vazba klienta {{:prace:lmi_-_testovy_profil.jpg?nolink|}} === Big 5 / NEO === (Svoboda str. 418+) Vychází z teorie stabilnějších //osobnostních rysů//. Výzkum osobnosti řeší hlavně jaké osobnostní rysy mají být měřeny. Opakovaně se došlo k několik základním, které známe v různých obměnách "Big 5" (pojem od GOldberga). Byť má Big5 i své odpůrce, je při zkoumání osobnosti kánonem, základem. * **NEO pětifaktorový osobnostní inventář** (Testcentrum 2001) 60 položek vychází z NEO-FFI * **NEO osobnostní inventář podle NEO-PI-R** (Testcentrum 2004) **normy na českou populaci!** * Costa, McCrae - NEO-PI (personality inventory) 1985, NEO-PI-R, NEO-FFI (five factor inventory) 1992 Jiné konstrukty lze často zařadit do těch pěti základních kategorií: {{:prace:big5-zarazeni_jinych_konstruktu.jpg?nolink|}} Podle Hogana (1996) nevykazují osobnostní inventáře systematické zkreslení u jiných etnických a národnostních skupin, či tělesně hendikepovaných. Jejich spojení s inteligenčním testem ale neodstraňuje "negativní dopad" (adverse impact) vyplývající z "3krát g" (viz níže). **NEO / jiné BIG-5** - poskytuje pracovním psychologům a výzkumníkům univerzální jazyk pro porovnání mezi případy, studiemi ap. Prediktivní síla Big 5: {{:prace:prediktivni_sila_big5.jpg?nolink|}} Nejdůležitějším faktorem je svědomitost, která je nejsilnějším prediktorem hned po IQ, zahrnuje spoustu věcí: {{:prace:svedomitost.jpg?nolink|}} * IQ (GMA) říká co lidi "mohou zvládnout" ale svědomitost říká co lidi opravdu udělají, nejvíc se to pozná když chybí silná vnější motivace. * svědomitost ale slabě koreluje negativně s IQ - kompenzační funkce svědomitosti * svědomití lidé **méně**: chlastají, fetují, jsou silniční piráti, používají násilí. (Svědomitost v tomto smyslu bude téměř opakem "vyhledávání vzrušení" (sensation seeking)) {{:prace:svedomitost-nezdrave_chovani.jpg?nolink|}} * pokud jedinec chápe důsledky nebezpečného chování (vyšší IQ) ale stejně si nemůže pomoct (slabá síla ega, svědomitost) tak může být "svědomitost" lepším prediktorem pracovního vhodnosti/výkonu než IQ... **Ostatní faktory big5** * **neuroticismus**: významný u práce v stresujících podmínkách, nízký neuroticismus = emoční vyrovnanost * **extraverze**: interpersonální kompetence výhodné u manažerských a obchodnických pozic, velmi dobré když je zároveň spojena s emoční stabilitou (nízkým neuroticismem). * extraverzi lze vnímat i jako tendenci k prožívání příjemných emocí (Watson a Clark 1997), extroverti jsou šťastnější než introverti * **příjemnost**: důležité u pozic vyžadujících interpersonální interakci: zákaznická podpora * jak měřit? nejčastěji sebeposouzením (selfreport), dále pozorováním; dokonce ji lze manipulovat experimentálně jako nezávislou proměnnou. * nástroje pro sebeposouzení: Big Five inventory, Personality Item Pool - jedna z verzí NEO. * **otevřenost** ("Faktor 5"), nejméně jasný faktor z Big5 (co to vlastně znamená?) , smysluplná asi jen u uměleckých a kreativních pozic, jinde smíšené výsledky; ovlivňuje ale úspěch výcviku/tréninku * buďto otevřenost k druhým lidem - projevovaná verbální zdatností, humorem, vyjadřováním emocí v soc.vztazích.. nebo otevřenost novým zkušenostem (obecnější) **Omezenost Big5 a částečně i jiných inventářů** * hrozí podvodné odpovídání, které se skutečně děje, lze je v cca 40% případů odhalit i omezit * "nízká validita", rysy vysvětlí maximálně 15 % rozptylu prac.výkonu, přesto se hodí pro doplnění === další inventáře === * **Minnesotský inventář - MMPI-2** (viz Svoboda, str.386+) současná verze z r. 1989, 567 položek, sejmutí trvá přes hodinu,... spousta škál, existují i zkrácené verze * 16 PF-5 (Cattel), (Svoboda str.402+) * **Leary - ICL** (viz Svoboda, s.370+). 1956-57. 4 kritéria maladaptace (umírněnost/intenzita, flexibilita/rigidita, stabilita/oscilace, přesnost+přiměřenost), 5 úrovní interpersonálního chování: veřejná komunkace, vědomá komunikace, psychické soukromí, nevědomá rovina, hodnoty a ideální já. Výsledkem je 16 kategorií. * **Jenkins Activity Survey** - 1964, 3 faktory: hard, job, speed (viz Svoboda, str.353-4) * **Gordonův osobnostní profil - inventorium - GPP-I** (Svoboda, str.367): cca 25 min., nucená volba ze tří výroků, volí se nejvíce a nejméně odpovídající výrok. Čtyři aspekty osobnosti: převahu, zodpovědnost, sociabilitu, emoční stabilitu. "primárně určen pro oblast psychologie práce a organizace - pro výběr, vedení, vzdělávání, či trénink a personální poradenství. České vydání 1999" * **Eysenckův osobnostní dotazník EPI** 1964 (Svoboda,. s.382+). Paralelní formy A,B; srozumitelné formulace, zcela nezávislé škály extraverze a neuroticvismu, navíc verifikační škála. Rozšíření - **Eysenck Personality Questionnaire EPQ** 1975 ==== Sebeposuzovací inventáře integrity ==== integrita ~ čestnost, poctivost * inventáře se snaží nahradit detektor lži který se do r.1988 používal v USA běžně dokud nebyl zakázán, jeho validita je stejně sporná a je u něho spousta false positives dvě kategorie - podobné osobnostním testům, výhodou je že i když jsou postavené na self-reportech, nemusí být probandovi jasné co měříme a tak nemá co zkreslovat (nebo zkresluje něco jiného než měříme) - zjevné - popsat své vlastní minulé chyby ("kolikrát jste něco ukradl minulému zaměstnavateli", "předstíral jste někdy že jste nemocný") - jdou přímo k tomu co nás zajímá, ale můžeme pak potrestat ty co byli čestní a přiznali to; v testech máme lžiskóry aby ukázaly nepřirozeně "poctivé" lidi (předpokládáme že to není možné) - sdělit svůj postoj k vybraným chováním u jiných lidí (např tvrzení "kdokoli co něco ukradne je zloděj a měl by být podle toho potrestán"), předpokládáme vztah mezi postojem k (ne)čestnosti u druhých a vlastní nečestcností; výzkum ale moc tenhle vztah neprokázal - asi největší metaanalýza na osobnostní konstrukty kdy udělaná: Ones, Viswesvaran & Schmidt, 1993 - 665 validizačních koeficientů u víc jak půl milionu lidí: validita pro testy integrity jako prediktoru prac.výkonu 0.25 (očištěná 0.41), pro [[http://en.wikipedia.org/wiki/Counterproductive_work_behavior|kontraproduktivní práci]] 0.27(0.39) => pokud se tyhle škály přidají k testům IQ je to ideální ===== Možnosti a limity testování. ===== * etická pravidla má APA a každá jiná profesní asociace jinde ve světě vč ČR, psycholog i v rámci firemní diagnostiky by se tím nějak měl řídit * ===== Omezení sebeposuzovacích metod. ===== * člověk si může vymýšlet ať už do plusu (při testování do práce) nebo do mínusu, proto existují lžiskórové škály (MMPI,...) pro to abychom to mohli snáze rozpoznat. * měly by se používat v kombinaci s jinou metodou "V posuzovacích škálách měly být důsledně používány jen kategorie chování, tj. kategorie expresivní formy psychických jevů, nikoliv kategorie psychických procesů a stavů. Extrapolace z expresivní formy psychických jevů na úroveň psychických procesů a stavů může být teprve záležitostí psychologické diagnózy ve druhé fázi procesu posuzování, kdy dochází ke konfrontaci dat získaných posuzovací škálou s daty získanými speciálním psychologickým vyšetřením úrovně a charakteru psychických procesů a stavů i osobnosti v dimenzích její statiky a dynamiky." ([[http://rudolfkohoutek.blog.cz/0901/posuzovaci-skaly-v-humanitnich-vedach|Kohoutek, 2002]]) ===== Psychologické aspekty online testování. ===== Svoboda 2013, kap. 6 (s.33nn.) * klasické testy se dnes vyskytují i v elektronické interaktivní verzi * některé testy se administrují přes internetě * některá omezení: fenomén úzkosti při práci s počítačem vyskytující se u některých lidí pro které je nový - který ovlivní výsledek testu, který má měřit něco jiného než toto * validita a reliabilita komputerizované verze testu ověřovaného jen v původní tužka-papír verzi není automaticky zaručena! * výkonové testy tím jsou víc ovlivněné, dotazníky méně, např. MMPI je už ověřené že je ekvivalentní tužkapapír verzi * online verze jsou pro administrátory výhodné ze spousty důvodů ... * ve firmní sféře se do el.podoby přenášejí i takové věci jako assessment centrum (Motiv P - Virtuální AC), není to sice náhrada AC, ale je to časově náročné, a o člk se firma dozví hodně věcí a relativně levně, čas to stojí jen testovaného (zájemce o práci) * CAT - computerized adaptive testing - funkce která výrazně rozšiřuje známé přeskakování položek u WISC/WAISu u vyššího věku na to, že se přeskakují položky dynamicky podle struktury odpovědí, aby se testovalo na hranici možností probanda. Test může být kratší a přitom stále přesný ===== Predikování pracovního chování na základě výsledků testů. ===== **Testy situačního úsudku** (Situation Judgment Tests, SJT): "any paper-and-pencil test designed to measure judgment in work settings’ (McDaniel, Morgeson, Finnegan, Campion & Braverman, 2001, p. 730) teoreticky může být i na PC, používá se už desítky let k posouzení jak lidi reagují na modelové situace * posouzení je zpravidla pro pracovní účely dostatečné * s kognitivními schopnostmi koreluje jen někdy a u něčeho * metody skórování: empirické, teoretické, smíšené, expertem, faktoriální, vytváření podskupin * co vlastně SJT měří? SJT jsou metodou, měří latentní psychologické konstrukty, dřív se to bralo že jde vlastně o zjišťování sociální inteligence, interpersonální kompetence atd, zatímco akademické testy měří inteligenci a to je něco jiného. Ve skutečnosti i výsledky SJT sytí obecný g faktor. Měří se ale i schopnost selského rozumu, zkušenosti a obecné znalosti, nikoli přímo logické myšlení. **Školní známky, celkové skóre (General Grade Point Average, GPA)** * používáno dlouho, ale je vůči tomu hodně kritiky * hodně zaměstnavatelů na základě výsledného prospěchu odmítá posuzovat uchazeče, někdy se to ignoruje, ukazuje se že někdy jsoudoporučeni i lidi s nižším GPA * z výzkumného hlediska to ale je důležité - netřeba nic dalšího měřit a máme o člověku ukazatel který se mezi lidmi hodně liší, z toho se dají dělat longitudinální pozorování jak to s čím souvisí atd. Takže má smysl studovat validitu GPA jako prediktoru pracovního výkonu a kariérní úspěšnosti. * Thorndike už v 1903 oceňoval že vzdělávací instituce nejen že učí, ale ještě lidi hodnotí a označují ty kteří jsou dobří * Nicholson v 1915 zjistil že úspěšní lidi ve škole pak víc uspějou i v reálném životě a práci. První longitudální výzkum tohoto typu * Toops a Pintner 1919 potvrdili že úspěšnější lidi ve škole a vzdělanější byli obchodně úspěšnější * Metaanalýza Bretze z 1989 co srovnával 50 studií od 20. do 70.let aby prozkoumal validitu GPA jako prediktoru úspěšnosti, výsledky se ohromně lišily, velikosti účinku taky, jediné co platilo je že lidi s dobrými známkami na konci VŠ na tom jsou líp. Jako prediktor nástupního platu výsledky před dokončením VŠ nefungovaly, ani jak se bude plat vyvíjet. * McCleland 1973 zdůrazňoval potřebu sledovat neakademické kompetence k posouzení pracovního úspěchu, masivně znevažované začala být užitečnost IQ a známek s příchodem D.Golemana, jeho kritiky omezenosti IQ a důležitosti emoční inteligence. * Barrett a Depinet 1991 ale McClellandovy výsledky zpochybnili, známky a IQ úspěch ovlivňují, i s vyloučením sociálního statusu, handicapu menšin ap. * GPA lze brát jako ukazatel budoucího potenciálu / intelektuální kompetence. TODO speciální testy inteligence apod. ===== Prediktivní validita a reliabilita testů užívaných při výběru pracovníků. ===== ==== Prediktivní síla IQ (GMA, general mental ability) ==== Chamoro-Premuzic a Furnham * **inteligence ve smyslu GMA jednoznačně predikuje výsledky v práci**, není o tom debat, důkazy se o tom vrší od 1.světové války, přesto se inteligenční testy ve výběrových řízeních příliš nedělají resp. se to hodně liší v jednotlivých zemích (a nevypadá to že by na tom stál ekonomický ne/úspěch země, viz Německo na chvostu) (Dany & Torchy, 1994): {{:prace:mira_uzivani_iq_testu_v_evrope.png?nolink|}} * r = 0.72 (50 % rozptylu pracovního zařazení lze vysvětit úrovní mentálních schopností) (Schmidt & Hunter, 2004) * Nejlepší prediktory vedle GMA: prostorové, mechanické a percepční schopnosti, už v 70. letech existovaly testy pro všechny typy povolání ({{{{:download:prace:ghiselli1973-the_validity_of_aptitude_tests_in_personnel_selection.pdf|Ghiselli 1973}}), inteligence, prostor. představivost apod. hrají roli u vedoucích pracovníků a administrativy, naopak nehrály roli u prodavačů a dělnických profesí; tam měly stále význam osobnostní rysy ... * u vyšších pozic je mnohem menší šance že narazíme na jedince s nízkým IQ než obráceně (u nižších pozic jedince s vysokým IQ). **"lenost může jinak zářivé lidi vést k jednoduchým povoláním, ale tvrdá práce může těžko neschopné lidi uschopnit dělat tak komplexní práci** ; na vyšších pozicích je značná homogeneita vysokého IQ. Obří meta-analýza 425 studií GMA-prac.výkon (Hunter 1980, 1984) ukázala vztah u všech druhů práce, ale silnější u komplexnějších pozic, novější meta-analýzy to stále potvrzeují (viz Chamorro-Premuzic a Furnham, s.106). {{:prace:korelace_gma-jobperformace_-_complexity.png?nolink|}} * přesto že GMA je nejlepší prediktor, by se pro některé věci měly používat i další testy které mají svou inkrementální validitu (zejm. pro svědomitost, integritu osobnosti ap.) * výše uvedené negarantuje longitudinální validitu GMA na predikci pracovního výkonu (kauzalita není korelace;-), ale i na to jsou velmi přesvědčivé výsledky: === Longitudinální důkazy === * jeden z prvních výsledků: Austin a Hanisch (1990). Testy IQ z dob školy predikovaly výsledky v práci o 11 let později * Lidé s vyšším IQ tendují k povýšení a obráceně, ([[http://psycnet.apa.org/journals/apl/80/1/79/|Wilk a Sackett 1995]]), ještě zvýznamněné při porovnání vlastního IQ a průměrného IQ v rámci dané profese a pozice (Wilk a Sackett 1996) * platí to i při zahrnutí socioekonomického statusu * úspěch v práci víc závisí na vlastním IQ než na práci rodičů * nejepší longitudinál: Judge et al., 1999, až 40 let do minulosti: GMA změřené ve 12 letech koreluje s úrovní v práci r=0,51 a příjmem r=0,53 (skoro o 40 let později!), nejbližším dalším prediktorem byla //svědomitost// z Big 5 a i tam měla o 60 % slabší prediktivní sílu. === Proč se teda IQ tolik nepoužívá a je neoblíbeným? === * pro přesnou predikci vhodnosti jsoui potřeba //specifické// kognitivní schopnosti a ne obecná schopnost vyjádřená hodnotou IQ? To by odpovídalo původní Spearmanově konceptualizaci GMA * průměrný zaměstnavatel asi podceňuje skutečný dopad indiv.rozdílů které ovlivňují prac.výkon, a moc se spoléhá na hodnocení sociálního a ne výkonovéhon chování, ačkoli to sociální moc s produktivitou a výkonem nesouvisí. Snaživci se tolerují byť jejich produktivita je nízká, naopak lidi co jsou nespolehliví, chaotičtí a rozhádaní jsou trestáni byť netto produktivita může být pořád vyšší než těch "hodných" * 3krát //g// - general, genetic, group differences (obecné, genetické a skupinové rozdíly) - samá politicky nekorektní zjištění... - krom GMA je náš (ne)úspěch zakódován tak trochu v genech (vysvětlující kolem 25 % - Gottfredson, 2004). - dalším problémem jsou jiné rozdíly v testech u jiných ras kde zbývá stále až 1 směrodatná odchylka u ne-bělochů i při použití culture-fair testů (Gottfredson, 1986, 1988, 2005; Jensen, 1980, 1998) **Sociální důsledky** - pokud jsou předpoklady víceméně dány a jsou jen málo ovlivnitelné, znamená to že jedinci s nižším IQ jsou odsouzeni a handicapováni už ve chvíli kdy se dostanou do adolescence nebo začnou hledat první práci? - pokrok vyžaduje stále inteligentnější lidi, požadavky na prac.pozice jsou stále víc "g-loaded" - "je stále těžší pro lidi nižší inteligence víc vydělávat a dostávat se na pozice s vyšším soc.statusem, naopak jsou častěji nezaměstnaní a technologický pokrok je činí zbytečnými, protože je čím dál víc lze nahradit stroji" === vyšší IQ a lepší chování v práci === * IQ snižuje dokonce i výskyt "kontraproduktivních pracovních chování" (častější absence, zneužívání firemních zdrojů) * "workplace deviance" * údajně až 200 miliard dolarů roční ztráty jen v USA kvůli tomuhle (Greenberg, 1997; Murphy, 1993; Vardi & Weitz, 2004; Bennett & Robinson, 2000) * proč? "inhibiční účinky vyššího IQ" - chytřejší lidi si dokážou předem líp spočítat negativní důsledky svého chování a jednání * hloupí lidé proti tomu tuhle jasnost postrádají a proto dělají častěji blbosti ==== Prediktivní síla Big5 a jiných inventářů na osobnostních rysy ==== * R^2 max cca 15 % rozptylu * nejvýznamnější je //svědomitost// z Big5