CURS 9ELABORAREA I CONSTRUIREA TESTELOR. ANALIZA ITEMULUI1. Paii standard n construirea unui test psihologica. Stabilirea unei necesiti: luarea n considerare a cerinelor formale i informale pentru test.Trebuie s realizm un fel de anchet social pentru a vedea dac aceast necesitate este real sau ine de imaginarul nostru. Trebuie s scanm disponibilitatea pieei, s vedem dac exist ceva similar (pentru a nu repeta).b. Definirea obiectivelor i parametrilor testelor: stabilim scopul testului (cine este testat i dece a fost ales acest test), clarificm modul n care informaia utilizat de test va fi utili celui care d testul i beneficiarului. Trebuie s lum n considerare tipul de format al itemilor i tipul de format al rspunsurilor, dar i numrul de itemi ce vor fi incluic. Selectarea unui grup de experi n domeniul respectiv: se discut din nou obiectivele, scopurile i parametrii testului i se determin o prim machet a testului.d. Scrierea itemilor (crearea bncii de itemi): se utilizeaz experi din domeniul testului sauspecialiti din aria domeniului respectiv pentru a scrie itemii. Dup ce au fost scrii, itemii trebuie s fie revizuii (din punctul de vedere al coninutului) de ctre cel puin o persoan sau de ctre o echip care nu a fost implicat n scrierea lore. Faza de teren. Itemii sunt supui probei realitii. Un prim eantion de itemi este utilizatpentru a fi testai pe subieci reali, dintr-un anumit grup int (grup realizat n funcie de vrst, sex, pregtire profesional etc.)- In urma testrii, se va calcula gradul de dificultate i de discriminare al itemilor (aceasta reprezint analiza de itemi)f. Revizuirea itemilor, care se produce n urma analizei de itemi. Se verific dac exist oanumit ncrctur nedorit de itemi sau prejudeci (de exemplu, sexuale sau legate de minoriti). Sunt eliminai itemii care pot s fie incoreci, nedrepi sau pot s lezeze anumite grupuri de indivizi.g. Alctuirea formei finale a testului. Se verific adecvarea grilei de scorare, mergndu-se pnla subtiliti n ceea ce privete scorarea rspunsurilor. Se ntmpl foarte multe accidente n faza final, astfel c este necesar intervenia unui cap limpede" (cineva care este scos din paii experimentrii i care verific tot, inclusiv forma final; de obicei, este cineva din afar). Se reverific itemii i grila de scorare.h. Constituirea normelor i calcularea fidelitii i validitii: 1. Datele tehnice ale testului sunt verificate. Se fac procedurile de eantionare sau de constituire a loturilor de experimentare.2. Administrarea i scorarea formei finale a testului.3. Se calculeaz fidelitatea si itemii de finalitate.4. Construirea normelor adecvate de interpretare.

2. Metode de construire a testelor n majoritatea lucrrilor de teoria testelor psihologice, metodele de construire a testelor psihologice sunt mprite n trei categorii (Burisch, 1986; Van Der Maesen, Hofstee, 1989; Albu M., 1998): 1. Metodele deductive denumite i raionale, sau bazate pe simul comun 2. Metodele inductive sau interne 3. Metodele externe sau empirice 1. Metodele deductive, denumite i raionale sau bazate pe simul comun, sunt cele n care construirea itemilor i selectarea celor care vor compune testul se bazeaz exclusiv pe prerile unor persoane (experi sau nu). Mai nti sunt alese constructele care vor fi msurate de teste, apoi sunt elaborai itemii, care realizeaz o definire implicit sau explicit a constructelor singurul ghid n aceast operaie fiind intuiia autorilor itemilor.Din aceast categorie fac parte: metoda prototipului; metoda BARS (behavioral anchored rating scales); metoda ordonrii comportamentelor de ctre experi; metoda designului cu faete; metoda intervalelor aparent egale.2. Metodele inductive sau interne pornesc de la o colecie mare, eterogen, de itemi (deobicei extrai din teste aflate n circulaie), considerat a fi reprezentativ pentru constructele care trebuiesc msurate. Prin procedee statistice, cum sunt analiza factorial i analiza de clusteri, se urmrete s se depisteze gruprile de itemi care corespund constructelor respective.Din aceast categorie de metode fac parte: metoda consistenei interne; metoda teoretic; metoda analizei criteriului intern3. Metodele externe sau empirice necesit precizarea, de la nceput, a relaiilor care vortrebui s existe ntre scorurile testului care va fi construit i diverse criterii externe. Se pornete de la o colecie mare, eterogen, de itemi, se compar scorurile acestora cu criteriile i se rein cei care au comportarea pe care trebuie s o aib ntregul test.Din aceast categorie de metode fac parte: metoda criteriului extern; metoda analizei constructului.Dup cum se observ, metodele deductive nu necesit nici experimentarea itemilor, nici efectuarea unor analize statistice, n timp ce metodele inductive i cele externe se bazeaz pe prelucrarea statistic a rezultatelor experimentrii itemilor, acordnd o pondere redus modului de construire a itemilor. n multe situaii este posibil i chiar recomandabil - construirea testelor cu ajutorul mai multor metode: o metod deductiv va servi la formarea bncii de itemi, iar printr-o metod intern sau/i una extern se vor selecta itemii care vor alctui testul.3. Analiza itemuluiDup ce am neles rolul caracteristicilor psihometrice se impune s vedem n ce msuracestea depind de caracteristicile elementelor componente ale testelor, mai exact ale itemilor. Cunoatem faptul c un test este format dintr-un anumit numr de itemi i urmrete s msoare o anumit nsuire sau caracteristic psihic. Acest deziderat va fi realizat dac fiecare dintre itemi va urmri i va avea puterea s msoare aceeai nsuire sau caracteristic psihic.n continuare vom ncerca s lmurim ce este itemul. M. Reuchlin, n lucrarea Grand dictionnaire de la psychologie (1992) definete itemul ca fiind un element al unui test, constituind o situaie particular i jucnd rolul unui stimul la care subiectul nu poate da dect un rspuns dintre dou sau mai multe rspunsuri teoretice prevzute de test. n acest sens itemul este o secven, o component a testului care are o anumit individualitate, apare ca un stimul pentru subiect, subiectul ofer un rspuns care poate fi corect sau nu.Pentru a fi considerat item, o component a testului trebuie s aib individualitate informaional pertinent, adic s contribuie distinct, clar i conturat la scorul total al testului (Stan, 2002).Referitor la cel mai mic numr de itemi pe care poate s-l aib un anumit test, Paul Kline (1993), susine c acesta nu poate fi mai mic de 10.Prin urmare, niciun test i niciun chestionar nu pot fi acceptate n calitate de instrumente psihodiagnostice dac nu au cel puin 10 itemi (Mitrofan, 2009).Formularea itemilor (Kaplan, Saccuzzo, 2005): Definii clar ceea ce vrei s msurai ncercai s facei itemii ct mai specifici; Creai o banc de itemi alegerea itemilor dintr-un univers de itemi; Evitai itemii redundani eliminarea itemilor repetitivi; Evitai pe ct posibil itemii lungi acetia sunt folositori foarte rar; Meninei nivelul de dificultate a lecturii i nelegerii realizarea unui nivel potrivit pentru cei care vor rspunde la test; Evitai itemii cu caracter echivoc, adic cei care conduc la dou sau mai multe idei n acelai timp; Combinai itemii formulai pozitiv i negativ includerea itemilor formulai n direcie opus.

Analiza de itemi are ca obiectiv de baz descifrarea mecanismelor cognitive aplicate de subieci pentru formularea rspunsurilor la itemi i verificarea calitilor itemilor ca instrumente de msur sau de predicie. Analiza cantitativ se refer la proprietile statistice ale itemilor i este focalizat n principal pe clarificarea problemelor privind dificultatea i capacitatea de discriminare a itemilor.Analiza calitativ se refer n principal la aspecte de coninut i de form incluznd problema evalurii eficienei procedurilor de redactare i a validrii de coninut. Presupune utilizarea unor variate proceduri nonstatistice de analiz.Criteriile folosite pentru a selecta itemii depind foarte mult de obiectivele urmrite de ctre constructorul de test.Mijloace folosite pentru analiza itemului: Un index al dificultii itemului; Un index al discriminrii itemului; Un index al fidelitii itemului; Un index al validitii itemului.Pe baza analizei de itemi se obin informaiile care permit selectarea itemilor care intr n componena testului.Analiza itemilor poate fi rezumat prin urmtorul algoritm: calculul indicelui de dificultate pentru toi itemi i eliminarea celor care sunt rezolvai de toi subiecii i celor nerezolvai de nici un subiect; depistarea cauzelor pentru care unii indici de dificultate sunt foarte mari sau foarte mici i eliminarea itemilor cu greeli; n situaia itemilor cu rspunsuri la alegere, se analizeaz rspunsurile incorecte i se elimin aceia n care unele rspunsuri greite au fost alese de foarte muli sau foarte puini subieci; aplicarea uneia dintre procedurile analizei de itemi i selecia itemilor, n funcie de condiiile pe care trebuie s le ndeplineasc testul ce se construiete, respectiv: dac testul trebuie s discrimineze ntre dou grupe contrastante, respectiv s permit scoruri care difer mult de la o grup la opusul ei, se va calcula pentru fiecare item indicele de discriminare, eliminndu-se itemii necorespunztori; dac testul trebuie s se comporte ntr-o manier prestabilit fa de un anume criteriu, se vor elimina itemii necorespunztori; se vor elimina itemii cu indicele de dificultate necorespunztor scopului pe care urmeaz s-l ndeplineasc testul. In principiu se vor elimina cei foarte uori i foarte dificili. Dac cerina este ca lestul s identifice pe cei care prezint nivele foarte sczute i foarte ridicate pentru o anume trstur sau facultate, se vor reine doar aceste tipuri de itemi; se va calcula coeficientul de corelaie ntre scorurile testului i scorurile itemului i se vor elimina itemii care prezint corelaii nesemnificative sau negative. n continuarea construirii testului pe baza itemilor astfel selectai se procedeaz la studierea caracteristicilor psihometrice (fidelitate, validitate, dificultate, putere de discriminare), aspectele legate de lungimea testului, tipuri de itemi din care este compus, timpul de rezolvare a testului (inclusiv variante privind standardizarea timpului), costurile administrrii testului.Dup Cohen i Swerdlik (2005) atunci cnd aplicm un test nou, va trebui s rugm subiecii s rspund la unele ntrebri cu privire la urmtoarele probleme: Sensibilitatea cultural Ai simit c unii itemi au fost discriminatori n raport cu anumite grupuri de subieci. Dac da, de ce? Validitatea de faad Pare testul c msoar ceea ce ateptai s msoare? Dac da, ce este contrar ateptrilor? Aplicantul testului V-a afectat n vreun fel conduita aplicantului testului performanele dvs.? Dac, da, cum? Mediul de aplicare V-au afectat n vreun fel condiiile din sala de testare performana dvs. la test? Dac da, cum? Corectitudinea testului Credei c testul este corect n raport cu ceea ce este considerat c msoar? De ce da sau de ce nu? Limbajul testului n raport cu care dintre instruciuni sau alte aspecte scrise ale testului ai avut dificulti de nelegere? Lungimea testului Ce ai simit, referitor la lungimea testului, n privina: a). timpului necesar de completare; b). numrului de itemi? Ghicitul rspunsului Ai ghicit rspunsul la vreunul dintre itemii testului? Care credei c este procentul itemilor la care ai ghicit? Ai utilizat o strategir particular pentru a ghici sau ai ghicit la ntmplare? Integritatea subiectului Credei c sa putut tria la acest test? Dac da, descriei metodele ce credei c au fost utilizate. Starea mental i fizic a subiectului Cum ai descrie starea dvs. mental la nceputul testrii? Credei c aceast stare a afectat n vreul fel rezultatele obinute? Daca da, cum? Cum descriei starea dvs. fizic la nceputul testrii? Credei c aceast stare a afectat n vreun fel rezultatele obinute? Dac da, cum? Impresia general a subiectului Care este impresia dvs. general privind acest test? Ce sugestii ai oferi constructorului de test pentru mbuntire? Preferinele subiectului Ai gsit vreuna din prile testului ca avnd un efect educaional, distractiv sau n alt fel recompensator? Ce v-a plcut i ce nu v-a plcut n mod special la acest test? Considerai c vreuna din prile testului provoac anxietate, condescenden sau deranjeaz n vreun fel? De ce? Pregtirea subiectului Cum v-ai pregtit pentru acest test? Dac ar fi s sftuii pe alii cum s se pregteasc pentru test, ce le-ai spune?n funcie de obiectivele urmrite de test ntrbrile pot fi cu mai multe modaliti sau variante de rspuns, prezentate oral sau scris. Nu trebuie uitat s se asigure confidenialitatea rspunsurilor subiecilor.