seminar calculul indicilor de fidelitate

7/23/2019 Seminar Calculul Indicilor de Fidelitate

1/13

Prezentati in PP materialele urmatoare:

Printre metodele de nregistrare observa ional utile n special pentru sarcini clinice i

psihoeduca ionale sunt nregistrrile narative si nregistrarea intervalului.nregistrarea intervalului

nregistrarea intervalului (uneori denumit e antionarea timpului) este o metod denregistrare, care se concentreaz pe anumite aspecte selectate ale comportamentului a a cumapar n intervalele de timp specificate.Termenul de e antionare transmite ideea de baz anregistrrii intervalului e antionezi comportamentul mai degrab dec!t nregistrezi fiecarecomportament a a cum apare n cursul perioadei de observa ie. Perioada de observa ie estempr it n segmente scurte sau intervale, de obicei, de la " la #$ de secunde, n func ie de

lungimea observa iei , n timpul creia observatorul noteaz dac apare un comportament.Prezen a sau absen a comportamentelor int predefinite n fiecare interval este numrat.nregistrarea intervalului este adecvat n special pentru observa ii controlate i studii delaborator.

Utilizri majore ale nregistrrii de interval.%ntervalul de nregistrare este util pentruobservarea comportamentelor care sunt evidente, care nu au un nceput clar i un sf!r it, i care apar cu frecven moderat, cum ar fi o dat la &$ la &" secunde. 'emplele includcitirea, scrierea, atingerea obiectelor, conversa ia corespunztoare, strigarea, ipatul, lovirea,

oaca cu ucrii, producerea zgomotului, z!mbirea, statul culcat i suptul degetului.

Frecven a, lungimea i timpul perioadei de observa ie. *!rsta copilului, contetul i motivul pentru evaluare vor determina n parte de c!te ori vatrebui s observa i copilul, lungimea perioadei de observare i c!nd se va realiza. + sesiune de observare poate dura de la &$ la #$ de minute sau mai mult. ncerca i s cronometra i observa iile dvs., astfel nc!t s pute i observa un e antion reprezentativ alcomportamentului int . ac este posibil, observa i copilul n mai mult de o ocazie i nmomente diferite n timpul zilei.

Lungimea intervalului de observare

-ungimea intervalului de observa ie va depinde de comportamentele int . -ungimeaintervalului trebuie s fie adaptat la debutul i ncetarea comportamentelor aflate subobserva ie . + lungime adecvat a intervalului va minimiza distorsiunea secven elor i frecven elor comportamentului . %ntervalele scurte sunt de preferat pentru comportamente caredureaz o perioad scurt de timp, cum ar fi efectuarea unui zgomot ecesiv, mpingerea altuicopil si introducerea obiectelor n gur. %ntervalele lungi sunt utile pentru comportamentelecare dureaz o lung perioad de timp, cum ar fi cearta ecesiv, privitul ecesiv la televizoretc.

n interval de nregistrare (un interval n care nu se fac observa ii ) ar trebui

fi ntotdeauna folosit ori de c!te ori scorarea (sau nregistrarea) va interfera cu observa iile ncurs de desf urare . +ric!nd este utilizat un interval de nregistrare, un anumit tip de


2/13

dispozitiv este necesar pentru a semnala debutul si finalizarea intervalelor de observare inregistrare. e i diverse dispozitive electronice pot fi utilizate, o metod simpl este de anregistra un ton semnaliz!nd intervalele de nregistrare pe o caset audio i apoi de a asculta

banda prin intermediul unui dispozitiv n ureche n timp ce observi. /lternativ, o voce peband poate fi utilizat pentru a semnala observarea i intervalele de nregistrare.

Comportamentele int

0omportamentele int ar trebui s fie selectate pe baza unor nregistrri narative anterioare,informa ii din interviu, ntrebri de sesizare. 0!nd se utilizeaz un sistem de codarecomportamentele int vor fi specificate.

Metoda de nregistrare a datelor

atele pot fi nregistrate cu creion i h!rtie sau cu dispozitive de nregistrare electronice.+ alt abordare este de a utiliza un sistem n care datele sunt reprezentate grafic n modautomat pe msur ce acestea sunt nregistrate. 0!nd termina i observa iile, ave i o imagine a comportamentului copilului, care poate fi mprt it imediat cu sursa de referin .

Cnd utiliza i intervale de nregistrare, a i putea nregistra scorul pentru comportament fien timpul intervalului, fie imediat dup aceea.

Dac nregistrai dup interval, intervalele de observarevoralterna cu intervalele pentru nregistrarea

comportamentului . De exemplu, perioada de observaie

poate consta dintr-o seriede cicluri n care intervalul deobservaie de 10 secunde a fost urmat de un interval de

nregistrare de 5 secunde. O secven tipicar , dup cumurmea!

"ntervalul de observare #10 secunde$

intervalul de nregistrare #5 secunde$

"ntervalul de observare #10 secunde$

intervalul de nregistrare #5 secunde$

#%iclul se repet$& doua metod este aproape o necesitate, atunci c'nd

nregistrai un numr de comportamente n timpul unui

interval, pentru ctrebuie s nu mai prive(ti copilul, n scopulde a realia notaiile n categoriile corespuntoare. )ungimea

intervalului de observare - precum (i lungimea intervalului

nregistrrii,dac este utiliat - trebuie s rm'n xate peparcursul tuturor observaiilorcu scopul de a asigurauniformitatea observaiilor.


3/13

Protocol de inregistrare a observatiei

0opilul de referin : /ndrei Popescu +bservator: 10opilul de compara ie: 0ostel 0o2observator:3ata: 4 mai 5$&$ 'fectivul clasei: #$ elevi

0lasa: a %* a inv. doamna 0hiranTimp: de la &&:$$ la &&:$#

Motivul observatieie a observa daca, in timpul citirii, comportamentul lui /ndrei difera de cel al altui copil

ctivitatea clasei si regulile e!plicite din timpul observatiei/ctivitate: citire 6eguli: &. lucrati in liniste 5. stati in banca #.ridicati mana pentru a solicitaautor

brevieri"62copilul de referin , 07copilul pentru comparatie, 17 comportamentul observat, +7comportamentul nu este observat. Tot. 7total. 8iecare numr reflect o perioad de observa iede &$ secunde urmat de o pauz de " secunde pentru nregistrarea datelor.

Trei tipuri de comportament au fost nregistrate:comportamentul off2tas9 pasiv: actiuni inadecvate pasive(de eemplu, priveste in gol, lipsainteresului, absenta perseverentei)comportamentul off2tas9 disruptiv: actiuni active inadecvate(de eemplu, zgomot, lovituri,

batai, iesire din banca fara permisiune, amenintarea altora )comportamentul on2tas9 : comportament adecvatla situatie (lucreaza in liniste in banca,solicita permisiunea de la profesor ca sa iasa din banca)


4/13

Pentru a observa copilul pentru care s-a realizat sesizarea, profesorul i clasa, s-arputea folosi o procedur secven ial, n care observi mai nti copilul, apoi

profesorul, iar apoi clasa. Perioada de observa ie de 60 de secunde ar putea fi

divizat n urmtorul mod:

observa copilul ! - !0 secunde"

observa profesorul !!-#0 secunde"

observa clasa #!-$0 secunde"

observa copilul (#&2$ secunde)observa profesorul (&2"$ de secunde)observa clasa ("&2;$ secunde)(ciclul se repet)

%ntervalele de nregistrare, dac este necesar, pot fi intercalate cu perioadele deobserva ie .rmtoarea secven este format din intervale de observa ie de 4 secunde iintervale de nregistrare de # secunde:observa copilul (&24 secunde)nregistrarea comportamentului (< 2 &$ secunde)

observa profesorul (&&2&4 secunde)nregistreaz comportamentul (&


5/13

Exemplu:

%e vizioneaza filmul pe care il gasiti pe pagina: &ttp:''(((.)outube.com'(atc&*

v+6v/oP12, ca e3emplu pentru o inregistrare fara pauza intre intervale.

4poi veti realiza un 5oc de rol in care una dintre voi este un elev care trebuie sa realizeze o

sarcina similara cu cea din film, se realizeaza un protocol in care vor nota

rezultatele observatiei, iar cealalta colega va trebui sa aiba un cronometru pentru a

indica cu voce tare intervalul de observatie de #0 de secunde cu pauza de secundepentru inregistrarea comportamentului observat timp de $ minute. Categoriile si

comportamentele care trebuie observate sa fie aceleasi ca in film.

Apoi veti prezenta urmatoarele informatii in PP.

Modalitati de a evalua #idelitatea inregistrarii

Procentajul acordului

Cnd se dorete o msurare care arat procentajul acordului ntre doi sau maimuli observatori care nu sunt preocupai de corectarea acordului intamplator,este util un indice necorectat al procentului de acord. Procentajul de acordnecorectat, care este simplu procentajul de acord ntre doi sau mai muliobservatori, este susceptibil la supraestimarea acordului cnd acordulintamplator este crescut. Dei procentajul de acord nu este sinonim cu fdelitatea,este util ca verifcare preliminar a adecvrii nregistrrilor observationaledatorit uurinei de calculare i interpretare i a sensibilitaii la bias i la erorilesistematice. n materialul care urmea, procentajul de acord necorectat se vanumi procentajul de acord.

Estimrile procentajului de acord n nregistrareaintervalului

n nregistrarea intervalului, un numr de metode di!erite pentru procentajulacordului sunt utiliate pentru a determina acordul interobservator. "#ist treiast!el de metode$

a% &cordul global

b% &cordul privind ocurena comportamentului

c% &cordul privind nonocurena comportamentului.


6/13

Di!erena principal dintre cele trei metode este dat de intervalele specifceutiliate pentru a determina nivelul de acord interobservator.

' indic ocurena comportamentului, ( indic nonocurena comportamentului

Datele din fgur sunt utiliate pentru a ilustra cele trei msurtori aleprocentajului de acord interobservatori.

1. Acordul privind observaiile totale

&ceast metod de obinere a procentului de acord ia n considerare numrultotal de intervale i ocurena sau nonocurena comportamentului n fecare

interval. &cordul este e#istent atunci cnd ambii observatori au scorat feocurena, fe nonocurena comportamentului ntr)un interval dat. Procedura estedup cum urmea$

a% *und n considerare toate intervalele, msurai de dou ori, o datnumrul de intervale n care observatorii au !ost de acord asupraocurenei sau nonocurenei comportamentului i o dat numrul deintervale n care au !ost n deacord.

b% Diviai numrul de acorduri la numrul total de acorduri plusdeacorduri i multiplicai de + de ori. -eultatul este procentajulacordului inter)observatori pentru numrul total de intervale. ormulapentru procentajul de acord inter)observatori pentru numrul total deintervale este urmtoarea$

"#emplu$ Doi observatori au !ost de acord dac comportamentuleste ocurent sau nu este ocurent n intervalele +,/,0,1,2,3 i + 4apte acorduri%,dar au !ost n deacord n intervalele 5,6, i 7 4trei deacorduri%.


7/13

&st!el e#ist o rat a procentului de acord n scorarea comportamentului intprivind numrul total de intervale nregistrate$

/.&cordul privind ocuren*a observa*iilor. &ceast metod pentru obinereaprocentajului de acord ia n considerare numai acele intervale n care cel puinunul din cei doi observatori au nregistrat ocurena comportamentului. &cordule#ist atunci cnd ambii observatori au scorat ocurena unui comportament ntr)un interval dat. &ceast procedur este similar cu cea utiliat pentruobservaiile totale, cu e#cepia !aptului c numai o poriune din intervale esteutiliat.

a. *und n considerare acele intervale n care cel puin unul din cei doiobservatori au nregistrat ocurena unui comportament, numrai de dou ori) odat numrul de intervale n care observatorii au !ost de acord n privinaocurenei comportamentului i a cealalt dat numrul de intervale n care

observatorii au !ost n deacord.

b. mparte numrul de acorduri la numrul total de acorduri plus deacorduri imultiplic cu +. -eultatul este procentajul acordului interobservatori pentruacele intervale n care comportamentul a !ost scorat ca avnd loc. ormulapentru procentajul acordului interobservatori privind ocurena comportamentuluieste o variant a celei utiliate pentru procentajul acordului

"#emplu$ Doi observatori au !ost de acord ca, comportamentul int a avutloc n intervalele +,0,1, i + 4patru acorduri%, dar numai unul dintre observatori a


8/13

scorat ocurena comportamentului n intervalele 5,6 i 7 40 deacorduri%. &st!el,e#ista un procentaj de 13 8 din nivelul de acord pentru scorareacomportamentului int ca ocurent$

Dac niciun observator nu nregistrea apariia unui comportament int, unindice de fdelitate nu poate f calculat pentru aceast categorie.

+.&cordul asupra observa*iilor nonocurente

&ceast metod de obinere a procentajului de acord ia n considerare numaiacele intervale n care unul sau ambii observatori nregistrea nonocurenacomportamentului. &cordul este defnit ca scorarea ambilor observatori privindnonocurena comportamentului ntr)un interval dat. &ceast procedur estesimilar cu cea de mai sus.

a. Considernd numai acele intervale in care cel puin unul din cei doiobservatori a nregistrat nonocurena comportamentului, se !ac doucalcule) unul al numrului de intervale n care observatorii au !ost deacord asupra nonocurenei unui comportament i unul al numrului deintervale n care observatorii sunt n deacord.

b. mprirea numrului de acorduri la numrul total de acorduri plusdeacorduri i nmulirea cu +. -eultatul este procentajul de acordinterobservatori pentru acele intervale n care comportamentul a !ostscorat ca find nonocurent.

ormula pentru procentajul de acord interobservatori privindnonocurena comportamentului este o alt variant a celei !olositepentru procentajul de acord total$


9/13

"#emplu $ Doi observatori sunt de acord c comportamentul int nua aprut n intervalele /, 2 i 3 4trei acorduri%. n intervalele 5,6 i 7 , totui,numai unul dintre observatori a scorat nonocurena comportamentului 4treideacorduri%. &st!el nivelul de acord a !ost de 1 8 pentru scorareacomportamentului int care nu s)a mani!estat$

Dac niciun observator nu a nregistrat un e#emplu de nonocurena acomportamentului int, un indice al acordului nu poate f calculat pentru aceastcategorie.

Procedurile pentru calculul indicelui Kappa (K)

?appa (?) este o statistic util pentru msurarea fidelit ii interobservatori (sau acordulinterobservatori). ?appa indic propor ia de acorduri, corectate pentru acordurileintamplatoare. 0a i coeficien ii corela ionali, 9appa variaz de la @ & .$$ la 2 &. $$. 0!nd 9appa este pozitiv, propor ia acordului observat este mai mare dec!t propor ia acordului intamplator. 0!nd 9appa este egal cu zero, propor ia de acord observat este egal cu

procentul acordului nt!mpltor. 0!nd 9appa este negativ, propor ia acordului observat este

mai mic dec!t propor ia acordului din nt!mplare.


10/13

?appa poate fi folosit pentru mai multe categorii i evaluatori multipli. 8ormulele suntprezentate mai os pentru calculul ?appa pentru doi observatori i categorii multiple.

$appa pentru doi observatori i categorii multiple

Pentru a introduce formula general 9appa pentru doi observatori i mai multe categorii, s nestabilim un tabel de contingen # # reprezent!nd doi observatori i trei categorii de nregistrare. Denumirile pentru tabelul contingen sunt dup cum urmeaa$

+bservatorul 5

(bservatorul +

iecare celul este desemnat de douindicii, unul pentru rnd i unul pentru coloan 4de e#emplu, n++, n// , n00%. Primul

indice se re!er la rnd, al doilea la coloan. &st!el, n/0desemnea celula din aldoilea rnd, a treia coloan. -ndurile i coloanele corespund la trei categoriidi!erite de observaie4C+, C/, C0%. 9umele marginale pentru (bservatorul + sunt desemnate prin n+:,n/:, i n0:, iar cele pentru (bservatorul / sunt desemnate prin n:+, n:/i n:0.ormula general pentru ;appa este

n++ n+/ n+0

n/+ n// n/0n0+ n0/ n00

n:+ n:/n:0


11/13

= numrul total al perioadelor de observaie 4de e#emplu, intervalele%

"#emplu$ 9 aplicm aceast !ormul pentru unele date ipotetice obinute de doiobservatori care au observat acelai copil utilind trei categorii de observaie peparcursul a + intervale. Cele trei coduri utiliate de cei doi observatori au !ostverbal o?)tas@ 4A(%, motor o?)tas@ 4B(% i on)tas@ 4(%. Datele au !osturmtoarele$

(bservatorul +

+ / 0 5 1 2 36 7 +

A( # # # #

B( # # # #

( # #

(bservatorul /

+ / 0 5 1 2 36 7 +

A( # # # #

B( # # # #

( # #

ntervale (bservator (bservatorul


12/13

ul + /

+ A( B(

/ A( A(

0 B( B(5 ( (

1 ( (

2 A( A(

3 B( B(

6 B( A(

7 B( B(

+ A( A(

Plasnd aceste scoruri ntr)un tabel de contingen reult$


13/13

Punem valorile lui po i pcn !ormul pentru @appa$

n caul n care ar f !ost !olosit un procentaj al acordului direct, nivelul ar f !ostde 6 la suta 4sau cu ct e egal po%. ;appa ne d un coefcient de. 27, un nivelceva mai mic de acord.

"#plicati interpretarea indicelui @appa asa cum este in materialul atasat.

Dupa e#emplele din acest material, pe care le veti scrie la tabla, creati cate une#emplu pentru colegi si le solicitati sa calculee singuri $

a% &cordul global

b% &cordul privind ocurena comportamentului

c% &cordul privind nonocurena comportamentului

d% ndicele @appa

Aerifcati daca toti colegii au obtinut aceleasi reultate. i corectati pe cei care nuau obtinut reultatul corect.

mpartiti colegii in doua mari ecEipe concurente.

seminar calculul indicilor de fidelitate

Documents