Banc de preguntes d'examen de Psicometria: Fiabilitat, Validesa i Baremació

Context

Aquest banc de preguntes comprèn els continguts centrals del segon bloc de Psicometria: la teoria clàssica dels tests (TCT), les estratègies per estimar la fiabilitat (estabilitat temporal, equivalència i consistència interna), els models de validesa (contingut, criteri i constructe mitjançant matriu multirret-multimètode), l'error típic de mesura (SEM), l'auditoria psicomètrica i els processos de baremació i transformació lineal de puntuacions.

1. Preguntes 1-10. Fonaments i mètodes de fiabilitat

Respon a les següents preguntes teòriques sobre el concepte de fiabilitat i els seus mètodes d'estimació:

Respon a les següents preguntes teòriques sobre el concepte de fiabilitat i els seus mètodes d'estimació:

a.

Quins mètodes permeten calcular el coeficient de fiabilitat d'un test i com es classifiquen en funció del factor temporal?

b.

En què consisteix exactament la fiabilitat per consistència interna i quin coeficient la sol representar?

c.

Quines diferències i punts de contacte existeixen entre la fiabilitat per equivalència i la fiabilitat per consistència?

d.

Sota quines condicions s'hauria o no s'hauria d'aplicar la fiabilitat per estabilitat (test-retest)? Justifica-ho.

e.

Quines limitacions metodològiques presenta el procediment de càlcul de fiabilitat per dues meitats ( Split-Half)?

g.

Quins elements tenen en comú la fiabilitat per estabilitat i la de consistència interna?

h.

Pot variar el valor del coeficient de fiabilitat d'un mateix instrument si s'administra a diferents grups normatius? Raona la resposta.

i.

Es manté constant el valor del coeficient de consistència interna al llarg del temps? Justifica-ho.

j.

Entre quins llindars s'acostuma a acceptar un coeficient de fiabilitat en psicometria aplicada?

Context

Aquest banc de preguntes comprèn els continguts centrals del segon bloc de Psicometria: la teoria clàssica dels tests (TCT), les estratègies per estimar la fiabilitat (estabilitat temporal, equivalència i consistència interna), els models de validesa (contingut, criteri i constructe mitjançant matriu multirret-multimètode), l'error típic de mesura (SEM), l'auditoria psicomètrica i els processos de baremació i transformació lineal de puntuacions.

1. Preguntes 1-10. Fonaments i mètodes de fiabilitat

Respon a les següents preguntes teòriques sobre el concepte de fiabilitat i els seus mètodes d'estimació:

Respon a la següent pregunta sobre els supòsits teòrics de la psicometria clàssica:

f.

Quines crítiques principals rep la Teoria de la Puntuació Verdadera (TPV) formulada per Spearman?

2. Preguntes 11-20. Propietats mètriques i correcció d'Spearman-Brown

Analitza les següents propietats psicomètriques sobre variància d'ítems, longitud i estimació:

a.

Què indica habitualment un coeficient de fiabilitat proper a 0,25 o 0,30?

b.

Poden tenir diferents barems d'un mateix instrument valors distints de fiabilitat?

c.

Entre quins valors òptims hauria d'oscil·lar el coeficient de fiabilitat d'un test?

d.

Quants coeficients de fiabilitat ha de reportar un test psicològic?

e.

Es manté constant el coeficient de fiabilitat si es calcula mitjançant procediments diferents? Raona la resposta.

f.

Quines repercussions té sobre la fiabilitat global que els ítems presentin variàncies elevades?

i.

Quina relació conceptual vincula el coeficient Alpha amb el mètode de les dues meitats ( Split-Half)?

j.

Com s'aplica la correcció d'Spearman-Brown en el procediment de dues meitats?

2. Preguntes 11-20. Propietats mètriques i correcció d'Spearman-Brown

Analitza les següents propietats psicomètriques sobre variància d'ítems, longitud i estimació:

g.

Quins supòsits teòrics assumeix la fórmula de profecia d'Spearman-Brown?

h.

Si s'eliminen determinats ítems d'un test, com es veu afectada la fiabilitat? Justifica-ho.

Preguntes 21-30. Error típic de mesura (SEM) i mètode test-retest

Resol les qüestions relatives a l'error típic de mesura, els intervals de confiança i el mètode test-retest:

a.

Com es validen els Tests Referits al Criteri (TRC)? Raona la resposta.

Preguntes 21-30. Error típic de mesura (SEM) i mètode test-retest

Resol les qüestions relatives a l'error típic de mesura, els intervals de confiança i el mètode test-retest:

b.

En quin moment del cicle de disseny d'una prova s'han d'establir els procediments per avaluar fiabilitat i validesa?

Preguntes 21-30. Error típic de mesura (SEM) i mètode test-retest

Resol les qüestions relatives a l'error típic de mesura, els intervals de confiança i el mètode test-retest:

c.

Quins valors d'error típic de mesura (SEM) interessa trobar en un test?

d.

Com s'interpreta psicomètricament un nivell d'error o desviació associat a un valor crític $Z$ de 1,96?

e.

Quin és el menor valor teòric possible per al SEM? Justifica la resposta.

f.

Quina relació matemàtica i funcional hi ha entre el SEM i el coeficient de fiabilitat ($r_{xx'}$)?

g.

Per quina raó professional el SEM resulta sovint més intuïtiu i operatiu per al psicòleg que el mateix coeficient de fiabilitat?

h.

Un examinat ha aconseguit 14 punts en una prova de raonament verbal que presenta $r_{xx'} = 0,8$ i una desviació típica $S_x = 2$. Calcula entre quins límits oscil·larà la seva puntuació verdadera amb un nivell de confiança del 95% ($Z = 1,96$).

Preguntes 21-30. Error típic de mesura (SEM) i mètode test-retest

Resol les qüestions relatives a l'error típic de mesura, els intervals de confiança i el mètode test-retest:

i.

En quines situacions o tipologies de mesura es desaconsella utilitzar el mètode test-retest?

j.

Quins supòsits assumeix el model test-retest respecte als subjectes i a les condicions de mesura?

Preguntes 31-40. Coeficients d'homogeneïtat i validesa de contingut

Resol els problemes i preguntes relacionats amb canvis de longitud, consistència interna i avaluació de contingut:

a.

Un test compost per 100 ítems té un coeficient de fiabilitat $r_{xx'} = 0,7$. Si decidim reduir-lo en 20 ítems, quina serà la nova fiabilitat estimada per la profecia d'Spearman-Brown?

Preguntes 31-40. Coeficients d'homogeneïtat i validesa de contingut

Resol els problemes i preguntes relacionats amb canvis de longitud, consistència interna i avaluació de contingut:

b.

Explica el concepte i la finalitat psicomètrica de l'Alpha de Cronbach.

c.

Quins riscos o limitacions metodològiques implica refiar-se exclusivament del coeficient Alpha?

d.

Quines estratègies pràctiques permeten augmentar la fiabilitat d'una prova? Ordena-les pel seu impacte habitual.

e.

Quines diferències hi ha entre l'Alpha de Cronbach i les fórmules KR20 i KR21 de Kuder-Richardson?

f.

Pot un test presentar valors de variància dels ítems que superin numèricament el coeficient de fiabilitat del propi test? Raona la resposta.

Preguntes 31-40. Coeficients d'homogeneïtat i validesa de contingut

Resol els problemes i preguntes relacionats amb canvis de longitud, consistència interna i avaluació de contingut:

g.

Si un test obté un coeficient de fiabilitat baix, com seran els seus coeficients de validesa?

Preguntes 31-40. Coeficients d'homogeneïtat i validesa de contingut

Resol els problemes i preguntes relacionats amb canvis de longitud, consistència interna i avaluació de contingut:

h.

Com es garanteix formalment la validesa de contingut en un procés de desenvolupament de tests?

i.

Entre quins límits numèrics oscil·la el coeficient de validesa de contingut?

j.

Quan es pot concloure que un qüestionari d'actituds o personalitat no posseeix validesa de contingut?

5. Preguntes 41-50. Validesa de criteri, convergent i discriminant

Resol les preguntes teòriques i d'aplicació sobre validesa associada a criteris i constructe:

a.

Posa un exemple de comprovació de la validesa concurrent per a una prova d'ansietat o emprenedoria.

b.

Proposa un disseny per comprovar la validesa predictiva d'un qüestionari d'esgotament professional (burnout).

d.

Entre quins límits oscil·la el coeficient de validesa de criteri? Raona-ho.

e.

Quants coeficients de validesa de criteri pot arribar a tenir una mateixa prova?

g.

Quines precaucions metodològiques s'han de prendre a l'hora de triar el criteri extern en un procés de validació?

h.

Quina relació exacta hi ha entre els coeficients de fiabilitat i de validesa d'una prova?

i.

En què difereixen la validesa convergent i la validesa discriminant?

j.

Quina vinculació hi ha entre la validesa de criteri i els tests referits al criteri (TRC)?

5. Preguntes 41-50. Validesa de criteri, convergent i discriminant

Resol les preguntes teòriques i d'aplicació sobre validesa associada a criteris i constructe:

c.

Com es pot incrementar la fiabilitat global aplicant l'anàlisi individual d'ítems?

5. Preguntes 41-50. Validesa de criteri, convergent i discriminant

Resol les preguntes teòriques i d'aplicació sobre validesa associada a criteris i constructe:

f)

Quin efecte té sobre la fiabilitat la depuració o exclusió dels subjectes amb Patrons Anòmals de Resposta (PAR)?

6. Preguntes 51-59. Matriu multirret-multimètode i paradoxa de Loevinger

Respon a les següents qüestions sobre models multirret-multimètode i paradoxes de mesura:

a)

Què és la validesa conseqüencial?

b)

Quin ordre de magnitud haurien de mostrar els coeficients de validesa discriminant?

c)

Es manté constant el coeficient de validesa de criteri si s'utilitzen criteris externs diferents? Raona la resposta.

d)

A quins coeficients de la matriu Multitret-Multimètode (MTMM) afecta en menor mesura l'existència o carència d'un marc teòric sòlid?

e)

Quina jerarquia de valors s'espera trobar en una matriu MTMM per confirmar la validesa de constructe?

f)

Entre quins valors límit oscil·len els coeficients que figuren a la matriu MTMM?

g)

Si en una matriu MTMM trobem un coeficient amb un valor de 0,05, de quin tipus de coeficient es tracta habitualment i com s'interpreta?

h)

En què consisteix la "Paradoxa de Loevinger" o paradoxa d'atenuació en psicometria?

6. Preguntes 51-59. Matriu multirret-multimètode i paradoxa de Loevinger

Respon a les següents qüestions sobre models multirret-multimètode i paradoxes de mesura:

i.

Quina utilitat té el procés de tipificació de les puntuacions d'un test?

7. Preguntes 60-67. Tipificació, barems i escales de mesura

Resol les qüestions relatives a l'elaboració de barems i transformacions d'escala:

a.

Quins són els principals tipus d'estandardització de puntuacions en psicometria segons el marc de referència?

b.

Esmenta tres problemes habituals en la construcció i ús dels barems d'un test.

c.

Què comparteixen les Puntuacions Típiques Derivades (PTD) i les Puntuacions Típiques Derivades de Classe (PTDC)?

d.

Quina repercussió té la comprovació de l'ajust a la distribució normal sobre la tipificació de les puntuacions?

e.

Com es defineix i quins paràmetres té l'escala d'Eneatips (estanines)?

f.

A quina escala de mesura pertanyen les puntuacions quan la distribució s'ajusta a la llei normal?

g.

En quines circumstàncies pràctiques no s'haurien d'utilitzar els barems publicats d'un test?

8. Preguntes 134-138. Patrons anòmals de resposta i selecció d'ítems

Analitza les següents preguntes sobre patrons de resposta i avaluació d'ítems:

a.

Què és un Patró Anòmal de Resposta (PAR)? Descriu un exemple clar.

b.

Què s'entén per coherència del patró de respostes d'un examinat?

c.

Quin efecte produeixen els PAR sobre els indicadors obtinguts en l'anàlisi d'ítems?

d.

Quina finalitat metodològica té contrastar la Valoració de la Dimensió de l'Ítem inicial (VDI pre) amb la VDI obtinguda a posteriori (VDI post)?

9. Pregunta A. Procediments complets de càlcul de la fiabilitat

Desenvolupa un esquema exhaustiu i detallat dels continguts bàsics i dels procediments metodològics per calcular el coeficient de fiabilitat ($r_{xx'}$), integrant la classificació temporal, els seus requisits d'aplicació i les fórmules associades.

Pregunta B. Procediments de determinació de la validesa

Elabora un esquema detallat amb els principals procediments per avaluar la validesa d'un nou test psicològic, diferenciant els tres enfocaments tradicionals (contingut, criteri i constructe) i els factors que hi intervenen.

Pregunta C. Validació de constructe i matriu MTMM

Descriu detalladament les fases del procés de validació de constructe d'un nou test i explica l'estructura i interpretació dels quatre tipus de coeficients que conformen la matriu Multitret-Multimètode (MTMM) de Campbell i Fiske.

Pregunta D. Estandardització de puntuacions i barems

Descriu el procés complet d'estandardització de les puntuacions d'un test i exposa detalladament les principals escales típiques derivades (PTD i PTDC) utilitzades en la baremació psicomètrica.

Pregunta E. Auditoria de tests: enfocament preventiu i reactiu

Desenvolupa el concepte d'auditoria de tests, explicant les diferències entre l'auditoria preventiva i la reactiva, així com les dues línies d'actuació (qualitativa i quantitativa) que s'apliquen durant la revisió.

Pregunta F. Fonamentació metodològica del coeficient Alpha

Explica detalladament el fonament metodològic del coeficient Alpha de Cronbach, el seu procediment de càlcul a partir de les variàncies dels ítems i les particularitats de les fórmules KR20 i KR21 en reactius dicotòmics.