Quinta evaluación de tests editados en España: mirando hacia atrás, construyendo el futuro

a psicología como ciencia necesi a de una con inua y igu osa e aluación de sus mé odos, p ocedimien os, écnicas e ins umen os. Los es s, una de las p incipales he amien as que u ilizan los psicólogos en su p ác ica p o e- sional, no pueden se una excepción. A pa i de ellos se o- man decisiones que a ec an a la ida de las pe sonas y a las o ganizaciones eniendo un cla o impac o en la sociedad. Po ende, los es s se deben some e a esc u inio median e un p o- ceso de e isión sis emá ico, igu oso e independien e que ga- an ice su calidad y u ilidad. Como señalan Muñiz e al. (2011), la u ilización co ec a de los es s equie e, po un la- do, de ins umen os con adecuadas p opiedades psicomé icas (p.ej., iabilidad de las pun uaciones, e idencias de alidez, e c.), y po o o, de una ace ada p epa ación écnica pa a su co ec a u ilización po pa e de los p o esionales. Los es s de- ben ene una calidad y igo empí icamen e demos ados. Además, los psicológicos deben se compe en es y ene in o - mación con as ada que les pe mi a selecciona aquellos es s más adecuados pa a su p opósi o (He nández, Ponsoda, Mu- ñiz, P ie o, y Elosua, 2016). Todo ello queda ecogido en el Código Deon ológico del Psicólogo y en las dis in as di ec ices desa olladas a al e ec o an o a ni el nacional como in e na- cional (Muñiz, 1997; Muñiz y Ba am, 2007). Po ejemplo, el a ículo 17º del Código Deon ológico menciona que el psicólo- go iene que es a p o esionalmen e p epa ado y especializado en la u ilización de mé odos, ins umen os, écnicas y p ocedi- mien os que adop e en su abajo y debe econoce los lími es de su compe encia y las limi aciones de sus écnicas. El Consejo Gene al de la Psicología de España (COP) desde el año 2010 iene e isando, de o ma anual, los es s edi ados en España (Elosua y Geisinge , 2016; He nández, Tomás, Fe- QUINTA EVALUACIÓN DE TESTS EDITADOS EN ESPAÑA: MIRANDO HACIA ATRÁS, CONSTRUYENDO EL FUTURO FIFTH REVIEW OF TESTS PUBLISHED IN SPAIN: LOOKING BACK, BUILDING THE FUTURE Edua do Fonseca-Ped e o1y José Muñiz2 1Uni e sidad de La Rioja. 2Uni e sidad de O iedo La psicología como ciencia necesi a de una con inua y igu osa e aluación an o de sus mé odos y p ocedimien os como de sus écni- cas e ins umen os. Los es s, una de las p incipales he amien as que u ilizan los psicólogos en su quehace dia io, no pueden se una excepción. Se hace necesa io some e a esc u inio los ins umen os de e aluación psicológica median e un p oceso de e isión sis e- má ico, igu oso e independien e que ga an ice su calidad y u ilidad. Con es e in, desde el año 2010 la Comisión Nacional de Tes s del Colegio O icial de Psicólogos iene e isando anualmen e algunos de los es s más u ilizados po los psicólogos españoles. Tal p oceso de e isión se basa en un modelo eu opeo de e aluación de la calidad de los es s adap ado al español y que se ope a i iza median e el Cues iona io de E aluación de Tes s-Re isado. En es e abajo se p esen a la quin a e aluación de es s edi ados en Espa- ña. Se e alua on un o al de once es s, pa icipa on un o al de cua o casas edi o iales y 24 expe os en un p oceso de e isión po pa es. En líneas gene ales puede a i ma se que la calidad de los es s e aluados ue adecuada, si bien se han encon ado algunas o alezas y debilidades. Finalmen e se comen an las p incipales conclusiones y se analizan las posibles líneas de u u o en la e alua- ción de los es s en España. Palab as cla e. Tes s, Uso de los es s, E aluación de es s, Psicome ía, Calidad de los es s, Medición. Psychology, as a science, needs a con inuous and igo ous e alua ion o bo h i s me hods and p ocedu es as well as i s echniques and ins umen s. The es is one o he main ools used by psychologis s in hei daily wo k, and canno be an excep ion. The measu ing ins umen s o psychological e alua ion mus be analyzed h ough a sys ema ic, igo ous and independen p ocess ha gua an ees hei quali y and use ulness. To his end, since 2010 he Na ional Tes Commission o he Spanish Psychological Associa ion has been e iewing annually some o he es s mos used by Spanish psychologis s. This e iew p ocess is based on he Eu opean es e iew model adap ed o Spanish and i is pe o med h ough he Tes s Re iew Ques ionnai e-Re ised. In he p esen wo k he i h e alua ion o es s published in Spain is p esen ed. A o al o ele en es s we e e alua ed, wi h he pa icipa ion o ou publishing houses, and 24 expe s in a pee e iew p ocess. In gene al e ms, he quali y o he measu emen ins umen s e alua ed in his i h e ision was adequa e, al hough he e a e a numbe o s eng hs and weaknesses. Finally he main conclusions a e discussed and he possible u u e esea ch a eas in he e alua ion o he es s in Spain a e analyzed. Keywo ds. Tes s, Use o es s, E alua ion o es s, Psychome ics, Quali y o he es s, Measu emen . Recibido: 10 mayo 2017 - Acep ado: 30 agos o 2017 Co espondencia: Edua do Fonseca-Ped e o. Depa amen o de Ciencias de la Educación. Uni e sidad de La Rioja. C/ Luis de Ulloa, 2, Edi icio VIVES. 26004 Log oño, La Rioja. España. E-mail: [email p o ec ed] A ículos Papeles del Psicólogo / Psychologis Pape s, 2017. Vol. 38(3), pp. 161-168 h ps://doi.o g/10.23923/pap.psicol2017.2844 h p://www.papelesdelpsicologo.es h p://www.psychologis pape s.com L 161 e es, y Llo e , 2015; Muñiz e al., 2011; Ponsoda y Hon an- gas, 2013). He nández e al. (2016) indican que el obje i o úl- imo de la e aluación de la calidad de los es s u ilizados en España es p opo ciona a los usua ios de ins umen os de y e aluación psicológica in o mación p ecisa y accesible sob e la calidad de los es s disponibles. Ac ualmen e se acaba de ina- liza la quin a edición. El p incipal obje i o de es e a ículo es p esen a los p incipales esul ados de es a úl ima e aluación de los es s edi ados en España. El p ime luga se ealiza un b e e eco ido his ó ico donde se examinan los p incipales hi- os del p oceso de e aluación de es s edi ados en nues o país. Se p e ende o ece con ello una pano ámica del es ado ac ual de la cues ión. A con inuación se de alla de o ma po meno i- zada el p oceso de e isión y los p incipales esul ados de es a quin a e aluación de es s. Finalmen e, en e ce luga , se co- men an las p incipales conclusiones así como u u as líneas de abajo. EVALUACIÓN DE TESTS EN ESPAÑA: EL CAMINO RECORRIDO Cuando se les p egun a a los p o esionales de la psicología cuales son las p incipales demandas sob e el uso de es s e ie- en, en e o as, la necesidad de dispone in o mación écnica y psicomé ica sob e los mismos que les ayude a oma deci- siones undamen adas (Muñiz y Fe nández-He mida, 2010; E e s e al., 2017). Pa a da espues a a es as y o as cues io- nes la Comisión de Tes s de la Eu opean Fede a ion o Psycho- logis s’ Associa ions (EFPA, h p://www.e pa.eu/) desa olló un modelo de e aluación es s que ue adap ado al español po P ie o y Muñiz (2000). En el año 2010 la Comisión Nacio- nal de Tes s del COP decidió pone en ma cha la p ime a e i- sión de es s cuyos esul ados ue on publicados en el 2011 (Muñiz e al., 2011). Pos e io men e, casi de o ma anual, se ha enido ealizando una nue a e isión de es s. La e olución his ó ica del p oceso de e aluación de es s edi ados en Espa- ña así como la in o mación ele an e de cada e aluación anual se ecoge en la Figu a 1. Todos los es s e aluados en las cinco e isiones se p esen an en la Figu a 2. Asimismo, los esul ados de odas y cada una de las e aluaciones ealizadas has a la echa se encuen an disponibles en la web del COP: h ps://www.cop.es/index.php?page=e aluacion- es s- edi ados-en-espana. Se in i a a los p o esionales a isi a y analiza los es s e aluados. Como se puede obse a en las Fi- gu as 1 y 2 has a el momen o se han e isado un o al de 55 es s p oceden es de di e en es casas edi o iales, han pa icipa- do más de 100 e iso es y cinco coo dinado es. Es digno de mención que el núme o de expe os que e isan las p uebas no es la suma a i mé ica de las cinco e aluaciones, pues algunos de ellos han pa icipado en a ias ediciones. También se quie- e menciona que los p o esionales u ilizan es os in o mes dis- QUINTA EVALUACIÓN DE TESTS 162 A ículos FIGURA 1 EVOLUCIÓN HISTÓRICA DEL PROCESO DE EVALUACIÓN DE TESTS EDITADOS EN ESPAÑA 1999 EFPA Modelo eu opeo de e aluación de es s Adap ación del modelo de e aluación de es s 2000 P ime a e aluación Segunda e aluación Te ce a e aluación Cua a e aluación Re isión del modelo español Quin a e aluación 2011 José Muñiz 10 es s y 20 e iso es h p://www. papelesdelp sicologo.es/ esumen?pii =1947 2013 Vicen e Ponsoda 12 es s y 25 e iso es h p://www. papelesdelp sicologo.es/ esumen?pii =2232 2015 Ana He nández 11 es s y 22 e iso es h p://www. papelesdelp sicologo.es/ esumen?pii =2484 2016 Paula Elosua 11 es s y 22 e iso es h p://www. papelesdelp sicologo.es/ esumen?pii =2693 2016 He nández e al. CET-R: Cues iona io de E aluación de Tes s- Re isado h p://www.co p.es/uploads/ pd /CET- R.pd h p://www.pa pelesdelpsicol ogo.es/ esum en?pii=2775 2017 Edua do Fonseca 11 es s y 24 e iso es h ps://www. cop.es/inde x.php?page =e aluacion - es s- edi ados- en-espana P ie o y Muñiz CET: Cues iona io de E aluación de Tes s h p://www.pa pelesdelpsico logo.es/ esu men?pii=110 2 h p://www. e pa.eu/ Re isado en 2013 h p://www. psico hema. com/psico h ema.asp?id =4112 EDUARDO FONSECA-PEDRERO Y JOSÉ MUÑIZ 163 A ículos ponibles en la página web del COP. Un indicado de ello pue- de se el núme o de desca gas de es os in o mes. Con es e in se ha ealizado un análisis del olumen de desca gas en el pe- iodo comp endido en e los años 2012 y 2017. De años an e- io es no se dispone de es a in o mación. Los esul ados del núme o de desca gas es el siguien e: Sis ema pa a la E alua- ción de la Conduc a Adap a i a n=105, In en a io B e e de 18 Sín omas n=101, Escala de Memo ia de Wechsle -IV n=65, Tes Boehm de Concep os Básicos-3 P eescola n=101, Ba e ía de E aluación Cogni i a de la Lec u a y Esc i u a n=97, Cues iona- io O iedo pa a la E aluación de la Esquizo ipia n=94, In en a- io de Ansiedad de Beck n=111, In en a io de Dep esión de Beck-II n=104, Cues iona io pa a la De ección de los T as o nos del Compo amien o en Niños y Adolescen es n=105, In en a io Mul i ásico de la Pe sonalidad de Minneso a-2 Rees uc u ado n= 164, Escala de in eligencia de Wechsle pa a niños-IV n=134 y 16 Fac o es de Pe sonalidad, quin a edición n=119. El modelo desa ollado po la EFPA pa a la e aluación de la calidad de los es s se ope a i iza en un ins umen o de medi- da denominado Cues iona io de E aluación de Tes s (CET) (Muñiz e al., 2011). El CET pe mi e una e aluación cuali a i- a y cuan i a i a del es que es obje o de e isión, es o es, a- a de examina su calidad y u ilidad. El CET se puede consul a en el abajo de Muñiz e al. (2011). Pos e io men e, en el año 2013, la EFPA e isó es e modelo de e aluación (E e s e al., 2013). Los cambios in oducidos en el modelo unido a modi icaciones suge idas en las di e en es e aluacio- nes anuales po los coo dinado es y e iso es así como a las nue as di ec ices de los S anda ds (Ame ican Educa ional Re- sea ch Associa ion, Ame ican Psychological Associa ion, y Na ional Council on Measu emen in Educa ion, 2014) (p. ej., las e e idas a la ob ención de e idencias de alidez y su axonomía) lle a on a la modi icación del CET dando luga al CET-Re isado (CET-R). Es os cambios se han in oducido en la p esen e quin a e aluación de es s. Pa a una análisis más de allado de los cambios in oducidos se puede consula el excelen e abajo de He nández e al. (2016). Además, el CET-R se puede desca ga en el siguien e enlace: h p://www.cop.es/uploads/pd /CET-R.pd . El CET-R, al igual que su e sión p edeceso a, inco po a es g andes apa ados: a) desc ipción gene al del es ; b) alo ación de las ca ac e ís i- cas del es (p.ej., iabilidad, e idencias de alidez, e c.); y c) alo ación global del es . Es una he amien a in e esan e a u i- liza po odos los p o esionales de la psicología no solo con i- nes p ác icos o p o esionales sino ambién con ines o ma i os. Más aún, el CET-R puede se u ilizado a modo de guía o es án- da , con ibuyendo a mejo a el p oceso de cons ucción y edi- ción de es s publicados en España, aspec o que edunda a su ez en la capacidad de oma de decisiones po pa e de los p o esionales de la psicología. El p oceso de e isión de es s comienza po la designación po pa e de la Comisión Nacional de Tes s de COP de un coo - dinado pa a la e aluación de ese año. Es a comisión en cola- bo ación con los edi o es ambién designa los es s que se án e isados en esa anualidad. Una ez seleccionados los es s, en- e 10 o 12 según el año, el coo dinado selecciona un conjun o de expe os en la emá ica que e isan las p uebas median e un p oceso de e aluación po pa es (simila al que se u iliza en la e isión de a ículos cien í icos). La selección de es os e iso es se lle a a cabo siemp e de acue do a unos c i e ios y es ánda- FIGURA 2 RELACIÓN DE TESTS REVISADOS EN LAS CINCO EVALUACIONES P ime a e aluación (2011) WAIS-III WISC-IV MCMI-III MMPI-2-RF 16PF-5 PROLEC-R EFAI NEO PI-R EVALUA IGF BAI BAS-II BDI-II CEAM CompeTEA EPV-R ESCOLA ESPERI Me ill-Pame -R PAI RIAS/RIST WNV CSE BECOLE BOHEM-3 BOHEM-3- P eescola CESQT ECLE ESQUIZO-Q ECI SOC TRAUMA WAIS-IV ABAS-II BADyG/M- BETA BSI-18 CECAD EHPAP PAIB-1 PECC SCIP WMS-IV WPPSI-IV BADYG-E3 CAEPO EDI-3 EVAPROMES LAEA MABC-2 NEPSY-II PAIB 2 y 3 PRO 1-2 y 3 TEMT WISC-V Segunda e aluación (2013) Te ce a e aluación (2015) Cua a e aluación (2016) Quin a e aluación (2017) es cien í icos, que con pun uales modi icaciones, se man ienen in a ian es a a és de las sucesi as e aluaciones. Se seleccio- nan dos e iso es, siemp e que las ci cuns ancias lo pe mi an, uno de ellos con un pe il más écnico-psicomé ico, y o o con un pe il más cen ado en aspec os sus an i os. Se ga an iza su anonima o e e ido a la p ueba que alo a, se solici a su pa i- cipación y la ausencia de con lic o de in e eses. En la g an ma- yo ía de los casos, y sal o causas de ue za mayo , los e iso es acep an g a amen e la a ea encomendada. A odos los e iso es se les en ega una copia del es que an a e alua (cedido de o ma g a ui a po los edi o es) así como una g a i i- cación económica simbólica de 50 eu os. Cada e iso ealiza un in o me independien e del es que en ía al coo dinado en un plazo de es meses. Ob iamen e du an e odo el p oceso el coo dinado es á abie o a esponde a cualquie duda o suge- encia an o de los e iso es como de los edi o es. A con inua- ción el coo dinado analiza los comen a ios y pun uaciones p oceden es de los dos e iso es y con ecciona un p ime in o - me inal. Es e in o me es en iado a las espec i as casas edi o- iales que, en un plazo de ap oximadamen e de un mes, esponden de o ma azonada, si así ue a el caso, a aquellos comen a ios y/o pun uaciones que es imen opo uno. De es a o ma odas las pa es implicadas o man pa e del p oceso. Fi- nalmen e, con dichos comen a ios el coo dinado elabo a un in- o me inal de cada es que es en iado a la Comisión Nacional de Tes s y que pos e io men e es subido a la página web pa a su consul a ( éase el link a iba). Cabe sub aya dos aspec os impo an es, en p ime luga , el p oceso de e aluación de las p uebas es o almen e independien e an o de las edi o iales y au o es de los es s, como del COP, solo depende de los e alua- do es y del coo dinado de la e aluación. Como odo p oceso de e aluación po pa es no es pe ec o, nada humano lo es, pe- o nos pa ece el mejo de los posibles. En segundo luga , la e aluación de los es s no cons i uye una ce i icación de las p uebas po pa e de la Comisión de Tes s del COP, se a a de una e aluación en la que se ponen sob e la mesa los pun os ue es y débiles de las p uebas al como los es iman los e alua- do es en un momen o dado, siguiendo el modelo de e aluación de es s CET-R. La iloso ía que guía las e aluaciones de los es s no es la censu a de las p uebas, se a a de ayuda a los edi o- es y au o es a mejo a sus es s, apo ando las e idencias de alidez que ga an icen las in e encias hechas a pa i de las pun uaciones. Como bien señala a el eg egio ísico Lo d Kel in, aquello que no se e alúa no se puede mejo a . QUINTA EVALUACIÓN DE TESTS En es e apa ado se comen an el p oceso de e aluación, los es s e isados, los e iso es pa icipan es y los p incipales e- sul ados de la quin a e aluación de es s edi ados en España. P oceso de e aluación El p oceso de e isión gene al que se ha seguido en la p esen e e aluación se ha mencionado an e io men e, si bien aquí se quie en comen a de o ma b e e aquellos aspec os especí icos conce nien es a la quin a e aluación de es s. Una ez designado los es s a alo a el coo dinado (p ime au o de es e abajo) ealizó una selección de expe os pa a la e isión de los es s, a los cuales se les en ió una in i ación o mal po email (ene o 2016). De los seleccionados solo dos de ellos no pudie on pa i- cipa , po mo i os o almen e comp ensibles, po lo que se selec- ciona on o os dos nue os e iso es. A con inuación se p ocedió al en ío del ma e ial que incluía el modelo de e aluación (CET- R), las ins ucciones de cumplimen ación y el es a e alua (do- cumen ación, CD, hojas de co ección, e c.) (ma zo/ab il 2016). Du an e odo es e p oceso se soluciona on odas aquellas posi- bles di icul ades y cues iones que ue on su giendo. Po ejemplo, a modo anecdó ico una de las p uebas ue en iada a EEUU. Cuando e iso ecibió el es es e llegó abie o ya que había si- do inspeccionado en aduanas. En e los meses de julio y sep- iemb e de 2016 los e iso es ue on en iando las e aluaciones al coo dinado . A con inuación el in o me p elimina se emi ió a los edi o es que espondie on de o ma e icaz en e los meses de no iemb e y diciemb e de 2016. Finalmen e en e diciemb e de 2016 y ene o del 2017 se con ecciona on los in o mes inales que ue on en iados al COP y ue on colgados en la página web an e io men e ci ada. Tes s y e iso es seleccionados Los es s seleccionados en la quin a e aluación se ecogen en la Tabla 1. Como se puede obse a ue on un o al de 11 p o- ceden es de cua o casas edi o iales (CEPE, EOS, PEARSON, TEA). La lis a o iginal de es s seleccionados po la Comisión Nacional de Tes s pa a es a quin a e aluación su ió dos lige- as modi icaciones que se comen an a con inuación. P ime a, o iginalmen e ue on 12 las p uebas elegidas. Se había inclui- do el Pe sonali y and P e e ence In en o y (PAPI), come cializa- do en España po FACTHUM y cuyo p opie a io in e nacional es CUBIKS limi ed, no obs an e el di ec o de la casa edi o ial CUBIKS limi ed explicó en una ca a debidamen e azonada al COP que el PAPI se encon aba en pleno p oceso de ac ualiza- ción, po lo que se ía necesa io pospone su e aluación pa a u u as ediciones. Segundo, ambién se seleccionó el Tes de In- eligencia Ve bal-E2 (INVE-E2) de CEPE, que po es a ambién en p oceso de ac ualización, se aco dó po unanimidad sus i- ui lo po la ba e ía PAIB 2 y 3. Todos es os cambios ue on consensuados an o po la Comisión Nacional de Tes s del COP como po los espec i os edi o es. En la Tabla 2 se ecogen los 24 e iso es que pa icipa on en es a quin a e aluación de es s. Como se comen ó an e io men- e se selecciona on dos pa a cada p ueba, si bien en dos casos conc e os donde se encon a on cla as di e gencias en e e i- so es se seleccionó un e ce o que ayudó al coo dinado a con- ecciona el in o me inal del espec i o es . La selección de los e iso es se lle ó a cabo conside ando, en la medida de lo po- sible y al igual que en e aluaciones p e ias, los siguien es c i- e ios: a) ausencia de con lic o de in e eses u o as cues iones QUINTA EVALUACIÓN DE TESTS 164 A ículos é icas; b) amplia las ins i uciones pa icipan es en la e alua- ción nacional de es s (p. ej., conseje ías de sanidad y educa- ción, psicólogos clínicos, en idades de e aluación y medición ex anje as, e c.); c) no habe pa icipado en e aluaciones p e- ias; y d) jó enes in es igado es o p o esionales de la psicolo- gía. Se p e endió ab i el abanico de e iso es y expe os ue a de la academia y más allá del con ex o español, aspec o que p e endía, en esencia, da a conoce y ex ende el uso del mo- delo español de e aluación de es s en e los p o esionales de la psicología. Que emos mos a nues o más since o ag adeci- mien o al buen hace de odos los e iso es y edi o es que han pa icipado en es a quin a e aluación, es e p oceso no hubiese llegado a buen pue o sin su es imable ayuda y colabo ación. Resul ados En la Tabla 3 se ecogen los p incipales esul ados de i ados de la quin a e aluación de es s en España. Como se puede ob- se a las pun uaciones ue on, en la mayo ía de los casos, su- pe io es a 3,5 (cali icación de buena a excelen e). Del o al de alo aciones únicamen e en cua o casos las pun uaciones ue- on in e io es a 3. Como o alezas se debe menciona que los es s e isados p esen an, en é minos gene ales, una excelen e calidad de sus ma e iales y documen ación, adecuados ni eles de iabilidad y excelen es ba emos además de su icien es e i- dencias de alidez. Como limi aciones o debilidades se pod í- an menciona la al a de es udios sob e uncionamien o di e encial de los í ems en algunos de los es s analizados o la o al ausencia de análisis psicomé icos bajo el p isma de la Teo ía de Respues a a los Í ems (TRI). Hay dos aspec os que equie en un comen a io: a) la di icul ad a la ho a de in e p e a , analiza y pun ua de e minados í ems del CET-R como, po ejemplo, los e e idos al análisis de í ems o la alidez c i e ial; y b) en dos casos conc e os se halla on di e- encias sus anciales en e las pun uaciones y comen a ios en ia- dos al coo dinado po los dos e iso es, po lo que hubo que ecu i a una e ce a opinión. Re e en e al p ime pun o esul a- dos simila es se han encon ado en e aluaciones p e ias (Elosua y Geisinge , 2016; He nández Baeza e al., 2015; Muñiz e al., 2011; Ponsoda y Hon angas, 2013). En es e sen ido algunos de los í ems del CET-R pa ecen se di íciles de alo a po los expe - os. Ya en e aluaciones p e ias, y con la inalidad de subsana es a limi ación, se ecu ió a inco po a unas pau as gene ales pa a la u ilización del CET/CET-R así como una mayo explica- ción de algunos de los í ems. No obs an e, pa ece se que es a di icul ad con inúa en la quin a e aluación. Re e en e al segundo pun o (pa cialmen e elacionado con el an e io ) no cabe duda que el p oceso de e isión po pa es es uno de los muchos posi- bles pa a la e aluación de la calidad de es s, y iene p os y con- as. En el mundo de e isión po pa es, bien sea de a ículos cien í icos, p oyec os, con a os, o en nues o caso es s, es e- cuen e encon a disc epancias en e los e iso es, po lo que hay que ecu i a un e ce e aluado e incluso a a ias ondas de e aluación. Es algo consus ancial al p oceso de e isión y no EDUARDO FONSECA-PEDRERO Y JOSÉ MUÑIZ 165 A ículos TABLA 1 RELACIÓN DE INSTRUMENTOS DE MEDIDA ANALIZADOS EN LA QUINTA EVALUACIÓN DE TESTS Ac ónimo Tes Edi o ial NEPSY-II NEPSY-II Ba e ía Neu opsicológica In an il Pea son Educa ion WISC-V Escala de In eligencia de Wechsle pa a Pea son Educa ion Niños-V MABC-2 E aluación de la Ba e ía de E aluación Pea son Educa ion del Mo imien o pa a niños-2 TEMT Tes de E aluación Ma emá ica Temp ana EOS EVAPROMES E aluación de los P ocesos Me acogni i os EOS en Esc i u a LAEA Lis ado de Adje i os pa a la E aluación TEA ediciones del Au oconcep o EDI-3 In en a io de T as o nos de la Conduc a TEA ediciones Alimen a ia-3 CAEPO Cues iona io de A on amien o al Es és TEA ediciones pa a Pacien es Oncológicos BADYG-E3 Ba e ía de Ap i udes Di e enciales y CEPE, S.L. Gene ales Reno ado E3 PRO 1-2 y 3 P ueba de Rendimien o O og á ico CEPE, S.L. P ima ia (1-2) y Secunda ia (3) PAIB 2 y 3 P ueba de Aspec os Ins umen ales Básicos CEPE, S.L. en Lenguaje y Ma emá icas (2 y 3) TABLA 2 REVISORES QUE HAN PARTICIPADO EN LA QUINTA EVALUACIÓN DE TESTS Nomb e Filiación Ca men Ga cía Ga cía Uni e sidad Au ónoma de Mad id Ja ie Suá ez Ál a ez Uni e sidad de O iedo Bea iz Lucas Molina Uni e sidad de Valencia Alicia Pé ez de Albéniz Uni e sidad de La Rioja Ja ie O uño-Sie a Uni e sidad Loyola Se illa Félix Inchaus i Gómez Conseje ía de Salud de Na a a Jo ge López Puga Uni e sidad Ca ólica de Mu cia Ana Vanesa Vale o Uni e sidad de La Rioja I ene Solbes Canales Uni e sidad Complu ense de Mad id Joan Guà dia Olmos Uni e sidad de Ba celona Da id Ál a ez Ga cía Uni e sidad de O iedo Rica do Olmos Albace e Uni e sidad Au ónoma de Mad id Isabel Bení ez Baena Uni e sidad de Loyola Se illa Susana Al-Halabí Díaz Uni e sidad de O iedo Glo ía Ga cía Fe nández Uni e sidad Complu ense de Mad id Susana Sie a Baig ie Uni e sidad de O iedo C is ina Anguiano Ca asco Educa ional Tes ing Se ice (ETS) Me cedes Paino Piñe o Uni e sidad de O iedo Robe o Lozano He ce Conseje ía de Educación de La Rioja Sil ia Sas e i Riba Uni e sidad de La Rioja Juana Gómez Beni o Uni e sidad de Ba celona Joan Pe e Fe ando Uni e sidad Ro i a i Vi gili Nekane Ballue ka Lasa Uni e sidad del País Vasco Mai e Ga aigo dobil Landazabal Uni e sidad del País Vasco necesa iamen e se debe in e p e a como algo nega i o. En u u- as ediciones al ez se ía necesa io segui mejo ando la com- p ensión de algunos de los í ems del CET-R, aspec o que se pod ía sol en a , po ejemplo, desa ollando ideo- u o iales, ejemplos conc e os o inco po ando más in o mación écnica-psi- comé ica en el CET-R. ALGUNAS CONCLUSIONES T as un lus o de e aluaciones de es s edi ados en España se puede deci que el p oceso se es á consolidando y goza de bue- na salud, no obs an e oda ía nos encon amos en los es adios iniciales, más aún si nos compa amos con o os países, po ejemplo Holanda, que ha e aluado odos los es s edi ados en ese país (E e s, 2012), o Es ados Unidos, donde la o ganización especializada BUROS ya ha e aluado más de 10.500 es s (Elo- sua y Geisinge , 2016). Has a el momen o en España se han e- isado un o al de 55 es s p oceden es de di e en es casas edi o iales, han pa icipado más de 100 e iso es y cinco coo - dinado es. Ac ualmen e ya se ha comenzado la sex a e isión, coo dinada po la Ca ed á ica de la Uni e sidad de Mu cia Ma- ía Dolo es Hidalgo Mon esinos. En é minos gene ales, la e a- luación de la calidad de los es s median e el CET/CET-R en las úl imas cinco e aluaciones a ojan unos esul ados que demues- an que nues os es s iene una calidad azonablemen e buena, con cla as o alezas pe o ambién aspec os a mejo a . La inco po ación del CET-R en es a quin a e aluación ha sido o almen e adecuada. Además, los esul ados encon ados an- o a ni el cuan i a i o como cuali a i a han sido plenamen e sa- is ac o ios, si bien es cie o que se ienen que inco po a nue os da os sob e el es udio del uncionamien o di e encial de los í ems o in a ianza de medición, así como nue os es udios bajo la óp ica de la TRI que añadan in o mación, en e o os aspec os, de las cu as ca ac e ís icas de los í ems o de las un- ciones de in o mación de los es s. Se debe eco da que el es- udio del uncionamien o di e encial de los í ems, pe mi e ga an iza , en cie a medida, la equidad en el p oceso de me- dición. La ausencia de uncionamien o di e encial en un í em supone que la p obabilidad de espues a co ec a depende únicamen e del ni el del pa icipan e en la a iable obje o de medición, y no es á condicionada po la pe enencia a un g u- po o ca ac e ís ica (p. ej., géne o, cul u a, e nia, e c.). En su- ma, hay que ga an iza que la e aluación se lle a a cabo con equidad y de o ma jus a. Los au o es del p esen e abajo son plenamen e conocedo es de que an o los in es igado es y los p o esionales de la psicología como los edi o es es án aba- jando in ensamen e en es as y o as líneas de in e és. El CET-R pa ece se una he amien a in e esan e pa a mejo a el uso de los es s y la p ác ica p o esional de los psicólogos. Co- mo bien señalan Elosua y Geisinge (2016) la publicación de e- isiones independien es suje as a p ocedimien os es anda izados y c i e ios cien í icos suponen un impulso en el p oceso con inuo de la mejo a de la cons ucción/edición/uso de es s. Además, el CET-R es una he amien a que se pod ía u iliza a modo de gold s anda d, ob iamen e econocimien o sus limi aciones, pa a ayuda a la o mación an o de los u u os p o esionales de la psicología como en los cu sos de eciclaje además de la cons- ucción/edición de es s. La o mación y concienciación po pa - e de los p o esionales y di e en es o ganizaciones es necesa ia ya que el uso (in)co ec o de los es s iene cla as epe cusiones en la ida de las pe sonas u o ganizaciones que son obje o de e aluación y medición. Una co ec a u ilización de los es s, en cualquie a de innume ables ámbi os donde se usan, mejo a á QUINTA EVALUACIÓN DE TESTS 166 A ículos TABLA 3 RESUMEN DE LAS CALIFICACIONES DE LOS TESTS ANALIZADOS EN LA QUINTA EVALUACIÓN Tes s Ca ac e ís icas NEPSY-II WISC-V MABC-2 EVAPROMES TEMT LAEA EDI-3 CAEPO BADYG-E3 PRO 1-2 y 3 PAIB 2 y 3 Ma e iales y documen ación 555 4 5453,5 4,5 44 Fundamen ación eó ica 5554,5 55 5 3,5 554 Adap ación 4 4,5 5—5—5—— — — Análisis de los í ems — 4,5 444,5 44 — 5 4 4 Validez: con enido 454 4 444,5 —5 3,5 4 Validez: elación con o as a iables 3,5 4,5 4 4,5 3,5 44 2,5 3,5 2,5 3 Validez: es uc u a in e na — 4,5 4,5 4 3,5 45 3 4 3 2 Validez: análisis del DIF ——3 5 ——4— — — — Fiabilidad: equi alencia ——— — 3——— — — — Fiabilidad: consis encia in e na 454 54,5 4,5 4 4,5 544 Fiabilidad: es abilidad 3,5 43 — 353,5 —— — — Fiabilidad: TRI ——— — ———— — — — Fiabilidad: in e -jueces 555 —————— — — Ba emos e in e p e ación de pun uaciones 454,5 4 4,5 5 4,5 2,5 5 3,5 3,5 No a. Las pun uaciones de la abla es án hechas en una escala de 1 a 5, y co esponden a las siguien es alo aciones: 1 = inadecuada; 2 = adecuada pe o con ca encias; a pa i de 2,5 = adecuada; a pa i de 3,5 = buena; a pa i de 4,5 = excelen e. Cuando apa ece el símbolo (-) signi ica que no se apo a in o mación o no p ocede. sin luga a dudas la p ác ica p o esional, y como no, la isión de la psicología como ciencia y p o esión. El p oceso de e isión de es s es labo ioso y complejo, ade- más de en iquecedo . Es e p oceso de e aluación de es s edi- ados en España se encuad a den o de un conjun o más amplio de o ganizaciones y de di ec ices in e nacionales pa a el buen uso de los es s. Po ejemplo, como bien señala Elosua (2017), la Comisión In e nacional de Tes s (ITC, In e na ional Tes Commission) ha desa ollado seis conjun os de di ec ices: a) aducción y adap ación de es s; b) uso de los es s; c) es s compu e izados y es s adminis ados po in e ne ; d) segu i- dad de los es s, exámenes y o as e aluaciones; e) con ol de calidad de pun uaciones de los es s, su análisis y los in o mes sob e las pun uaciones; y ) uso p o esional de e isiones de los es s, es s obsole os y e i adas de es s. Muchas de ellas han sido aducidas al español po los miemb os de la Comisión Nacional de Tes s del COP (He nández e al., 2016; Muñiz, Elosua, y Hamble on, 2013). Pa a una in o mación más de a- llada in i amos al lec o a isi a la página web de la ITC en la sección guidelines (h ps://www.in es com.o g/) así como ex- celen es abajos p e ios (Leong, Ba am, Cheung, Geisinge , y Iliescu, 2016; Wells y Faulkne -Bond, 2016). CONSTRUYENDO EL FUTURO En los úl imos años los a ances en e aluación y medición psico- lógica y educa i a han sido e iden es (Fonseca-Ped e o y Muñiz, 2016), y odo hace pensa que el u u o nos depa a á muchos más. A con inuación se comen an algunas líneas de in es igación u u as conce nien es a la e aluación de la calidad de los es s. Es as líneas se inse an, como no puede se de o o modo, den o del ma co más gene al de la e aluación psicológica y educa i a. P ime o, hab á que e alua al e aluado , es deci , po un la- do end emos que es ima las p opiedades psicomé icas del modelo de e aluación CET-R, y po o o la iabilidad in e jue- ces de los e iso es de los es s. Son a eas pendien es. Ade- más, se ía muy con enien e desa olla una e sión web del CET-R que pudie a se u ilizada po los p o esionales. Segundo, y dado que la psicología como ciencia y p o esión se encuen a en con inua e olución, es sumamen e impo an e que el modelo de e aluación de calidad de es s (CET-R) se adap e ápidamen e a aquellos hechos más des acables que acon ezcan en el á ea de la e aluación y medición psicológica y educa i a. Po ejemplo, son in e esan es las nue as o mas de e aluación que nos llegan de la mano de las nue as ecno- logías. El g an cambio en el ámbi o de la ecnología u ilizada en la e aluación es el paso p og esi o de las p uebas de papel y lápiz clásicas a la u ilización de la ecnología in o má ica. Au o es como D asgow (2016) o Si eci y Faulkne -Bond (2016) indican que las nue as ecnologías es án in luyendo so- b e odos los aspec os de la e aluación psicológica, ales como el diseño de los es s, la cons ucción de los í ems, la p esen a- ción de los í ems, la pun uación de los es s y la e aluación a dis ancia, po ci a algunas. Ci a emos solo dos o mas de e a- luación eme gen es: los es s adap a i os in o ma izados (TAIs) y la e aluación ambula o ia. Los TAIs, aunque se lle an u ilizando bas an es años, oda ía no se ha ex endido su uso, po lo que siguen siendo una in e e- san e línea u u a de abajo (Olea, Abad, y Ba ada, 2010; Zenisky y Luech , 2016). En España ac ualmen e se es á aba- jando en a ios p oyec os, po ejemplo, la e aluación de la in- eligencia desde el modelo de ma ices de RAVEN, la e aluación del clima o ganizacional en con ex os labo ales o la e aluación de la pe sonalidad emp endedo a en jó enes. La e aluación ambula o ia es un ema de es udio clásico en psicología, si bien es á esu giendo con nue os b íos en la ac- ualidad (T ull y Ebne -P ieme , 2009, 2013; an Os, Delespaul, Wigman, Myin-Ge meys, y Wiche s, 2013). La e aluación am- bula o ia aba ca una amplia gama de mé odos de e aluación que a an de es udia las expe iencias de las pe sonas en su en- o no na u al y en la ida dia ia. Debido a cie as limi aciones de los es s ipo au oin o me (p. ej., sesgo e ospec i o, con ex o de e aluación a i icial, e c.) ecien es in es igaciones p oponen desplaza se, o al menos inco po a , nue as o mas de e alua- ción, que pe mi an comp ende de e minadas a iables y cons- uc os psicológicos desde una pe spec i a más dinámica, pe sonalizada, con ex ual y ecológica. Se p e ende analiza u ili- zando egis os es uc u ados de p egun as las conduc as, los sen imien os, las cogniciones, las emociones y/o los sín omas de las pe sonas median e disposi i os mó iles en su con ex o eal dia io. Pa a ello habi ualmen e se ealizan e aluaciones a ias eces al día du an e un pe íodo empo al ( ípicamen e una se- mana) que pe mi a cap a la a iabilidad de los enómenos. Las p egun as se ac i an median e un “beep” en un ma co empo al ijado po el in es igado , po ejemplo, en e las 10 am y las 10 pm. Además, es os “beeps” pueden p esen a se de o ma alea- o ia y/o en in e alos de iempo p ede e minados, po ejemplo, cada 90 minu os. A lo la go de cada día se ecogen di e en es mues as de compo amien o, ap oximadamen e 6-8 po día du- an e 7 días. Todos es os da os se uelcan a una pla a o ma pa- a su análisis pos e io . Se a a, pues, de un abo daje complemen a io a los p ocedimien os adicionales de e alua- ción psicomé ica basada en el lápiz y papel en con ex os más o menos a i iciales y de co e más bien ans e sal y e ospec i o. Te ce o, se iene que con empla la posibilidad de inco po a al modelo de e aluación de es s (CET-R) nue os modelos psi- comé icos como el análisis de edes (Bo sboom y C ame , 2013; Fonseca-Ped e o, 2017), los modelos mul idimensiona- les den o de la TRI (Reckase, 2009) u o os modelos ma emá i- cos p oceden es de la eo ía de los sis emas dinámicos o la eo ía del caos (Nelson, McGo y, Wiche s, Wigman, y Ha - mann, 2017), po ci a algunos. Finalmen e, la con inua o mación de los p o esionales de la psicología es la pied a angula pa a los años enide os, pues cada ez se á más ecuen e e ineludible posee un conoci- mien o en écnicas y p ocedimien os de e aluación que ayan más allá de la me a adminis ación de p uebas ipo es s o en- EDUARDO FONSECA-PEDRERO Y JOSÉ MUÑIZ 167 A ículos e is as. El desa ollo de las neu ociencias y de la obó ica, así como los en oques aslacionales y mul idisciplina es en ciencia son un cla o ejemplo. Se pe cibe una a mós e a de cambio en e los p o esionales de la psicología. Con o al segu idad, mucho de las nue as lí- neas de in es igación comen adas aquí se i án consolidando en los años enide os. El camino que queda po eco e es, sin duda alguna, ascinan e. AGRADECIMIENTOS Deseamos exp esa nues o más since o ag adecimien o a los miemb os de la Comisión Nacional de Tes s y al pe sonal ad- minis a i o del COP, así como a los e iso es y a las dis in as casas edi o iales, sin cuya ayuda y colabo ación es e abajo no se hubiese podido ealiza . CONFLICTO DE INTERESES No exis e con lic o de in e eses REFERENCIAS Ame ican Educa ional Resea ch Associa ion, Ame ican Psycho- logical Associa ion, y Na ional Council on Measu emen in Educa ion. (2014). S anda ds o Educa ional and Psycholo- gical Tes ing. Washing on, D.C.: Au ho . Bo sboom, D., y C ame , A. O. (2013). Ne wo k analysis: an in eg a i e app oach o he s uc u e o psychopa hology. Annual Re iew o Clinical Psychology, 9, 91–121. D asgow, F. (Ed.). (2016). Technology and es ing. New Yo k: Rou ledge. Elosua, P. (2017). A ances, p oyec os y e os in e nacionales ligados al uso de es s en Psicología. Es udios de Psicología, 34, 201–210. Elosua, P., y Geisinge , K. F. (2016). Cua a e aluación de es s edi ados en España: Fo ma y ondo. Papeles del Psicó- logo, 37, 82–88. E e s, A. (2012). The in e na ionaliza ion o es e iewing: T ends, di e ences, and esul s. In e na ional Jou nal o Tes- ing, 12, 136–156. E e s, A., McCo mick, C., Hawley, L., Muñiz, J. e al. (2017). Tes- ing p ac ices and a i udes owa d es s and es ing: An in e - na ional su ey. In e na ional Jou nal o Tes ing, 17, 158-190. E e s, A., Muñiz, J., Hagemeis e , C., Hø mælingen, A., Lind- ley, P., Sjöbe g , A., y Ba am, D. (2013). Assessing he quali y o es s: e ision o he EFPA e iew model. Psico he- ma, 25, 283–91. Fonseca-Ped e o, E. (2017). Análisis de edes: ¿una nue a o ma de comp ende la psicopa ología? Re is a de Psiquia ia y Sa- lud Men al, h ps://doi.o g/10.1016/j. psm.2017.06.004. Fonseca-Ped e o, E., y Muñiz, J. (2016). A ances en e alua- ción psicológica. Papeles del Psicólogo, 37, 2-2. He nández, A., Ponsoda, V., Muñiz, J., P ie o, G., y Elosua, P. (2016). Re isión del modelo pa a e alua la calidad de los es s u ilizados en España. Papeles del Psicólogo, 37, 161–168. He nández Baeza, A., Tomás, I., Fe e es, A., y Llo e , S. (2015). Te ce a e aluación de es s edi ados en España. Pa- peles del Psicólogo, 36, 1–8. Leong, F. T. L., Ba am, D., Cheung, F. M., Geisinge , K. ., y Iliescu, C. (2016). The ITC In e na ional Handbook o Tes ing and Assessmen . New Yo k: Ox o d Uni e si y P ess. Muñiz, J. (1997). Aspec os é icos y deon ológicos de la e alua- ción psicológica. En A. Co de o (Coo d.), La E aluación psi- cológica en el año 2000. Mad id: TEA Ediciones. (págs. 307-345). Muñiz, J. y Ba am, D. (2007). Imp o ing in e na ional es s and es ing. Eu opean Psychologis , 12(3), 206-219. Muñiz, J., Elosua, P., y Hamble on, R. K. (2013). Di ec ices pa a la aducción y adap ación de los es s: segunda edi- ción. Psico hema, 25, 151–157. Muñiz, J., y Fe nández-He mida, J. R. (2010). La opinión de los psicólogos españoles sob e el uso de los es s. Papeles del Psicólogo, 31, 108–121. Muñiz, J., Fe nández-He mida, J. R., Fonseca-Pede o, E., Cam- pillo-Ál a ez, Á., y Peña-Suá ez, E. (2011). E aluación de los es s edi ados en España. Papeles del Psicólogo, 32, 113–128. Nelson, B., McGo y, P. D., Wiche s, M., Wigman, J. T. W., y Ha mann, J. A. (2017). Mo ing om s a ic o dynamic mo- dels o he onse o men al diso de . JAMA Psychia y, 74, 528-534. Olea, J., Abad, F., y Ba ada, J. R. (2010). Tes s in o ma iza- dos y o os nue os ipos de es s. Papeles del Psicólogo, 31, 94-107. Ponsoda, V., y Hon angas, P. (2013). Segunda e aluación de es s edi ados en España. Papeles del Psicólogo, 34, 82–90. P ie o, G., y Muñiz, J. (2000). Un modelo pa a e alua la cali- dad de los es s u ilizados en España. Papeles del Psicólogo, 77, 65-77. Reckase, M. D. (2009). Mul idimensional I em Response The- o y. New Yo k, NY: Sp inge -Ve lag New Yo k. T ull, T. J., y Ebne -P ieme , U. W. (2009). Using expe ience sampling me hods/ecological momen a y assessmen (ESM/EMA) in clinical assessmen and clinical esea ch: In- oduc ion o he special sec ion. Psychological Assessmen , 21, 457–462. T ull, T. J., y Ebne -P ieme , U. W. (2013). Ambula o y assess- men . Annual Re iew o Clinical Psychology, 9, 151–176. an Os, J., Delespaul, P., Wigman, J., Myin-Ge meys, I., y Wi- che s, M. (2013). Beyond DSM and ICD: in oducing “p eci- sion diagnosis” o psychia y using momen a y assessmen echnology. Wo ld Psychia y, 12, 113–117. Wells, C. S., y Faulkne -Bond, M. (2016). Educa ional Measu- emen . F om Founda ions o Fu u e. New Yo k, NY: The Guil o d P ess. Zenisky, A. L., y Luech , R. M. (2016). The u u e o compu e -ba- sed es ing: Some new pa adigms. En C. S. Wells and M. Faulkne -Bond (Eds.), Educa ional measu emen . F om ounda- ions o u u e (págs. 221-238). New Yo k: Guil o d P ess. QUINTA EVALUACIÓN DE TESTS 168 A ículos