Influencia de la direccionalidad de los ítem en los resultados de
Contents
1. No 1 2014 Tabla 6 Coeficientes de consistencia interna global y por dimensi n Sin direccionalidad Con direccionalidad Di ia N mero IMENSIOD de tems Medida Desv Alfa Medida Desv Alfa promedio Est ndar promedio Est ndar Global 76 43 24 8 62 0 697 45 92 9 71 0 764 Percepci n 33 54 16 16 59 0 801 57 79 16 82 0 807 Evaluaci n 14 28 10 11 52 0 048 30 41 22 20 0 799 Respuesta 11 57 05 16 79 0 386 57 82 19 03 0 607 Discusi n de resultados Conclusiones Se mostr que la direccionalidad de los items requiere que la codificaci n de las respuestas en cada tem se haga de acuerdo con el crecimiento de la variable en un eje cartesiano que corre de poco a mucho asociando los valores 1 0 a las manifestaciones o respuestas t pica at pica aceptable no aceptable seria no seria del constructo en estudio Al establecer la direccio nalidad de cada item se tiene un impacto en la puntuaci n global de respuestas y en la medida log stica del tem pero principalmente el nfa sis recae en varios elementos m tricos el patr n mon tono creciente de respuestas en subgrupos organizados por ejemplo en quintiles un mejor ajuste al modelo de Rasch incremento en el poder de discriminaci n y en la correlaci n tem prueba de cada una de las dimensiones factores o cons tructos que intervienen en un instrumento dado Un tem mal codificado produce valores negativos en la correla2. corra de 0 0 a 1 0 Como ejemplo de esta codificaci n en el caso de un cuestionario en salud se tendr a que el s n toma que ocurre m s frecuentemente conviene reportarlo como respuesta t pica con el valor 1 Igualmente si la respuesta m s frecuente es la ausencia de s ntoma entonces esta respuesta se r a codificada como 1 aunque pudiera ser vista como at pica desde el punto de vista concep tual o te rico Relaci n de la direccionalidad y los resultados en medici n Para la siguiente discusi n se considera que un instrumento se administra a un grupo de personas de la poblaci n focal cuyas medidas se ordenan de menos a m s se organiza a las personas en subgrupos de medidas por ejemplo en este tra bajo se ordenan en quintiles y para cada item se determina la frecuencia de respuestas correc tas de los quintiles Una vez hecho esto la direc cionalidad de los tems tiene varias consecuencias en los resultados obtenidos con el cuestionario Por las hip tesis del modelo conceptual de medi ci n se espera que el patr n de respuestas en los quintiles sea creciente Con dicho patr n se puede tener un ajus te aceptable al modelo de Rasch que proporciona una funci n que expresa la probabilidad de respuesta correcta de cada persona ante un item dado y que se representa como una curva log stica mo n tonamente creciente Bond amp Fox 2007 Wright amp Stone 2004 El cambio de direc
3. en t rminos de respuesta t pica atipica apropiada no apropiada u otro atributo distintivo de la variable unidimensio nal que puede representarse en un eje cartesiano Se aplican los elementos del modelo de direccionalidad a un instrumento dise ado para medir la experiencia de los s ntomas de mujeres con S ndrome Coronario ld Correspondencia Viviana Marycel C spedes Cuevas Universidad Nacional de Colombia Direcci n postal Calle 44 No 45 67 unidad Camilo Torres bloque B2 oficina 705 Bogot Colombia Correo electr nico vmcespedesceunal edu co Agust n Trist n L pez Direcci n postal Insti tuto de Evaluaci n e Ingenier a Avanzada S C Cord Occidental 635 Col Lomas 4 secci n 78216 San Luis Potos M xico Correo electr nico ici_kalteyahoo com Agudo a partir del Modelo Conceptual del Manejo del S ntoma Palabras clave cuestionario validez direccionalidad del constructo experiencia de los s ntomas Abstract This work presents the main issues of item directionality on validity objectivity and reliability of measurement instruments used in various fields education psychology or health This is an im portant element to be considered in the definition of variables the preparation of item banks the production of tests and the interpretation of reports Directionality depends both on the theory and the conceptual model involved in the measurement instrument as well as the type of practice
4. 4 2 1 68 7 1 0 08 3 201 380 0 12 0 11 1 10 3 1 1 21 4 6 0 17 23 129 380 0 74 0 11 1 05 1 1 1 13 ZAR 0 23 48 146 380 0 53 0 11 1 10 2 7 1 11 2 1 0 18 36 43 380 2 23 0 16 0 99 0 0 1 34 1 9 0 19 56 299 380 1 41 0 13 1 09 1 2 1 18 1 7 0 14 54 92 380 1 25 0 12 1 10 1 3 1 16 1 7 0 15 55 350 380 2 62 0 19 1 05 0 4 1 25 1 1 0 09 40 33 380 2 54 0 18 1 00 0 0 1 17 0 9 0 19 50 55 380 1 93 0 15 1 03 0 4 1 12 0 9 0 18 desajuste al modelo de Rasch Fuente Adaptada de la salida de Winstepse REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Los dem s tems reportados en la Tabla 3B pre sentan valores de desajuste de menor importan cia en la medici n con valores cercanos a los l mites aceptables de los par metros de ajuste El an lisis de validez discriminante puede realizar se con base en la correlaci n punto biserial con estos pasos 1 Un comit de expertos revisa la definici n te rica de cada variable 2 se identifi can los tems que corresponden con la variable de acuerdo con el criterio de jueces o expertos 3 se ordenan los tems en funci n de la correlaci n tem prueba calculada con la f rmula de Pearson o como correlaci n punto biserial 4 se acepta el conjunto de tems que tienen altas correlacio Tabla 4 Agrupaciones por dimensiones y correlaci n tem total nes positivas item prueba y 5 se eliminan los tems que correlacionan poco o negativame
5. ECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Los tems se calibran con las respuestas codifi cadas de las personas de la poblaci n focal ve rificando que cada variable debe satisfacer la definici n de su direccionalidad La verificaci n de la direccionalidad se hace en funci n de la fre cuencia total de respuestas y del patr n de las respuestas en los quintiles An lisis de resultados Los an lisis presentados a continuaci n incluyen seis elementos los tres primeros son a nivel del tem uno es la combinaci n item variable y los dos ltimos se relacionan con el cuestionario en su conjunto 1 la revisi n de los patrones de respuesta 2 la discriminaci n con el modelo cl sico 3 el ajuste al modelo de Rasch 4 la correlaci n item variable 5 el an lisis factorial exploratorio y 6 la consistencia interna Para ello se utilizaron los programas Winsteps0 Kalt y SPSSO Los dos primeros an lisis se reportan simult nea mente en la Tabla 1 que presenta los patrones de los quintiles y la relaci n discriminativa de seis de los items de la prueba obtenidos con el programa Kalt IElA 2014 El patr n correcto para la direccionalidad implica que la frecuencia de respuesta correcta sea peque a en el quintil 1 y se incremente en forma mon tona hasta la mayor frecuencia en el quintil 5 Obs rvese que cuando no se toma en cuenta la direccionalidad de los items en general no se tiene el compor ta
6. Influencia de la direccionalidad de los tem en los resultados de instrumentos de medici n Influence of item directionality in the outcome of measurement instruments Viviana Marycel C spedes Cuevas Universidad Nacional de Colombia Agust n Trist n L pez Instituto de Evaluaci n e Ingenier a Avanzada S C San Luis Potos M xico Recibido 3 de diciembre de 2012 Revisado 20 de febrero de 2013 Aceptado 30 de julio de 2013 Art culo de investigaci n Resumen El trabajo ilustra los aspectos principales donde la direccionalidad de los tems incide en la validez la objetividad y la confiabilidad de los instrumentos de medici n utilizados en educaci n psicolog a y salud Se trata de un elemento a tomar en cuenta en el dise o del modelo de evaluaci n en la definici n de las variables la elaboraci n del banco de items para la construcci n del instrumento y la forma de presen tar e interpretar los reportes La direccionalidad no depende solamente de los fundamentos te rico con ceptuales asociados con el modelo de medici n y con la propia pr ctica educativa o cl nica por ejemplo sino que est regida por un comportamiento o res puesta t pica de las personas que integran la pobla ci n focal en estudio Se muestra que la codificaci n de los tems no debe hacerse en t rminos de presen cia ausencia sino del crecimiento de la variable de poco a mucho del rasgo medido
7. Vidal U R 2006 Manual de f rmulas de correlaci n Canad Trafford Victoria Trist n L A 2003 C lculo del tama o de mues tra y establecimiento de criterios y el pro blema del tama o de la poblaci n Gu a de usuario Kalt Versi n 2 Instituto de Evalua ci n e Ingenier a Avanzada San Luis Potos M xico REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 University of California 1994 A model for symp tom management San Francisco School of Nursing Symptom Management Faculty Group J Nurs Scholarship 26 272 276 Wright B 1991 Factor Analysis versus Rasch Analysis of Items Rasch Measurement Tran sactions 5 1 134 135 Wright B D Stone M H 2004 Making measu res The Phaneron Press Chicago USA 35 39 Wright B D Stone M H amp Enos M 2000 Evo lution of meaning in practice Rasch Measu rement Transactions 14 1 736
8. able 3 propiedades de esca la para la variable cartesiana DeVellis 2012 La medici n debe satisfacer tres atributos b sicos Trist n 2001 1 validez que permite medir el prop sito deseado para que las conclusiones que se obtengan sirvan a dicho prop sito Borsboom Mellenbergh Ven Heerden 2004 2 objetivi dad que hace que el instrumento independiente de la poblaci n focal Bond amp Fox 2007 Wright Stone 2004 pudiendo administrarse e interpre tarse del mismo modo por una persona entrenada que por otra que no lo es como podr an ser el profesor y sus estudiantes o el profesional y el pa ciente con la salvedad de que este segundo atri buto ha sido reinterpretado recientemente como manifestaci n de equidad por el Joint Commitee AERA APA y NCME 2014 y 3 confiabilidad para que los resultados sean repetibles con el m nimo error posible Nunnally amp Bernstein 1993 Tambi n es conveniente aunque no obligatorio que cada variable sea unidimensional para que los valores puedan llegar a ordenarse en forma ascendente y ser incluyentes para que la proba bilidad de respuesta sea mon tona creciente en la misma direcci n de la escala Wright Stone 2004 que debe hacer que la variable cartesia na sea continua cualquier valor real obtenido es interpretable dentro de la variable y que siem pre mantenga la direccionalidad con respecto del crecimiento de la variable De Landsheere 1976 Lin
9. acre 2014 Tanto el instrumento como los tems deben di se arse considerando las propiedades menciona das garantizando que los propios tems se refie ran a la misma escala de la variable tanto si se trata de tems de respuesta categ rica escala Likert o dic tomos Linacre 2014 Myers amp Han sen 2002 Wright amp Stone 2004 Wright Stone Enos 2000 REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Modelo de direccionalidad de tems e instrumentos La direcci n del tem tambi n llamada polaridad se relaciona generalmente con la presencia o ausencia del rasgo medido especialmente en el caso de los tems dic tomos que se codifican en dos categor as 1 0 respectivamente Estos items se deben codificar tomando como referencia al eje cartesiano de la variable de tal modo que el valor 1 en la respuesta al item debe corresponder con m s del rasgo medido en la direcci n de su crecimiento o inclusive mejor debe correspon der con la respuesta comportamiento o eviden cia t pica del rasgo De este modo el valor 0 se refiere a menos del rasgo medido la respuesta corre en direcci n contraria a la del crecimiento de la variable o mejor todav a corresponde con la respuesta comportamiento o evidencia at pica Esta codificaci n no es trivial porque de su correcta aplicaci n depende garantizar que la probabilidad p asociada con la escala
10. ci n ftem prueba y en la discrimina ci n desajustando al modelo de Rasch Al emi tir conclusiones con un tem mal direccionado se alteran la objetividad la validez de escala y de constructo por lo que puede llegarse a identificar factores de interpretaci n dudosa En resumen se inducen errores en las propiedades m tricas del instrumento y resultados incorrectos al apli carlos a una persona induciendo interpretaciones inapropiadas como por ejemplo un mayor error de calificaci n en los estudiantes o deficiencias en las intervenciones cl nicas en los pacientes REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Se mostraron los elementos descriptivos del mo delo te rico de direccionalidad de los tems para cualquier instrumento que se aplique en educa ci n salud o psicolog a Se aplica el modelo al dise o de un instrumento de medici n de la Expe riencia del s ntoma del SCA en mujeres y los tres constructos involucrados Percepci n Evaluaci n y Respuesta El instrumento desarrollado y revisado con la metodolog a propuesta mejora la medici n de la Experiencia del s ntoma de SCA en mujeres En particular se mejor la dimensi n de Percepci n y se pudo dise ar el instrumento que mide las di mensiones de Evaluaci n y de Respuesta que no hab an sido estudiadas satisfactoriamente en la literatura El modelo permite obtener evidencias que apoyan la validez la objetividad y la confia bil
11. cionalidad del tem conduce a un patr n descendente o irregular y a una medida incorrecta del tem con el inconveniente de te ner un desajuste respecto del modelo de Rasch El patr n esperado tambi n se refleja en un poder de discriminaci n positivo que se calcula por me dio de la diferencia en la proporci n respuestas de los subgrupos superior e inferior Asimismo se refleja en una correlaci n item prueba positiva generalmente calculada por medio de la correla ci n de Pearson o la correlaci n punto biserial El cambio en la direccionalidad del tem induce que el poder de discriminaci n y las correlaciones sean cercanas a cero o hasta negativas Trist n amp Vidal 2006 El conjunto de correlaciones o las covarianzas se utilizan generalmente para obtener la matriz de varianza covarianza empleada en el an lisis fac torial exploratorio Nunnally amp Bernstein 1993 La direccionalidad incorrecta reduce las ponde raciones factoriales y se traduce en c lculos de fectuosos en la identificaci n de los constructos obtenidos a partir de los factores principales as como perjudica el an lisis de validez discriminan te con el modelo multirasgo multim todo Camp bell amp Fiske 1959 Wright 1991 Los autores del presente trabajo han hallado que la direccionalidad incorrecta tambi n tiende a reducir las medidas de las personas y en conse cuencia reduce las medias y las varianzas de los puntajes en la variable
12. cuando la persona hace uso de remedios caseros espera a que pase la mo lestia y en consecuencia el tiempo de demora para atenderse es largo Una respuesta adecuada es cuando se atiende de inmediato con apoyo en un profesional m dico particular o en un hospital codificada como 1 A continuaci n se presentan cuatro tems para ejemplificar la codificaci n y su forma de inter pretaci n tem 1 Sinti dolor o molestia en la mitad del pe cho SI NO Una respuesta SI presencia se codifica como 0 para referirse a una percepci n t pica muy frecuente en los hombres pero at pica en las mu jeres que son la poblaci n focal y cuyas respuestas definen el sentido de crecimiento de la escala tem 13 Tuvo usted una sensaci n de indiges ti n SI NO La respuesta SI presencia se codifica como 1 por tratarse de la percepci n de un s nto ma at pico de mayor frecuencia en las mujeres tem 34 Pens que la causa de lo que estaba sin tiendo era un problema card aco SI NO En este caso la respuesta Sl presencia se codifica como 1 y permite reportar una evaluaci n adecuada en la direcci n esperada hacia el S ndrome Coro nario en el estudio tem 38 Pens que su dolor era de origen dental SI NO Una respuesta SI presencia se debe codi ficar 0 porque indica una evaluaci n inadecua da en direcci n no esperada hacia el Sindrome Coronario en el estudio REVISTA DIVERSITAS PERSP
13. d de las variables y las propiedades m tricas de cada escala entre otros elementos Referencias Amaya P amp C spedes V 2008 S ntoma s en la mujer con enfermedad coronaria Explora ci n de concepto para la pr ctica cl nica y la investigaci n desde la disciplina de enferme r a Enfermer a Cardiovascular pp 147 160 American Educational Research Association Ame rican Psychological Association y National Council on Measurement in Education 2014 Standards for Educational and Psychological Testing Washington AERA Bond T G amp Fox C M 2007 Applying the Rasch model 2a ed Erlbaum NJ pp 4 8 Borsboom D Mellenbergh G J amp Ven Heerden J 2004 The concept of validity Psycholo gical Review 111 4 1 061 1 071 Caldwell M amp Miaskowski C 2000 The Symp tom experience of angina in women Pain management nursing 1 3 69 78 Campbell D T amp Fiske D W 1959 Convergent and Discriminant Validation by the Multitrait Multimethod Matrix Psychological Bulletin 56 81 105 C spedes V 2009 Modelo Conceptual del Ma nejo del sintoma clasificaci n por percep ci n evaluaci n y respuesta de mujeres con s ndrome coronario agudo originada por la construcci n de un instrumento validado en Bogot Colombia Universidad Nacional de Colombia Tesis doctoral Cronbach L J 1951 Coefficient alpha and the internal structure of the tests Psychome tr
14. del dise o de la investigaci n para la Experiencia del s ntoma Mujeres con Sindrome coronario agudo Muestra 1 e Servicio de cardiolog a e Unidad de cuidados intensivos coronaria FASE 1 Pre prueba Piloto FASE 2 Prueba Piloto FASE 3 Investigaci n principal Subgrupos de mujeres con SCA seg n Percepci n Evaluaci n e Unidad de dolor tor xico Mujeres con Muestra 2 Se utiliz un muestreo intencional con determi naci n de tama o muestral en funci n de la frac ci n de desviaci n est ndar seg n el Modelo mo dificado de determinaci n de tama o de muestra en poblaci n finita Trist n 2008 cuyo error de aproximaci n para estudio definitivo correspon di a 0 05 El instrumento se construy sobre la base de un conjunto de hip tesis de indole causal sobre la experiencia del s ntoma dividida en los tres cons REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Sindrome coronario CORTE agudo TRANSVERSAL Respuesta Evidencias de validez de Contenido de Escala discriminante de constructo Calidad m trica Confiabilidad Consistencia interna tructos citados Amaya C spedes 2008 C spe des 2009 Constructo 1 Percepci n 33 items Se divide en s ntomas t picos sobre dolor retro esternal opresivo irradiado a brazos cuello o mand bula o no irra diado y s ntomas at picos acerca de dolor en o
15. e un patr n claro con baja RD 0 19 en cam bio con la direccionalidad apropiada se tiene una configuraci n creciente m s evidente y una alta RD 2 14 Cuando el tem 44 no cuenta con la di reccionalidad bien definida se presenta un patr n de discriminaci n negativa en cambio queda muy claro su patr n correcto con la codificaci n apro piada y una muy alta RD 2 33 Los items 55 y 58 hacen evidente que no se trata solamente de te Tabla 2 Patrones de respuesta y discriminaci n en el tem 2 ner una codificaci n que brinde altas frecuencias de respuesta sino que reflejen la direccionalidad La asignaci n apropiada de la direccionalidad hace que la relaci n discriminativa pase de 0 45 a 1 45 en el tem 55 y de 0 33 a 1 67 en el tem 58 Al estudiar el tem 2 que explora el dolor o mo lestia en la mitad del pecho opresivo irradiado al cuello brazos o mand bula se observa Tabla 2 que no presenta una tendencia creciente en ninguna de las dos codificaciones direccionales RD 0 35 sin direccionalidad y RD 0 04 con direc cionalidad lo cual puede indicar que se trata de un tem no apropiado para las mujeres aunque es reconocido como un elemento t pico en los hombres Frecuencias por quintil y relaci n discriminativa Item Sin direccionalidad Con direccionalidad RD 1 2 9 1 15 5 2 5 5 2 14 5 2 3 6 1 0 35 3 14 2 0 04 4 4 7 4 15 0 5 8 4 5 13 2 La siguiente fase del an lisis combina
16. educational or clinical for example but it is also ruled by a typical behavior or response of the focal group Item coding should not be done in terms of presence absence but must take into ac count the direction and sense of growth of the variable as typical non typical appropriate non appropriate or other distinctive unidimensional trait that should be represented in a Cartesian axis The elements of the model of directionality are used in an instrument designed to measure the experience of the women s symptoms with acute coronary syndrome based on the Symptom Management Conceptual Model Keywords Questionnaire validity directionality of the construct symptoms experience woman Introducci n Los instrumentos semiobjetivos para la medi ci n en educaci n psicolog a y salud se apoyan en las respuestas que las personas ofrecen a un conjunto de items con los que se exploran con ductas percepciones o respuestas ante condicio nes contextuales espec ficas Se denominan aqu instrumentos semiobjetivos IElA 2012 a todos los cuestionarios que recogen las opiniones o per cepciones de las personas haci ndose notar que cada item es planteado de forma objetiva pero la respuesta no lo es porque depende de la aprecia ci n de la persona que contesta Dentro de este concepto de instrumento semiobjetivo se inclu yen las escalas tipo Likert y cualquier otro item en escala categ rica por ejemplo de n
17. el ajuste al modelo log stico y la correlaci n punto biserial que se realiza por medio de la calibraci n con el modelo de Rasch Tabla 3A usando el programa Winsteps Linacre 2014 Este software produce la medida de cada item MEASURE y los par me tros de ajuste INFIT y OUTFIT reportados con los modelos de media cuadr tica MNSQ y Z estan darizada ZSTD Los valores aceptables de MNSQ deben ser menores a 1 3 y de ZSTD deben ser menores a 2 0 El mismo programa proporciona la correlaci n punto biserial rpbis en la columna PTMEA CORR cuyo valor de aceptaci n debe ser superior a 0 196 Trist n y Vidal 2006 REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Un error en la codificaci n de la direccionalidad incide en defectos respecto del modelo log sti co Sin tomar en cuenta la direccionalidad se tie nen 17 tems que desajustan por INFIT OUTFIT se alados con asterisco o por valores bajos o negativos de rpbis pero estos resultados aparen temente inconvenientes cambian al codificar co rrectamente la direccionalidad Se observ que los tems 1 y 44 entre otros ya no presentan una correlaci n negativa y el tem 2 cambia su correlaci n punto biserial a un valor negativo y el item 55 tiene un valor rpbis 0 09 en cambio solo los items 3 y 48 desajustan de manera impor tante en INFIT ZSTD con valores superiores a 2 0 Tabla 3 Resultados del an lisis de Rasch SIN direccio
18. en estudio Trist n amp C s pedes 2013 Adem s de que se reduce el valor num rico de la medida de los tems sin embargo los autores destacan que la varianza del tem per manece constante independientemente de la di reccionalidad A partir de este comportamiento en las varianzas de los puntajes de las personas y de los tems la direccionalidad incorrecta reduce la consistencia interna que puede estimarse a trav s del coeficiente alfa de Cronbach Cronbach 1951 Aplicaci n del modelo en un instrumento de medici n en salud Los puntos relevantes de la secci n anterior los cuales plantean las bases del modelo de direccio nalidad de los tems propuesto por los autores se aplican en un instrumento de medici n de S n drome Coronario Agudo SCA en mujeres Para caracterizar el s ntoma en el SCA se cuenta con varios modelos sobre los factores que influyen en la patolog a tanto cl nicos cognitivos como de pa trones sociales del s ntoma Se parti del Modelo Conceptual del Manejo del S ntoma SMM Caldwell Miaskowski 2000 Dodd 2001 University of Ca lifornia San Francisco School of Nursing 1994 que considera que las personas experimentan s ntomas en dimensiones interrelacionadas e influidas por variables contextuales internas personales y ex ternas ambientales y del proceso de salud enfer medad Las tres dimensiones son 1 la Experien cia del s ntoma con tres constructos percepci n indiv
19. idad del instrumento reforzando los modelos te ricos anal ticos y estad sticos disponibles en la literatura C spedes 2009 El an lisis de va lidez de la direccionalidad junto con el an lisis de la escala permite disponer de tres escalas unidimensionales en un mismo instrumento las cuales pueden ser aplicadas tanto de forma inde pendiente como en su versi n completa El nfasis del presente trabajo es mostrar que la di reccionalidad de los tems soporta la validez de la escala de la variable y que un error de direcci n induce a notables defectos en la medici n Lo m s relevante es evitar las conclusiones err neas acerca de las variables y dict menes incorrectos o deficien tes a partir de los resultados de la medici n El modelo de direccionalidad de los tems pro puesto y desarrollado por los autores expone la importancia de la tem tica y sus implicaciones en la medici n en general y en salud en particular con nfasis en un fen meno espec fico para en fermer a cardiovascular Las implicaciones de la direccionalidad y las posibles aplicaciones para el dise o y an lisis de instrumentos son diversas e importantes Como extensi n de este estudio se contempla la validez de escala de un instrumen to con implicaciones en varias facetas desde la construcci n de un cuestionario la adaptaci n y traducci n de instrumentos publicados y utiliza dos en otros pa ses la verificaci n de la dimen sionalida
20. idual del s ntoma evaluaci n de su significado y respuesta al mismo 2 las Estrategias de mane jo que incluye acciones que influyen o controlan la experiencia del s ntoma previni ndolo o retrasan do su impacto y 3 los Resultados que se obtienen por la intervenci n de elementos como habilidades de autocuidado estatus socioecon mico emocio nal y funcional entre otros C spedes 2009 El estudio se interesa en el dise o de un ins trumento para medir las tres variables de la Experiencia del s ntoma atendiendo a las caracter sticas de medici n indicadas previa mente con lo que se cubre un vacio en la literatura donde se presentan numerosos ins trumentos de dise o incompleto o de inter pretaci n dudosa que no garantizan el cum REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 plimiento de los atributos de la evaluaci n C spedes 2009 Para el dise o del instrumento se desarroll un trabajo cuantitativo descriptivo y exploratorio de corte transversal realizado sobre una muestra de 380 mujeres mayores de 20 a os con diagn stico confirmado de Sindrome Coronario Agudo lesio nes mayores del 75 indicativas de enfermedad epic rdica por angiograf a coronaria con estado de conciencia y orientaci n conservados con co municaci n verbal conservada y hemodin mica mente estables distribuidas en dos centros hos pitalarios de Bogot Colombia Figura 1 Figura 1 Esquema
21. ika 16 297 334 De Landsheere G 1976 Introduction a la re cherche en ducation Paris Armand Colin Bourrelier DeVellis R F 2012 Scale development Theory and Applications Applied Social Research Methods California SAGE Publications Inc Thousand Oaks Dodd M Janson S Facione N Faucett J Froelicher E Humphreys J et al 2001 Advancing the science of symptom manage ment J Advance Nurs 33 668 676 Instituto de Evaluaci n e Ingenier a Avanzada 2014 Manual de usuario Kalt Plus M xico IElA www ieia com mx Instituto de Evaluaci n e Ingenier a Avanzada 2012 Manual de usuario Kalt Opinion para cuestionarios semiobjetivos M xico lElA www eia com mx Linacre J M 2014 A users s guide to WINSTEPS Recuperado de www winsteps org Myers A y Hansen C H 2002 Experimental psychology 5th edition California Wadswor th Thompson Learning Nunnally J C Bernstein l H 1993 Psycho metric Theory 3a ed New York McGraw Hill Trist n L A 2001 An lisis de Rasch para todos M xico Ceneval Trist n L A C spedes C V M 2013 An lisis de las variaciones en par metros psicom tri REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 cos por efecto de la direccionalidad de los tems Reporte interno Proyecto N 130512 M xico Instituto de Evaluaci n e Ingenier a Avanzada S C Trist n L A
22. iva y emocional tres de ori gen extra card aco dos mixtos y uno emocional y dos de respuesta inadecuada REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Desde el punto de vista te rico se observ que la codificaci n inapropiada de los tems hace que la matriz de varianza covarianza se construya sobre datos incorrectos que a su vez producen resulta dos factoriales carentes de interpretaci n te rica conceptual o cl nica Tabla 5A y 5B Por ejemplo la evaluaci n de origen extracardiaco se separa en dos factores mixtos con 7 items en total en contraste con la codificaci n usando la direcciona lidad correcta que permite identificar m s tems que intervienen en factores mixtos y adem s apa rece otro factor que corresponde con una evalua ci n de origen emocional por parte del paciente Tabla 5A Agrupaciones para percepci n por an lisis factorial SIN direccionalidad m R j N mero de tems Dimensi n Subdimensi n z Items en la subdimensi n Percepci n Mixta 15 4 6 8 9 11 14 15 17 18 20 21 27 28 29 30 atipica Digestiva 7 13 22 23 24 25 26 32 Evaluaci n Mixto 1 5 34 44 45 46 76 origen extracardiaco Mixto 2 2 35 40 Inadecuada 1 3 51 52 53 Respuesta Inadecuada 2 2 47 49 Tabla 5B Agrupaciones por an lisis factorial CON direccionalidad N mero de tems Dimensi n Subdimensi n De tems en la subdimen
23. miento creciente esperado La Tabla 1 tambi n presenta la relaci n discriminativa RD par metro que se espera que sea igual o superior a 1 si el tem distingue apropiadamente entre las personas de medida m s alta y las de medida baja Son inconvenientes los valores de RD inferiores a 0 3 o negativos Tabla 1 Patrones de respuesta y discriminaci n en los tems del instrumento Frecuencias por quintil y relaci n discriminativa bl Sin direccionalidad RD Con direccionalidad RD 1 5 3 1 14 2 2 2 9 2 16 8 1 3 2 1 1 63 3 18 2 0 82 4 1 3 4 19 2 5 0 8 5 19 2 1 8 9 1 0 0 2 6 8 2 La 34 3 13 4 0 19 3 7 4 2 14 4 11 8 4 18 9 5 7 6 5 18 2 1 19 7 1 0 0 2 13 4 2 0 8 44 3 5 0 1 2 3 15 0 2 33 4 5 0 4 18 2 5 9 5 5 18 7 1 12 9 1 2 9 2 12 6 2 2 4 55 3 15 0 0 45 3 5 0 1 45 4 16 0 4 6 1 5 19 5 5 7 9 1 4 2 1 11 1 2 2 9 2 14 7 57 3 3 7 0 53 3 14 5 0 76 4 5 3 4 18 9 5 5 3 5 19 5 1 11 3 1 2 6 12 9 2 3 4 58 3 14 5 0 33 3 4 7 1 67 4 13 7 4 4 7 5 17 1 5 15 0 REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 En el tem 1 de la Tabla 1 se presentan muy po cas respuestas que adem s son m s frecuentes en el quintil m s bajo produciendo una RD negativa Obs rvese que al asignar la direcci n correcta se tienen frecuencias altas en todos los quintiles con una tendencia creciente muy clara y RD cercana al valor deseable de 1 El tem 34 sin codificaci n no tien
24. n el crecimiento de la variable de esta manera Percepci n Se considera la percepci n t pica si la persona percibe un s ntoma de tipo card a co b sicamente opresi n en el pecho en tanto que la percepci n at pica es cuando la persona percibe s ntomas en otras partes de su cuerpo Bajo este enfoque el eje de esta dimensi n tam bi n podr a denominarse PERCEPCI N CARDIACA gt NO CARDIACA La codificaci n de estos tems se hace t pica 0 y at pica 1 la raz n de que se haya definido el eje en esta forma es que la percepci n at pica es predominantemente fe menina por lo que tambi n pudo haberse deno minado PERCEPCI N MASCULINA gt FEMENINA Esta fue la variable que requiri mayor atenci n porque en la codificaci n preliminar presencia 1 ausencia 0 pod a revelar la percepci n como card aca y no card aca pero no reflejar la respues ta t pica o at pica desde el punto de vista cl nico que tiene un enfoque predominantemente masculino es decir sesgo por g nero Evaluaci n La evaluaci n inadecuada es cuando la persona considera que no es un problema car d aco y por lo tanto no es de importancia lo cual se codifica como 0 La evaluaci n adecua da es cuando la persona se da cuenta que es un problema card aco que representa un riesgo que puede ser grave e importante codificada como 1 Respuesta Se tiene una respuesta inadecuada codificada como 0
25. nalidad tems ordenados de mayor a menor desajuste OUTFIT ZSTD ENTRY TOTAL TOTAL NUMBER SCORE COUNT MEASURE MODEL Es UAG sii PTMEA N mero Suma de Total de Medida Error CORR de item ntos r sb estas est ndar MNSQ ZSTD MNSQ ZSTD rpbis P p 44 200 380 0 30 0 11 1 25 7 9 1 28 7 3 0 09 1 47 380 1 88 0 16 1 18 1 5 1 98 5 3 0 23 34 185 380 0 13 0 11 1 14 4 8 1 19 5 0 0 06 46 180 380 0 07 0 11 1 11 3 8 1 17 4 7 0 10 3 201 380 0 31 0 11 1 12 3 8 1 17 4 6 0 10 45 181 380 0 08 0 11 1 11 3 7 1 17 4 6 0 10 57 264 380 1 06 0 11 1 20 3 9 1 30 4 3 0 05 54 289 380 1 42 0 12 1 18 2 6 1 29 3 2 0 03 36 43 380 1 98 0 16 1 02 0 2 1 39 2 3 0 09 76 154 380 0 23 0 11 1 07 2 2 1 10 2 3 0 16 56 81 380 1 20 0 13 1 11 1 6 1 20 2 0 0 04 49 146 380 0 32 0 11 1 07 2 1 1 08 1 8 0 17 50 55 380 1 69 0 15 1 05 0 6 1 23 1 7 0 07 47 279 380 1 27 0 12 1 09 1 6 1 11 1 5 0 12 55 30 380 2 39 0 19 1 06 0 4 1 27 1 3 0 03 2 105 380 0 84 0 12 1 04 0 8 1 09 1 2 0 18 31 9 380 3 66 0 33 0 95 0 0 1 11 0 4 0 13 desajuste al modelo de Rasch Fuente Adaptada de la salida de Winsteps Tabla 3B Resultados del an lisis de Rasch CON direccionalidad tems ordenados de mayor a menor desajuste OUTFIT ZSTD ENTRY TOTAL TOTAL NUMBER SCORE COUNT MEASURE MODEL S E INFIT OUTFIT PTMEA z Error CORR N mero Suma de Total de Medida estandar robis de tem puntos respuestas MNSQ ZSTD MNSQ ZSTD P 2 275 380 1 04 0 12 1 25
26. nte Cabe resaltar que cada uno de los conjuntos de tems se considera como una posible variable si se satisface que 1 La variable cuenta con cuatro tems por lo menos se puede considerar una va riable con tres items si se obtienen valores altos en las siguientes dos condiciones 2 Los tems correlacionan positivamente con el conjunto va lores superiores a 0 196 y 3 El conjunto produce valores altos del coeficiente de consistencia inter na alfa Siguiendo este procedimiento es posible reorganizar las tres dimensiones del cuestionario en constructos internamente consistentes Tabla 4 con interpretaci n cl nica clara N mero de tems en Dimensi n Subdimensi n a A tems la subdimensi n 1 3 4 5 6 7 8 9 10 11 12 13 14 Percepcion At pica mixta 31 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 32 33 Origen extracardiaco mixto 10 34 35 36 37 38 39 40 41 42 43 Evaluaci n Seriedad insignificante 4 44 45 46 76 Respuesta Inadecuada 8 47 49 51 52 53 55 56 57 La quinta fase consiste en el an lisis factorial exploratorio del instrumento que se realiz con los items codificados sin direccionalidad y con direccionalidad con el m todo de rotaci n vari max usando el software SPSS Con la codificaci n tomando correctamente la direccionalidad de las variables se pueden distinguir ocho factores in terpretables organizados en tres de percepci n at pica mixta digest
27. si n Mixta 13 1 4 5 6 8 9 11 14 15 17 20 21 30 oe Digestiva 8 12 13 22 23 24 25 26 32 t pica Emocional 5 3 18 27 28 29 Mixto 1 4 44 45 46 76 Evaluacion origen Emocional 3 41 42 43 extracardiaco Mixto 2 7 34 35 36 37 38 39 40 Inadecuada 1 3 51 52 53 Respuesta Inadecuada 2 6 47 49 50 55 56 57 Este an lisis de validez de constructo realizado f rmula del coeficiente alfa se puede concluir que con un modelo factorial exploratorio se comple la direccionalidad correcta incide en la mejora menta con un an lisis para demostrar que las del valor del coeficiente de consistencia interna escalas involucradas en el instrumento son unidi alfa de Cronbach Tabla 6 El cambio que experi mensionales pudiendo aplicarse en cuestionarios por separado o como en este caso integrados en un solo instrumento menta alfa al cambiarse la codificaci n de la di reccionalidad de los tems puede ser peque o en variables con m s de 30 tems como en el caso de La ltima fase del an lisis se refiere a la consis la dimensi n de percepci n que sube de 0 801 a tencia interna del instrumento reportada gene 0 807 pero puede ser muy notable especialmente ralmente con el coeficiente alfa de Cronbach en variables de pocos tems como en la dimen Desde el punto de vista te rico al revisarse la si n Evaluaci n que pasa de 0 048 a 0 799 REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10
28. tras partes del cuerpo palpitaciones s ntomas digesti vos respiratorios m sculo esquel ticos vegetati vos emocionales cognitivos y aquellos relaciona dos con el control de la temperatura corporal Constructo 2 Evaluaci n 14 items Permite iden tificar el origen card aco no asociado con la pa tolog a o psicosom tico atendiendo a su apre ciaci n de seriedad como insignificante da ino o amenazante Constructo 3 Respuesta 29 items Distingue en tre acciones o actividades que realiza la paciente u otras personas cercanas ante los s ntomas Tambi n considera el tiempo de demora para atender su caso en funci n del lapso transcurrido desde que se perciben los s ntomas hasta recibir tratamiento Direccionalidad de los tems en el instrumento La objetividad del instrumento se apoya en tems de respuesta dicot mica inicialmente codificados como O ausencia y 1 presencia El an lisis de los resultados condujo a concluir que dicha co dificaci n no se asocia con la direcci n de creci miento de la variable medida por lo que se vio la conveniencia de ajustar la interpretaci n del binomio presencia ausencia a los conceptos t pico at pico asociado no asociado a la pato log a card aca serio no serio dependiendo en cada caso de las necesidades de la dimensi n a medir de acuerdo con lo indicado en el modelo de direccionalidad para garantizar que la medida correspondiera co
29. unca a siem pre de total acuerdo a total desacuerdo las pre guntas de respuesta forzada que aparecen igual mente en el famoso art culo de Likert de 1932 y otros tipos de tems que pueden producir resulta dos en puntuaciones discretas incluyendo los de respuesta categ rica si no presencia ausencia En lo sucesivo y solo dentro de los prop sitos de este documento se denominar n cuestionarios o instrumentos sin p rdida de generalidad Para construir un instrumento deben identificarse las variables de inter s buscando que los valo res medidos puedan representarse como puntos de un eje cartesiano cuyo crecimiento va en la direcci n de la propia variable En este trabajo se estudia la direccionalidad como una de las propiedades de la escala que permite garantizar la validez es dependiente de la objetividad del atributo medido e incide en la confiabilidad de las respuestas obtenidas con el instrumento Se ilustra el impacto de la direccionalidad en un ins trumento dise ado para medir la Percepci n del Sindrome Coronario Agudo SCA en la mujer pro poniendo un modelo novedoso de direccionalidad de los tems REVISTA DIVERSITAS PERSPECTIVAS EN PSICOLOG A Vol 10 No 1 2014 Cualidades m tricas de los instrumentos Los tres elementos principales que definen las cua lidades m tricas de un instrumento son 1 atribu tos de medici n 2 caracter sticas dimensionales y m tricas de la vari
Download Pdf Manuals
Related Search