A simulation study of rater agreement measures with 2x2 contingency tables
Mediante un estudio de simulación se aborda una comparación entre seis medidas obtenidas usando tres enfoques diferentes para la evaluación del acuerdo. Los coeficientes de acuerdo elegidos fueron o de Bennet (1954), T de Scott (1955), K de Cohen (1960) y Y de Gwet (2001; 2008) para representar el e...
| Main Authors: | , , |
|---|---|
| Format: | Article |
| Language: | English |
| Published: |
DIGITAL.CSIC
2012-01-01
|
| Series: | Psicológica |
| Online Access: | http://www.redalyc.org/articulo.oa?id=16923102012 |
| _version_ | 1818140134311198720 |
|---|---|
| author | Manuel Ato Juan José López Ana Benavente |
| author_facet | Manuel Ato Juan José López Ana Benavente |
| author_sort | Manuel Ato |
| collection | DOAJ |
| description | Mediante un estudio de simulación se aborda una comparación entre seis medidas obtenidas usando tres enfoques diferentes para la evaluación del acuerdo. Los coeficientes de acuerdo elegidos fueron o de Bennet (1954), T de Scott (1955), K de Cohen (1960) y Y de Gwet (2001; 2008) para representar el enfoque clásico descriptivo, el coeficiente ¿ de Aickin (1990), para representar el enfoque de los modelos loglineal y mixtura ("mixture models") y la medida A de Martín and Femia (2004) para representar el enfoque de los test de elección multiple. Los resultados obtenidos confirman que los coeficientes T y Kpresentan diferencias notables en relación a los restantes coeficientes particularmente en presencia de valores extremos de prevalencia y sesgo entre observadores. El mejor comportamento fue observado con los coeficientes ¿ de Bennet y ¿ de Martín and Femia para todos los valores de prevalencia y sesgo entre observadores. |
| first_indexed | 2024-12-11T10:39:09Z |
| format | Article |
| id | doaj.art-67cda80050da4a0b81e9e5893ce1dd56 |
| institution | Directory Open Access Journal |
| issn | 1576-8597 |
| language | English |
| last_indexed | 2024-12-11T10:39:09Z |
| publishDate | 2012-01-01 |
| publisher | DIGITAL.CSIC |
| record_format | Article |
| series | Psicológica |
| spelling | doaj.art-67cda80050da4a0b81e9e5893ce1dd562022-12-22T01:10:38ZengDIGITAL.CSICPsicológica1576-85972012-01-01332385402A simulation study of rater agreement measures with 2x2 contingency tablesManuel AtoJuan José LópezAna BenaventeMediante un estudio de simulación se aborda una comparación entre seis medidas obtenidas usando tres enfoques diferentes para la evaluación del acuerdo. Los coeficientes de acuerdo elegidos fueron o de Bennet (1954), T de Scott (1955), K de Cohen (1960) y Y de Gwet (2001; 2008) para representar el enfoque clásico descriptivo, el coeficiente ¿ de Aickin (1990), para representar el enfoque de los modelos loglineal y mixtura ("mixture models") y la medida A de Martín and Femia (2004) para representar el enfoque de los test de elección multiple. Los resultados obtenidos confirman que los coeficientes T y Kpresentan diferencias notables en relación a los restantes coeficientes particularmente en presencia de valores extremos de prevalencia y sesgo entre observadores. El mejor comportamento fue observado con los coeficientes ¿ de Bennet y ¿ de Martín and Femia para todos los valores de prevalencia y sesgo entre observadores.http://www.redalyc.org/articulo.oa?id=16923102012 |
| spellingShingle | Manuel Ato Juan José López Ana Benavente A simulation study of rater agreement measures with 2x2 contingency tables Psicológica |
| title | A simulation study of rater agreement measures with 2x2 contingency tables |
| title_full | A simulation study of rater agreement measures with 2x2 contingency tables |
| title_fullStr | A simulation study of rater agreement measures with 2x2 contingency tables |
| title_full_unstemmed | A simulation study of rater agreement measures with 2x2 contingency tables |
| title_short | A simulation study of rater agreement measures with 2x2 contingency tables |
| title_sort | simulation study of rater agreement measures with 2x2 contingency tables |
| url | http://www.redalyc.org/articulo.oa?id=16923102012 |
| work_keys_str_mv | AT manuelato asimulationstudyofrateragreementmeasureswith2x2contingencytables AT juanjoselopez asimulationstudyofrateragreementmeasureswith2x2contingencytables AT anabenavente asimulationstudyofrateragreementmeasureswith2x2contingencytables AT manuelato simulationstudyofrateragreementmeasureswith2x2contingencytables AT juanjoselopez simulationstudyofrateragreementmeasureswith2x2contingencytables AT anabenavente simulationstudyofrateragreementmeasureswith2x2contingencytables |