{"id":48548,"date":"2022-03-14T11:14:38","date_gmt":"2022-03-14T17:14:38","guid":{"rendered":"http:\/\/34.70.206.201\/cejume\/wp\/?p=48548"},"modified":"2022-03-14T12:35:39","modified_gmt":"2022-03-14T18:35:39","slug":"como-se-capacita-a-quienes-califican-los-portafolios-de-las-y-los-operadores-del-sistema-de-justicia-penal","status":"publish","type":"post","link":"https:\/\/cejume.mx\/index.php\/2022\/03\/14\/como-se-capacita-a-quienes-califican-los-portafolios-de-las-y-los-operadores-del-sistema-de-justicia-penal\/","title":{"rendered":"\u00bfC\u00f3mo se capacita a quienes califican los portafolios de las y los operadores del SJP?"},"content":{"rendered":"\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t\t
\n\t\t\t\t\t\t\t
<\/div>\n\t\t\t\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
<\/div>\n\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
<\/div>\n\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t

\u00bfC\u00f3mo se capacita a quienes califican los portafolios de las y los operadores del Sistema de Justicia Penal? <\/h2>\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
<\/div>\n\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
<\/div>\n\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
<\/div>\n\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t
\n\t\t\t\t

Erika Canch\u00e9 G\u00f3ngora\n<\/p>\n

\nInvestigadora en el CEEAD\n<\/span><\/font><\/p>\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t

\n\t\t\t\t
\n\t\t\t\t\t\t\t\t
\n\t\t\t\t

La evaluaci\u00f3n de habilidades que sustenta la Certificaci\u00f3n para la Justicia en M\u00e9xico (CEJUME) se basa en la valoraci\u00f3n del desempe\u00f1o profesional de operadoras y operadores del Sistema de Justicia Penal Acusatorio (SJPA). Para ello, es necesario desarrollar instrumentos v\u00e1lidos que nos permitan saber con la mayor precisi\u00f3n con qu\u00e9 calidad se ejecutan las pr\u00e1cticas a evaluar, evitando hacer interpretaciones err\u00f3neas o descontextualizadas. Por ello, en el CEEAD optamos por una evaluaci\u00f3n de portafolios basada en casos.<\/p>\n


Una parte importante de la evaluaci\u00f3n es identificar c\u00f3mo se obtiene la informaci\u00f3n que va a sustentar un juicio de valor. El portafolios se integra a partir de tareas evaluativas, las cuales recogen evidencia de la capacidad de argumentaci\u00f3n jur\u00eddica, toma de decisiones, comunicaci\u00f3n de pretensiones e incluso de resoluci\u00f3n de problemas de las y los profesionales que operan el SJPA y del personal capacitador de estos operarios. En la evaluaci\u00f3n de portafolios importa lo que la persona sabe y tambi\u00e9n c\u00f3mo utiliza el conocimiento para enfrentarse a determinada situaci\u00f3n en determinado momento.<\/p>\n


El otro elemento fundamental en el dise\u00f1o del portafolios de evaluaci\u00f3n es la construcci\u00f3n de r\u00fabricas a partir de las cuales se valorar\u00e1 el desempe\u00f1o observado. Las r\u00fabricas de calificaci\u00f3n son herramientas de estandarizaci\u00f3n que proporcionan una medida v\u00e1lida, confiable y basada en artefactos -evidencias de la pr\u00e1ctica- (Borko, et. al. 2005) de las personas que sustentan la evaluaci\u00f3n y que cumplen con una funci\u00f3n formativa. Las r\u00fabricas consisten en matrices, en donde se cruzan criterios de evaluaci\u00f3n con niveles de desempe\u00f1o y en las intersecciones se elaboran descriptores que caracterizan los distintos niveles de desempe\u00f1o de manera cualitativa.<\/p>\n


Para cada tarea evaluativa se construyen r\u00fabricas con varios criterios o cualidades a observar en las respuestas a las tareas evaluativas. Su construcci\u00f3n y uso requieren de la mayor objetividad y fundamentaci\u00f3n sobre lo observado, por ello, son desarrolladas por grupos colegiados de expertos con conocimiento y experiencia en el dominio a evaluar.<\/p>\n


Evaluar mediante r\u00fabricas representa uno de los mayores retos en evaluaci\u00f3n del desempe\u00f1o profesional, pues su potencial depende en gran medida, del personal calificador, principal usuario de la r\u00fabrica que debe ser un par cuidadosamente seleccionado, capacitado, entrenado y supervisado durante todas las etapas del proceso de valoraci\u00f3n (Fig. 1) y calificaci\u00f3n de las respuestas, as\u00ed como de las ejecuciones que observa, con el fin de evitar sesgos y obtener puntuaciones precisas de manera consistente.<\/p>\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t

\n\t\t\t\t
\n\t\t\t\t\t\t\t\t
\n\t\t\t\t\t\t\t\t\t\t\t\t\"\"\t\t\t\t\t\t\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t
\n\t\t\t\t

<\/p>\n

Figura 1. Etapas del proceso de capacitaci\u00f3n y calificaci\u00f3n

<\/b><\/p>\n

Capacitaci\u00f3n especializada
<\/b>Quienes califican las respuestas o ejecuciones producto de las tareas evaluativas requieren de una trayectoria profesional s\u00f3lida en la funci\u00f3n a evaluar la cual, adem\u00e1s de permitirles comprender los distintos matices del ejercicio profesional, tambi\u00e9n les permita aprovechar de su experiencia para dotar de validez este proceso. La capacitaci\u00f3n de las personas que van a calificar representa una de las etapas m\u00e1s desafiantes del proceso evaluativo, debido a que para la mayor\u00eda de las y los participantes es el primer acercamiento a una r\u00fabrica de calificaci\u00f3n, al an\u00e1lisis de pr\u00e1cticas espec\u00edficas en las cuales ellos son expertos y a la discusi\u00f3n de ejemplos paradigm\u00e1ticos que han sido seleccionados previamente para provocar discusiones con la finalidad de favorecer la comprensi\u00f3n de lo que se eval\u00faa.<\/p>\n


La intenci\u00f3n de realizar una capacitaci\u00f3n que incorpora ejercicios de calificaci\u00f3n de respuestas reales mediante las r\u00fabricas a trav\u00e9s de din\u00e1micas de discusi\u00f3n, representa una metodolog\u00eda de trabajo que tambi\u00e9n tiene la intenci\u00f3n de construir colectivamente acuerdos sobre la interpretaci\u00f3n y uso de la r\u00fabrica. Dichos acuerdos tendr\u00e1n un impacto en la estandarizaci\u00f3n de los juicios de las personas que califican, con ello, en la validez y confiabilidad de la evaluaci\u00f3n (Bejar, 2012).<\/p>\n


Durante los ejercicios de discusi\u00f3n, el personal calificador tiene la oportunidad de reflexionar sobre sus propios juicios y sobre el de los dem\u00e1s. Tambi\u00e9n, tiene que compartir su interpretaci\u00f3n sobre el nivel de desempe\u00f1o observado y el nivel esperado en cada criterio de la r\u00fabrica. Estos ejercicios colectivos entre calificadores han demostrado ser \u00fatiles para reducir discrepancias y sesgos, as\u00ed lograr un modelo com\u00fan de juicios alrededor de un mismo criterio y finalmente reflejar ese juicio en un nivel de desempe\u00f1o. Este intercambio de justificaciones generado durante cada una de las oportunidades de calificar usando la r\u00fabrica ha resultado ser de vital importancia para controlar todos los supuestos, creencias o informaci\u00f3n alterna a lo que se pretende evaluar.

<\/p>\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t

\n\t\t\t
\n\t\t\t\t\t\t\t
\n\t\t\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
<\/div>\n\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t
\n\t\t\t
<\/div>\n\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t
\n\t\t\t\t\t\t\t\t\t\t\t\t\"\"\t\t\t\t\t\t\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
\n\t\t\t\t
\n\t\t\t\t\t\t\t\t
\n\t\t\t\t

<\/p>\n

Durante el seguimiento de este tipo de capacitaciones, quienes han coordinado las distintas sesiones han tenido la oportunidad de notar y atender problem\u00e1ticas del personal calificador en cuanto a:<\/p>\n


<\/p>\n

    \n
  1. La <\/span>forma en la cual procesan tanto la informaci\u00f3n de la r\u00fabrica como la que nos brindan quienes sustentan la evaluaci\u00f3n<\/span><\/li>\n
  2. Las creencias preexistentes sobre c\u00f3mo debe ser la pr\u00e1ctica que califican<\/li>\n
  3. La forma en la cual valoran determinada informaci\u00f3n por encima de otra<\/li>\n<\/ol>\n

    Tener conocimiento de este tipo de obst\u00e1culos nos ha permitido vigilar que las siguientes etapas de monitoreo y calificaci\u00f3n sean m\u00e1s pertinentes y precisas.<\/p>\n


    Calibraci\u00f3n durante la capacitaci\u00f3n <\/b><\/p>\n

    Cada una de las personas calificadoras tiene experiencias propias, creencias e ideas sobre la pr\u00e1ctica a evaluar y ello representa informaci\u00f3n importante que probablemente tienden a colocar en los juicios de valor que est\u00e9n asignando. Esta problem\u00e1tica no es simple y pretender eliminar todo tipo de conocimiento previo es pr\u00e1cticamente imposible, por ello esta estrategia de capacitaci\u00f3n asume la preexistencia de estos criterios \u201calternos\u201d a la r\u00fabrica y parte de la consideraci\u00f3n de que la mejor forma de apropiarnos de un conocimiento es mediante un uso o aplicaci\u00f3n reiterada.<\/p>\n


    Por ello, se han dise\u00f1ado actividades de calibraci\u00f3n durante la capacitaci\u00f3n y durante todo el proceso de calificaci\u00f3n. Durante la etapa de capacitaci\u00f3n, la calibraci\u00f3n consta de ejercicios guiados de uso de la r\u00fabrica dise\u00f1ados para generar discusiones cr\u00edticas con la intenci\u00f3n de dar oportunidades de familiarizaci\u00f3n con lo cual mide cada criterio de evaluaci\u00f3n, comunicar d\u00f3nde cada participante ubica el desempe\u00f1o y c\u00f3mo lo traduce en un nivel de logro de dicho desempe\u00f1o.<\/p>\n


    El objetivo de esta calibraci\u00f3n es detectar el grado de apego de quienes califican a los criterios de evaluaci\u00f3n de la r\u00fabrica y notar de manera oportuna juicios caracter\u00edsticos de un calificador o calificadora muy exigente o muy condescendiente (Gitomer, et al. 2014). Asegurar que la r\u00fabrica es el marco de referencia que norma cada una de las puntuaciones asignadas, es el reto a comunicar. Lograr que las personas calificadoras recurran a la autodetecci\u00f3n de sus sesgos durante todo el proceso, es la meta por cumplir.<\/p>\n


    Hemos aprendido que cuando los per\u00edodos de calificaci\u00f3n son extensos es muy probable que estos criterios externos a la r\u00fabrica vuelvan a surgir, e incluso, se vayan acumulando debido a la exposici\u00f3n de distintas respuestas observadas en una variedad de contextos. Por ello, durante el proceso de calificaci\u00f3n quienes participan realizan frecuentemente la calificaci\u00f3n de la misma producci\u00f3n y reciben retroalimentaci\u00f3n espec\u00edfica al respecto.<\/p>\n


    Otras estrategias
    <\/b>Otras estrategias implementadas en el CEEAD, ante el incremento del n\u00famero de portafolios a calificar y para asegurar el apego a las r\u00fabricas, fue la de crear una figura con la funci\u00f3n de coordinar los procesos de calificaci\u00f3n. Esta persona tambi\u00e9n es un par y monitorea todo el proceso desde la capacitaci\u00f3n hasta la finalizaci\u00f3n del proceso de calificaci\u00f3n de un grupo determinado de calificadoras y calificadores.<\/p>\n


    Los aspectos a evaluar en cada una de las r\u00fabricas y el conocimiento de todos los factores que pueden influir en la calificaci\u00f3n, son fundamentales para un buen desempe\u00f1o del personal coordinador. El monitoreo constante de la asignaci\u00f3n de niveles de desempe\u00f1o, as\u00ed como el an\u00e1lisis de justificaciones brindada por cada persona calificadora, ayuda a detectar sesgos y promover que se asignen niveles de forma precisa y consistente.<\/p>\n


    Finalmente es importante destacar la importancia de elaborar materiales y herramientas de apoyo tanto en la capacitaci\u00f3n como en la calificaci\u00f3n. Por ello dise\u00f1amos un repositorio en el que tanto personal coordinador como calificador tiene acceso al manual, el cual contiene explicaciones extensas de t\u00e9rminos importantes de cada r\u00fabrica, ejemplos paradigm\u00e1ticos como gu\u00eda durante las discusiones de capacitaci\u00f3n que funcionan como c\u00f3digo maestro (master code), pues contiene no solo acuerdos generados en capacitaci\u00f3n sino una variedad de ejemplos y justificaciones que ejemplifican los principales atributos involucrados en las r\u00fabricas de calificaci\u00f3n. <\/p>\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t

    \n\t\t\t\t\t\t
    \n\t\t\t\t\t\t\t
    \n\t\t\t\t\t
    \n\t\t\t
    \n\t\t\t\t\t\t\t
    \n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t
    \n\t\t\t\t\t\t
    \n\t\t\t\t\t\t\t
    \n\t\t\t\t\t
    \n\t\t\t
    \n\t\t\t\t\t\t\t
    \n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t
    \n\t\t\t\t\t\t
    \n\t\t\t\t\t\t\t
    \n\t\t\t\t\t
    \n\t\t\t
    \n\t\t\t\t\t\t\t
    \n\t\t\t\t\t\t
    \n\t\t\t\t
    \n\t\t\t

    Bibliograf\u00eda<\/h4>\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t
    \n\t\t\t\t
    \n\t\t\t\t\t\t\t\t
    \n\t\t\t\t

    • Bejar, I. (2012). Rater cognition: Implications for validity. Educational Assessment, 31(3), 2-9. 10.1111\/j.1745-3992.2012.00238.x<\/li>
    • \nBorko, H., Stecher, B. M., Alonzo, A. C., Moncure, S., & McClam, S. (2005). Artifact packages for characterizing classroom practice: A pilot study. Educational Assessment, 10(2), 73- 104. 10.1207\/s15326977ea1002_1<\/li>
    • \nEngelhard, G. (2002). Monitoring raters in performance assessments. In G. Tindal & T. Haladyna (Eds.), Large-scale assessment programs for all students: Validity, technical accuracy, and implementation (p\u00e1gs. 261-287). Mahwah, NJ: Lawrence Erlbaum.<\/li>
    • \nGitomer, D., Bell, C., Qi, Y., Croft, A. Leusner, D., Mccaffrey, D. & Pianta, R. (2014). Improving observational score quality: Challenges in observer thinking.<\/li><\/ul><\/p>\t\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t
      \n\t\t\t\t\t\t
      \n\t\t\t\t\t\t\t
      \n\t\t\t\t\t
      \n\t\t\t
      \n\t\t\t\t\t\t\t
      \n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t\t\t\t\t\t<\/div>\n\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t","protected":false},"excerpt":{"rendered":"

      Con la redefinici\u00f3n del sistema de justicia penal, el papel de la asesor\u00eda jur\u00eddica victimal como actora sustantiva cobr\u00f3 mayor relevancia.<\/p>\n","protected":false},"author":3,"featured_media":48559,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"elementor_header_footer","format":"standard","meta":[],"categories":[70],"tags":[69,68],"acf":[],"_links":{"self":[{"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/posts\/48548"}],"collection":[{"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/users\/3"}],"replies":[{"embeddable":true,"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/comments?post=48548"}],"version-history":[{"count":27,"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/posts\/48548\/revisions"}],"predecessor-version":[{"id":48581,"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/posts\/48548\/revisions\/48581"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/media\/48559"}],"wp:attachment":[{"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/media?parent=48548"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/categories?post=48548"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/cejume.mx\/index.php\/wp-json\/wp\/v2\/tags?post=48548"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}