Proyectos de Investigación
Estudios de Validez y Confiabilidad del Sistema de Evaluación del Desempeño Profesional Docente (2005 a la fecha)
La investigación sobre este programa nacional de evaluación docente (cuya implementación ha sido encargada por el Ministerio de Educación a MIDE UC, desde el año 2003 a la fecha) incluye, en el área de la validez, estudios de validez de constructo (2006) y de validez consecuencial. En el área de la confiabilidad, regularmente se desarrollan estudios de generalizabilidad, análisis de confiabilidad entre jueces, y análisis factoriales. Adicionalmente, en 2005 se implementó un proceso de auto-evaluación al interior del equipo que implementa el sistema de evaluación, en base a los Estándares de Evaluación de Personal (Joint Committee for Standards in Educational Evaluation, 1988).
Para más información sobre el Sistema de Evaluación del Desempeño Profesional Docente, cuya implementación realiza MIDE UC por encargo del Ministerio de Educación, visite: www.docentemas.cl
Publicaciones asociadas:
Santelices, V. & Taut, S. (in press). Convergent validity of the Chilean standards-based teacher evaluation system. Assessment in Education.
Taut, S. & Santelices, V. (2009). Validity issues in assessing teacher competencies. Paper presented at the annual meeting of the European Educational Research Association (EERA-ECER), September 27-30, 2009 in Viena, Austria.
Taut, S. & Santelices, V. (2007). Validating the Chilean National Teacher Evaluation System: A comprehensive research agenda. Paper presented at the Annual Meeting of the American Educational Research Association, April 9-13, 2007, in Chicago, USA.
Santelices, V., Taut, S. & Valencia, E. (2008). Estudio comparativo de los resultados de los programas Docentemás y AEP entre 2002 y 2006 [Comparative quantitative analysis of the results of the national teacher evaluation program and the accreditation of excellence in teaching program between 2002 and 2006]. Internal document MIDE UC.
Estudio de validez consecuencial de los sistemas de evaluación de desempeño y excelencia docente (2008 a la fecha)
Este proyecto Fondecyt Regular Nº 1080135 examina las consecuencias de la Evaluación Docente y de la Asignación de Excelencia Pedagógica, para docentes evaluados, escuelas y municipios. Se comenzó estableciendo los efectos esperados de esas políticas educacionales, a través de análisis de documentos y entrevistas con actores claves. En el caso de la Evaluación Docente, en distintos sub-estudios se abordaron temas como: (a) consecuencias en la trayectoría laboral de docentes insatisfactorios, (b) efectos percibidos por los docentes evaluados con distintos niveles de desempeño, (c) características de los Planes de Superación Profesional (PSP) como una consecuencia obligatoria pero de carácter formativo, (d) participación en la Asignación Variable de Desempeño Individual (AVDI) como un incentivo monetario ligado a la evaluación, (e) efectos percibidos y usos reportados por directores y jefes UTP a nivel escuela, y jefes DAEM y encargados de evaluación a nivel municipal, (f) la rebeldía como consecuencia no intencionada. Se utilizan distintos métodos, tanto cuantitativos como cualitativos, según la pregunta de investigación.
Publicaciones asociadas:
Taut, S., Santelices, V., Araya, C. & Manzi, J. (2010). The theory underlying a national teacher evaluation program. Evaluation and Program Planning, 33, 477-489. http://dx.doi.org/10.1016/j.evalprogplan.2010.01.002
Araya, C., Taut, S., Santelices, V. & Manzi, J. (2010, August). Studying the effects of the certification of teaching excellence program in Chile. Paper presented at the annual meeting of the European Educational Research Association (EERA-ECER), August 25-27, 2010 in Helsinki, Finland.
Taut, S., Santelices, V. & Valencia, E. (2010). Resultado de re-evaluaciones y situación laboral de los docentes evaluados por la Evaluación Docente entre 2003 y 2008 [Results in subsequent evaluations and job situation of teachers evaluated by the national teacher evaluation program between 2003 and 2008]. Internal document MIDE UC.
Tornero, B., & Taut, S. (2009). Sistema de Evaluación del Desempeño Docente en Chile: Significados y Percepciones de Profesores Rebeldes [The teacher performance evaluation system in Chile: Meanings and perceptions of teachers who actively refuse to participate]. Paper presented at the IX Jornada Internacional de Psicología Educacional, Valparaíso, Chile.
Santelices, V., Taut, S., Araya, C., & Manzi, J. (2009). Consequential Validity of Chile’s Teacher Evaluation System: Consequences at the Municipal (Local) Level. Paper presented at the Annual Meeting of the American Educational Research Association, April 13-19, 2009, in San Diego, USA.
Santelices, V., Taut, S., & Valencia, E. (2009). Relación entre los resultados de la Evaluación Docente y los Planes de Superación Profesional: Estudio descriptivo. Internal document MIDE UC.
Taut, S., Santelices, V. & Valencia, E. (2009). Situación laboral y desempeño en evaluaciones posteriores de los docentes calificados como “insatisfactorio“ en el Sistema Nacional de Evaluación de Desempeño Docente [Job situation and performance on subsequent evaluations of teachers categorized as “unsatisfactory” by the national teacher evaluation program]. Internal document MIDE UC.
Taut, S., Santelices, V. & Thibaut, P. (2008). Explicating Expected Consequences and Underlying Assumptions of a National Teacher Evaluation System. Paper presented at the Annual Meeting of the American Evaluation Association, November 5-8, 2008, in Denver, USA.
Estudio longitudinal de creencias, valores y actitudes en estudiantes de la Universidad Católica (2007- 2013)
Esta investigación, liderada por académicos de la Escuela de Psicología y de la Facultad de Teología de la UC, tiene el propósito central de analizar a lo largo de todo el proceso de formación universitaria los principales sistemas de creencias religiosas, sociales y políticas; valores, aspiraciones, intereses y expectativas de los estudiantes de todas las carreras de la universidad en dos generaciones. Al ser un estudio panel con cuatro puntos de medición (mide los mismos participantes a lo largo del tiempo), será posible identificar y modelar procesos de cambio y estabilidad de los aspectos evaluados, así como los factores que explican dichos procesos. Las mediciones se llevarán a cabo al inicio del primer, tercer, y quinto año así como un año después de haber egresado
Estudio Crimen, Justicia y Castigo (2010)
El estudio Crimen, Justicia y Castigo explora las experiencias individuales con el crimen y el sistema de justicia criminal en la sociedad chilena a través de una encuesta de opinión pública realizada en 2010. La encuesta se aplicó en Santiago y Concepción a 738 personas: 497 en el gran Santiago y 241 en el gran Concepción.
Esta investigación es conducida por la Pontificia Universidad Católica de Chile, a través de Mide UC, en colaboración con la London School of Economics. Es un proyecto asociado al estudio Eurojustis (www.eurojustis.eu).
Las preguntas centrales del estudio son: ¿Cómo se percibe la delincuencia? ¿Por qué y en qué situaciones las personas apoyan el castigo a los delincuentes? ¿En qué medida las personas confían en el sistema de judicial?
Radiografía de la Solidaridad en Chile e Índice de Solidaridad (2009 a la fecha)
Esta investigación apunta a describir y explicar las actitudes solidarias de los chilenos, tanto en donaciones de dinero como en conductas concretas de ayuda a otros. El estudio, desarrollado por Mide UC en colaboración con el Hogar de Cristo, comenzó el año 2009 y se replicará durante el año 2010, para realizar comparaciones en el tiempo.
El énfasis del primer estudio (2009) fue el desarrollo de un Indice de Solidaridad, el cual permite poner una nota general a las actitudes solidarias de los chilenos. La investigación permitió construir el primer indicador de este tipo en nuestro país y Latinoamérica, y da cuenta de que las conductas de ayuda se manifiestan de diversas formas y con distinta frecuencia según factores como sexo, edad y nivel socioeconómico (NSE).
Desarrollo de pruebas estandarizadas y de una metodología de valor agregado para evaluar el progreso de los aprendizaje en matemática y lenguaje de estudiantes de segundo ciclo de enseñanza básica (5º a 8º) (2008 – 2009)
Este proyecto corresponde a una investigación financiada por el Fondo de Desarrollo e Innovación (INNOVA) del Gobierno de Chile. Consiste en el desarrollo de pruebas estandarizadas y de una metodología de valor agregado para evaluar el progreso de los aprendizajes en matemática y lenguaje de estudiantes de segundo ciclo de enseñanza básica (5º a 8º) en establecimientos municipales y subvencionados en todo Chile.
Publicaciones asociadas:
Hein, A. & Taut, S. (2010). El uso de información evaluativa externa con fines formativos en establecimientos educacionales chilenos [The use of formative evaluative information in Chilean schools]. Revista Iberoamericana de Evaluación Educativa, 3(2), pp. 160-181. http://rinace.net/riee/numeros/vol3-num2/art9.html
La Calidad de la Educación en Chile a partir del Análisis de Mediciones Educacionales (2007)
El estudio corresponde a una investigación financiada por el Banco Interamericano del Desarrollo (BID), mediante el cual se analizarán datos provenientes de mediciones educacionales nacionales (SIMCE y Evaluación Docente), así como internacionales (PISA y SIALS) para analizar los factores que inciden en la calidad de los logros educacionales que se evalúan mediante las pruebas indicadas. El estudio produjo un informe para Chile, que fue divulgado mediante un seminario internacional realizado en enero de 2010. Este proyecto es resultado de una convocatoria del BID para producir informes análogos en diversos países de América Latina.
Estudios sobre incorporación de índices de Valor Agregado a SIMCE (2007)
Durante el año 2007, MIDE UC realiza un estudio destinado a analizar la Incorporación de Índices de Valor Agregado a Informes SIMCE (Unidad SIMCE, Ministerio de Educación). Esta iniciativa forma parte de un proyecto piloto que incluye el levantamiento de datos, desarrollo de modelos estadísticos y construcción de índices de valor agregado. Asimismo, la investigación incluye la adaptación de los informes de resultados proporcionados por el SIMCE a los padres y apoderados y a los establecimientos educacionales en consistencia con el uso de un enfoque de Valor Agregado, el desarrollo de un diseño gráfico para su comunicación eficaz y la evaluación en terreno de la comprensión de estos indicadores por los grupos objetivos.
Publicaciones asociadas:
Taut, S. & Santelices, V. (2009). Comprehension and use of value-added school performance indicators reported to teachers and parents. Paper presented at the annual meeting of the European Educational Research Association (EERA-ECER), September 27-30, 2009 in Viena, Austria.
González, J., San Martín, E., Manzi, J. & Del Pino (2009, July). Value-added modeling of school performance under large school variability and high selectivity. Paper presented at The 16th International Meeting of the Psychometric Society, 20th to 24th of July 2009, in St John’s College, Cambridge, England.
González, J., San Martín, E. (2010, August). Mixed Modeling Approach to Value-Added Analysis: features, Problems, and Recent Developments in the Chilean Case. Paper presented to the Second meeting of EARLI SIG 18; Educational Effectiveness: Models, Methods and Applications, August 25-27, 2010, in Leuven, Belgium.
Evaluación de acceso, comprensión y uso de los productos comunicacionales del SIMCE (2006)
En el año 2006, MIDE UC llevó a cabo un estudio de evaluación de los productos comunicacionales del Sistema de Medición de la Calidad de la Educación, SIMCE, dependiente de la Unidad de Currículum y Evaluación del Ministerio de Educación.
En este estudio se evaluó la claridad y el uso de distintos productos comunicacionales de este sistema de evaluación, particularmente los informes de resultados entregados a padres y apoderados, y a los establecimientos educacionales. En base de los resultados de la evaluación se desarrollaron nuevas propuestas para la entrega de la información a padres y escuelas.
Publicaciones asociadas:
Taut, S., Cortés, F., Sebastian, C. & Preiss, D. (2009). Evaluating school and parent reports of the national student achievement testing system (SIMCE) in Chile: Access, comprehension, and use. Evaluation and Program Planning, 32, 129-137.