escala-cuestionario para la evaluación docente en la nueva
-
Upload
truongthuy -
Category
Documents
-
view
259 -
download
1
Transcript of escala-cuestionario para la evaluación docente en la nueva
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
1
ESCALA-CUESTIONARIO PARA LA EVALUACIÓN DOCENTE EN LA NUEVA REFORMA DE LA EDUCACIÓN SECUNDARIA ANTELMO CASTRO LÓPEZ / MARÍA LUISA MADUEÑO SERRANO / CLAUDIA SELENE TAPIA RUELAS
RESUMEN: La Nueva Reforma de la educación básica en México orienta la incorporación del modelo por competencia en la reestructuración de planes y programas de estudio. En la educación secundaria se busca que el estudiante desarrolle competencias para el aprendizaje permanente, para el manejo de información, para el manejo de situaciones y para la convivencia y la vida en sociedad. Actualmente se carece de procesos e instrumentos que permitan valorar el impacto de la reforma en el alumno y en la mediación pedagógica (docente). Esto obligó a diseñar la Escala-Cuestionario para la Evaluación Docente (ECED). Aquí se presentan evidencias de validez y confiabilidad del instrumento después de realizar tres soluciones factoriales para acumular evidencias de validez a través de la técnica análisis factorial exploratorio. Se cumplen los criterios de confiabilidad, sin embargo en las tres soluciones no se percibe parsimonia en cuanto a la lógica de agrupación de los reactivos según la literatura a través de la cual fue construido. Es necesario reestructurar teóricamente las competencias o crear nuevas categorías de acuerdo a los resultados obtenidos. PALABRAS CLAVE: Evaluación docente, validez, confiabilidad, enfoque por competencia, validez de constructo.
INTRODUCCIÓN
La evaluación es un proceso que ayuda en la toma de decisiones para mejorar
las áreas de desempeño dentro de los organismos. El Plan Nacional de
Desarrollo (PND) de México considera a la evaluación como una de las
herramientas más poderosas para mejorar la calidad de la educación y
promover una trasformación educativa; toma como referente la mejora de los
sistemas educativos de otros países que han hecho de este proceso un eje central
para el desarrollo (PND, 2007).
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
2
El Plan Nacional de Educación (PNE) 2001-2006 promovió una reforma con el
propósito de reconstruir el currículo de la educación básica y con la meta de
enseñar al alumno a adquirir habilidades, actitudes y conocimientos que le
ayuden a vivir armónicamente con la sociedad, la escuela y el trabajo, utiliza el
modelo por competencias como estrategia. En el PNE 2007-2012 considera una
Nueva Reforma en la educación secundaria que promueve la evaluación con la
intención de mejorar la calidad con equidad como resultado de una evaluación
en todas las esferas del proceso educativo, es decir, lograr la transparencia y el
impulsar mecanismos sistemáticos de evaluación para demostrar resultados de
aprendizaje de los alumnos, de desempeño de los maestros, directivos,
supervisores, jefes de sector, de los procesos de enseñanza y gestión en todo el
sistema educativo (PND, 2007-2012); también para fomentar la competitividad
(SEP, 2007).
Actualmente, la reestructuración curricular en secundaria abarca sólo el
primero y segundo grado y los intentos por completar el tercer grado
continúan. Uno de los problemas que ha enfrentado este nivel son los
mecanismos de evaluación, principalmente la carencia de instrumentos que
permitan medir el impacto de las acciones, específicamente el impacto de la
reestructuración en secundaria bajo el enfoque por competencia.
El presente estudio propone un instrumento que permite evaluar el desempeño
docente en la habilidad para el desarrollo de competencia en el estudiante. La
evaluación es de la perspectiva del alumno y responde a las necesidades
nacionales manifiestas en la Nueva Reforma.
OBJETIVO
Sabiendo que el alumno es unos de los agentes directos que pueden evidenciar
las acciones del profesor dentro de los procesos educativos en el aula, el
presente estudio tuvo como objetivo elaborar una propuesta de un instrumento
con evidencias de validez y confiabilidad que permite evaluar el desempeño
docente en la habilidad para el desarrollo de competencia en el estudiante. La
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
3
evaluación es de la perspectiva del alumno y responde a las necesidades
nacionales manifiestas en la Nueva Reforma.
JUSTIFICACIÓN
El reciente surgimiento de la evaluación en México se ha visto por parte de los
profesores como una actividad que pudiera afectar su permanencia, evidenciar
su trabajo académico o traspasar la privacidad del ambiente laboral, lo cual ha
influenciado en la cobertura y seguimiento de la aplicación de dicho proceso en
las secundarias del país; aunque se reitere que la evaluación no tiene el
propósito de descalificar a nadie (Vázquez, 2007).
Debido a que la evaluación docente es una temática pertinente en la educación,
el hacer planteamientos y crear procesos que respondan a las necesidades de la
educación básica, es incidir en los indicadores del sistema educativo nacional.
El presente estudio considera las necesidades de la ecuación secundaria dentro
de su proceso de reestructuración curricular que incorpora el enfoque basado
en competencias, principalmente en el aseguramiento del desarrollo de
habilidades en el estudiante. El contar con instrumentos válidos y confiables
que midan la acción pedagógica del docente, contribuye en la toma decisiones
sobre los procesos de la enseñanza y el aprendizaje y en la mejora de la calidad
en la educación de cada centro educativo.
CONSIDERACIONES TEÓRICAS
La educación secundaria juega un papel importante en el sistema educativo
porque contribuye a que los alumnos desarrollen habilidades y destrezas y
adquieran conocimientos que sirvan como antesala de la educación media y
superior o la entrada al campo laboral en caso de truncar sus estudios.
Actualmente en México el enfoque por competencias se incorpora en las
currículas de las instituciones y tiene la característica del desarrollo de
habilidades, actitudes y conocimientos que ayude en la preparación para la vida
y el trabajo al estudiante. El enfoque tiene los inicios en 1990 a la par de la idea
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
4
de globalización donde se requirió que las personas desarrollaran
competencias, principalmente laborales. Entonces, el enfoque por competencias
se vio como una alternativa en las escuelas para el diseño curricular porque
involucra una metodología que conlleva la tarea del saber hacer, que tiene sus
principios en la teoría constructivista y el aprendizaje significativo (no es el
hacer por hacer o la acumulación de saberes).
La Reforma en la Educación Secundaria (RES) pretende desarrollar en el alumno
competencias para el aprendizaje permanente; competencias para el manejo de
información, competencias para el manejo de situaciones, competencias para la
convivencia y competencias para la vida en sociedad. Para el desarrollo de
dichas competencias, la figura del maestro reafirma el lugar que ocupa dentro
del aula (responsable inmediato del aprendizaje del alumno). Éste debe contar
con habilidades que revelen la mediación pedagógica sustentada en el dominio
del área, en la capacidad para compartir sus conocimientos y habilidades, como
en la forma de animar el aprendizaje. Aunado a esto, el Plan de Estudios de
Educción Secundaria (2006) considera tareas específicas como incorporar los
intereses, las necesidades y los conocimientos previos de los alumnos, atender
la diversidad, promover el trabajo grupal y la construcción colectiva del
conocimiento, diversificar las estrategias didácticas, el trabajo por proyectos,
optimizar el uso del tiempo y del espacio, seleccionar materiales adecuados e
impulsar la autonomía de los estudiantes y la evaluación.
El Plan Nacional de Educación 2007-2012 promete una transformación del
Sistema Educativo Mexicano con el objetivo de mejorar la calidad en las
escuelas del país; y llama a una urgente reforma que hace énfasis en tres ejes
fundamentales que plantean una “continuidad y profundización de las políticas
emprendidas por los llamados gobiernos de la tecnocracia: calidad con equidad;
educación para el desarrollo humano sustentable: productividad,
competitividad y capacidades para la vida y el trabajo” (Avilés, 2007, ¶ 7).
Plantea además la necesidad de contar con metas claras, seguimiento y
evaluación puntual, que se lleven a cabo a mediano y largo plazo con el objetivo
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
5
de fomentar la evaluación dentro del proceso educativo como una estrategia a
utilizar para mejorar la competitividad.
Actualmente en México, para mejorar la toma de decisiones en materia de
política pública y sobre todo en esta reforma a la agenda educativa del país, una
de las estrategias es la evaluación (Vázquez, 2007). Este proceso orienta la labor
pedagógica de los educadores y promueve su desarrollo profesional continuo
(Sistema de Evaluación del Desempeño Profesional Docente, 2007).
MÉTODO
Para recabar información necesaria para efectos de obtención de evidencias de
validez y confiabilidad, el estudio se realizó en cuatro secundarias del
municipio de Cajeme, Sonora. Se trabajó con primero y segundo grado porque
en ese periodo, en la Nueva Reforma sólo se habían reestructurado los planes y
programas de las materias que corresponden a estos grados. La muestra se
integró por 791 alumnos (49.7% de grado y 47.9% de segundo) inscritos en el
ciclo 2007-2008. El 43.1% corresponden a secundarias técnicas y el 56.4% a
secundarias generales. El estudio se dividió en tres fases.
Fase 1. Construcción de la escala cuestionario y validez de contenido Con la intención de determinar las dimensiones e indicadores que debía
contener el instrumento, se analizó la Reforma para Educación Básica del PNE
2001-2006 y los documentos sugeridos por funcionarios de la Secretaría de
Educación y Cultura (SEC) de estado de Sonora, mismos que utilizan en los
cursos de actualización para maestros (Planeación y Evaluación basadas en
competencias y la Guía para el Desarrollo Docente).
El resultado de esta fase fue un instrumento de 57 reactivos que evalúan al
docente en la formación del alumno en cuatro competencias: Competencias
para el aprendizaje permanente; competencias para el manejo de información,
competencias para el manejo de situaciones, competencias para la convivencia y
la vida en sociedad. Para calificar los reactivos, se consideró una escala tipo
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
6
Likert con cinco opciones de respuesta (ver anexo). El instrumento tomó el
nombre de Escala-Cuestionario para la Evaluación Docente (ECED).
A fin de obtener validez de contenido del instrumento se acudió a la técnica de
jueceo de expertos a quienes se les entregó la propuesta teórica del instrumento
y después del análisis propusieron cambios en 18 reactivos. Los cambios fueron
en función de redacción y no de estructura teórica, es decir, los reactivos se
mantuvieron en las cuatro dimensiones e indicadores.
Una vez que se atendió las recomendaciones de los expertos, se reestructuró la
propuesta teórica y se aplicó una prueba piloto a 107 alumnos de secundaria
con la intención de descartar problemas relacionados con lenguaje y modismos,
así como verificar sintaxis y coherencias de reactivos. Con este ejercicio se
modificaron cinco reactivos.
Fase 2. Aplicación de la ECED La aplicación de la escala se llevó a cabo en el mes de junio del 2008 en cuatro
escuelas secundarias de Ciudad Obregón, Sonora. Para llevar a cabo la
aplicación del instrumento primero se eligió la muestra probabilística
estratificada que consideró inicialmente 570 alumnos, esto sería suficiente para
poder obtener evidencias de confiabilidad y validez de la ECED, sin embargo, la
disposición y apoyo de las instituciones permitió la aplicación a 791 alumnos.
Fase 3. Aportaciones de evidencias de validez de constructo y confiabilidad de la ECED Para revelar la estructura factorial de la escala, es decir, con el objetivo de
determinar el grado en que las medidas de diferentes proposiciones comparten
una base común o factor que condensa su variabilidad, y con ello proporcionar
evidencias de validez de constructo, se desarrolló el siguiente procedimiento.
a) Se estimó el coeficiente Alfa de Cronbach del instrumento en general para
arrojar evidencias de consistencia interna del instrumento.
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
7
b) Se llevó a cabo el KMO, para poder proceder con la solución factorial (AFE). El
criterio fue que tuviera valor mayor a 0.75.
c) Se llevaron a cabo tres soluciones factoriales para acumular evidencias de
validez de constructo del instrumento. Se utilizó la técnica de análisis
factorial exploratorio con el método de extracción Varimax, el método de
rotación de máxima verosimilitud con normalización Kaiser. A lo largo de
los tres momentos de acumulación de validez estadística de la escala, los
criterios para retener un factor, o bien para conservar un factor susceptible a
ser interpretado fueron que tuvieran cargas factoriales =>.35, que estuviesen
integrados por lo menos tres reactivos; en el caso de que un reactivo cargara
en dos factores se tomó aquel que tuviese la carga más alta y que tuviera
índices de confiabilidad mayores a .50.
RESULTADOS
Uno de los criterios para realizar procesos de validación de constructo, es que el
instrumento presente consistencia interna. Se estimó la confiabilidad a través de
la prueba estadística Alpha de Cronbach y se obtuvo como resultado un
coeficiente de α = .968.
Según Pedhazur (1991), para realizar un análisis factorial primeramente se debe
estimar la adecuación de la muestra a través de la prueba Barlett y Kaiser
Meyer Olkin (KMO). Se realizó esta operación y se encontró que la muestra es
pertinente para este tipo de análisis, obteniendo un índice favorable de .95.
Para mostrar evidencias de validez de constructo del instrumento, una de las
técnicas utilizadas fue el análisis factorial exploratorio. Se siguió con el proceso
que propone Byrne (2000); se efectuó este análisis debido a que se tiene
referencia teórica la cual infiere en la estructura grupal de los reactivos en
cuatro factores.
De acuerdo a los datos arrojados por el análisis factorial exploratorio, en el cual
se solicitó una solución factorial libre con el método de extracción de máxima
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
8
probabilidad (ML), con rotación Varimax y normalización Kaiser, donde la
rotación convergió en 12 iteraciones. Se identificaron solamente cinco factores
interpretables, con un porcentaje acumulativo de varianza explicada de 45.47%
teniendo como parámetro de retención de reactivos con carga factorial >= .35 y
el criterio que se utilizó para llevar a cabo la interpretación de un factor fue que
estuviera integrado por lo menos por tres reactivos.
En la primera solución factorial se encontró que no se muestra sencillez en el
agrupamiento de reactivos en los factores resultantes según la propuesta teórica
del instrumento. Existe confiabilidad pero no se percibe parsimonia en cuanto a
la lógica de agrupación de reactivos según la teoría a través de la cual fue
construido. Para afinar los resultados e identificar las características
psicométricas de la ECED, se emplearon dos criterios para seleccionar reactivos
que serían excluidos del análisis factorial, que son el sesgo y la kurtosis en las
respuestas de cada reactivo.
De acuerdo con los resultados se eliminaron 2 reactivos que no mantenían
valores aceptables para ser incluidos en análisis factorial, los cuales son: (R) 17 y
(R) 44 que tuvieron un sesgo mayor a 1.5 y una kurtosis mayor a 1.
Posteriormente se realizó la segunda solución factorial libre la cual arrojó
resultados similares a la primera solución aún después de eliminar reactivos, es
decir, se obtuvieron cinco factores interpretable donde no se percibió
parsimonia en cuanto a la lógica de agrupación de reactivos.
Dado a los resultados arrojados por la primera y segunda solución factorial
exploratoria libre no confirman en su totalidad la propuesta teórica del
instrumento, se realizó un tercer análisis factorial exploratorio de solución a
cuatro factores, con la intención de responder a la fundamentación teórica del
instrumento. Dio como resultado un índice de confiabilidad en la prueba
estadística Alpha de Cronbach de α = .969; una varianza explicada de 46.58; y 2
reactivos excluidos. La propuesta final del instrumento la componen 53
reactivos (ver anexo).
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
9
CONCLUSIONES
A partir de las evidencias obtenidas, se puede señalar que aunque se obtuvo un
alto grado de confiabilidad dentro de la validez de constructo y una validez de
contenido, existe una disimilitud en 23 reactivos. Esto después de hacer una
comparación de la propuesta teórica con los resultados de agrupación de la
solución factorial a cuatro factores. Sólo se encontraron 20 reactivos que evalúan
el constructo para el cual, teóricamente fue diseñado. Esto no significa que el
instrumento no cumple con las características de validez y confiabilidad, sino
que sugiere una reestructuración de agrupación según las competencias en la
cuales se fundamentaron, de igual forma, de renombrar las competencias o
crear nuevas a partir de análisis factorial.
La evaluación en la educación secundaria como un proceso continuo,
contribuye a mejorar la educación en México y al objetivo propuesto por la
Reforma (calidad en la educación). A través del presente estudio se obtuvieron
evidencias de validez y confiabilidad de un instrumento de evaluación docente
de nivel secundaria que contribuye a las iniciativas de educación básica y de los
intereses nacionales, ya que valora la promoción de habilidades y actitudes del
maestro hacia el alumno según el enfoque por competencias que se ha
implantado en los primeros dos grados según la reforma 2007-2012.
REFERENCIAS
Aviles, K. (2007). “Las demandas del mercado, guías en el Plan Nacional de Educación”, Revista Odisea (México). Consultado el 5 de febrero del 2008 de: http://odiseo.com.mx/marcatexto/2007/11/las-demandas-del-mercado-guias-en-el-plan-nacional-de-educacion/
Cabrero, J. & Martínez, M. (2008). Metodología de la investigación I. Consultado el 04 de julio del 2008 de: http://perso.wanadoo.es/aniorte_nic/ apunt_metod_investigac4_8.htm
Hernández, R.; Fernández, C y Baptista, L. (2006). Metodología de la investigación. México: McGraw Hill.
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
10
Moreno, O. (s.f.). Pintando el retrato de una escuela con datos cualitativos: La evaluación desde la perspectiva de los alumnos de telesecundaria. Consultado el 13 de noviembre del 2007 de: http://127.0.0.1:4001/ponencias/at15/PRE1178732884.pdf
Oviedo, H. & Campo, A. (2008). Metodología de investigación y lectura crítica de estudios. Aproximación al uso del coeficiente Alfa de Cronbach. Revista Colombiana de Psiquiatría. Consultado el 04 de julio del 2008 de: http://www.scielo.org.co/scielo.php?script=sci_arttext&pid=S0034-74502005000400009&lng=en&nrm=iso
PND (2007). “Transformación educativa”, Plan Nacional de Desarrollo 2007-2012. México: Presidencia de la República. Consultado el 3 de febrero del 2008 de: http://pnd.calderon.presidencia.gob.mx/index.php?page=transformacion-educativa
Secretaría de Educación Pública (2007). Plan Nacional de Educación 2007-2012. México: SEP.
Thierry (s.f). Taller de habilidades didácticas para la educación por competencias. Universidad Popular Autónoma del Estado de Puebla. Consultado el 02 de abril del 2008 de: http://medicina.iztacala.unam.mx/medicina/Autoevaluaci%F3n%20de%20las%20Competencias%20Docentes.doc
Vázquez, M. (2007). La evaluación es compromiso por la calidad y la transparencia. México: SEP. Recuperado el: 03 de febrero del 2008 de: http://www.sep.gob.mx/wb2/sep/sep_Bol1200507
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
11
ANEXO 1
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
12
…………………………………………………………………………………………………………………
…………………………………………………………………………………………………………………………………………………………………………..
X CONGRESO NACIONAL DE INVESTIGACIÓN EDUCATIVA | área 15 procesos de formación
13