Medir lo que importa

A medida que los educadores persiguen enfoques de aprendizaje más personalizados, basados ​​en la indagación y basados ​​en la indagación, un obstáculo que continúa cambiando es la incapacidad de los modelos de evaluación ampliamente utilizados para medir con éxito el aprendizaje y el crecimiento de los alumnos.

Los críticos dicen que los modelos tradicionales simplemente no pueden evaluar el tipo de aprendizaje que las escuelas necesitan promover. Proporcionan retroalimentación incompleta, inadecuada y oportuna. Benefician a algunos estudiantes y perjudican a otros. Y en el peor de los casos, agobian a los maestros, interrumpen las aulas y estresan a los estudiantes.

Como muchos adultos, Kristen Brooks recuerda el estrés que las pruebas le causaron cuando era niña. “No era un gran examinado. Incluso cuando sabía que conocía la información, todavía recibía ansiedad por los exámenes ", dice Brooks. "Recuerdo haber pensado: 'Me gustaría poder hacerlo de otra manera'".

Como especialista en tecnología educativa para el Distrito Escolar del Condado de Cherokee en Georgia, Brooks trabaja para hacer realidad ese deseo como uno de los muchos educadores e investigadores que defienden y trabajan para desarrollar nuevas formas de evaluar el aprendizaje.

Tomemos como ejemplo a la educadora Cindy Herren, maestra de tecnología K-5 del Distrito Escolar de la Comunidad de Waukee en Iowa. Al igual que Brooks, aboga por el uso de aplicaciones de creación ampliamente disponibles, como Adobe Spark, FlipGrid, Book Creator y Seesaw, para evaluar el dominio de los estudiantes. Al usar estas herramientas, los estudiantes aprovechan las habilidades académicas, técnicas y de resolución de problemas y, en última instancia, se “sienten empoderados” en lugar de estresados, dice Herren. Un ejemplo que Herren cita involucró ayudar a una maestra de alemán de primer año a transformar una de las evaluaciones de escritura sumativa de larga data de su escuela en un proyecto creativo más dinámico. La tarea tradicional pedía a los estudiantes que llevaran un diario de tres días en el que los estudiantes generalmente usaban frases simples en alemán para contar actividades mundanas, como "Me levanté", "Desayuné", "Tomé el autobús a la escuela". Luego, el maestro tendría que revisar todas esas frases, para cada uno de los 100 estudiantes.

Herren sugirió dejar que los estudiantes hagan videos usando la aplicación Clips para capturar imágenes de ellos haciendo una actividad, audio de ellos describiéndolos en alemán y subtítulos editados que demuestren sus habilidades de escritura.

"Estos videos fueron increíbles, y los niños se divirtieron mucho", dice Herren. Además, cuando los colegas vieron cuán exitoso había sido el enfoque del nuevo maestro, también lo adoptaron en sus aulas.

Llevando las ciencias del aprendizaje a la evaluación

Tales evaluaciones basadas en proyectos son una de las alternativas a las pruebas tradicionales que combinan las ciencias y la tecnología del aprendizaje, una combinación potente que ofrece muchos enfoques para evaluar y ayudar a los estudiantes a retener y usar el conocimiento. Las ciencias del aprendizaje apuntan a tres etapas de aprendizaje: codificación, almacenamiento y recuperación, dice Patrice Bain, autor, educador y consultor. Los estudios muestran que la última etapa, extraer información del almacenamiento, mejora el aprendizaje y los puntajes de las pruebas.

"Lo que dicen las ciencias del aprendizaje es que la mejor manera en que podemos ayudar a nuestros estudiantes a aprender es a través de la recuperación frecuente, y es mejor hacerlo sin apuestas o apuestas bajas", dice Bain. "Los estudios también han demostrado que aprender y enseñar de esta manera reduce directamente la ansiedad en los estudiantes frente a las pruebas de alto riesgo".
Junto con la recuperación, los estudiantes necesitan comentarios que aclaren lo que saben y lo que no saben, y aumenta la metacognición o su comprensión de cómo aprenden, dice Bain. "Cuando podemos hacer eso, enseñarles cómo discriminar y enfocar su tiempo en lo que no saben, eso realmente ayuda al aprendizaje".

Otros dos principios de las ciencias del aprendizaje que la tecnología y las nuevas herramientas de evaluación pueden aprovechar son la práctica espaciada y el entrelazado. El espaciado está extendiendo lecciones y recuperación con el tiempo. Intercalar implica mezclar habilidades o temas para que los estudiantes tengan que pensar sobre el proceso o los conceptos involucrados, explica Bain.

Claramente, el aprendizaje humano es un proceso complejo.

Definiendo 2 principios clave

El espaciado y el entrelazado son estrategias poderosas que impulsan el aprendizaje, según el científico cognitivo Pooja Agarwal, fundador y coautor del sitio web de ciencias del aprendizaje con Patrice Bain del libro Powerful Teaching: Unleash the Science of Learning.

El espaciado implica tomar una cantidad determinada de tiempo de aprendizaje, ya sea tiempo de instrucción o tiempo de estudio, y dividirlo en varias sesiones distribuidas a lo largo del tiempo, explica el sitio web Agarwal's RetrievalPractice.org. Al difundir lecciones y oportunidades de recuperación, el conocimiento de los estudiantes tiene tiempo para descansar y refrescarse.

Por ejemplo, en lugar de concentrarse la noche anterior a un examen de vocabulario en español al intentar repetidamente, por ejemplo, tres veces, recuperar la traducción al inglés de cada palabra, un estudiante podría practicar recuperar las traducciones de las palabras del vocabulario una vez en tres ocasiones distintas, por ejemplo , una semana antes del examen, unos días después y nuevamente unos días después.

Los dos enfoques implican la misma cantidad de tiempo de aprendizaje pero lo asignan de manera diferente, explica una guía de recursos en el sitio web.

Intercalar es la práctica de cambiar de ideas durante una sesión de aprendizaje y no enfocarse en ninguna idea por mucho tiempo. También fortalece la comprensión y ayuda a los estudiantes a conectar diferentes ideas.
De acuerdo con RetrgarPractice.org de Agarwal, los educadores pueden incorporar estas mismas prácticas para hacer que las evaluaciones acumulativas sean más poderosas.

Los exámenes acumulativos típicos evalúan el aprendizaje de todo el contenido cubierto durante el semestre o año escolar, señala el sitio web. Si bien los estudiantes pueden volver a estudiar el material aprendido meses antes, simplemente pueden concentrarse, lo que no logra obtener el beneficio completo del espacio para el aprendizaje. Del mismo modo, los exámenes acumulativos pueden no aprovechar el intercalado. Esto se debe a que, si bien es probable que los temas del curso en un examen acumulativo estén relacionados (por ejemplo, cubriendo conceptos clave de las ciencias de la tierra), es posible que no requieran discriminación (por ejemplo, la atmósfera frente a la tectónica de placas), explica el sitio.

El sitio web de Agarwal recomienda alentar aún más el espaciamiento y desalentar el hacinamiento con mini-cuestionarios acumulativos durante todo el semestre, no solo como un examen de fin de semestre, y garantizar que los mini-cuestionarios, actividades y exámenes acumulativos incluyan conceptos similares que requieren una cuidadosa discriminación por parte de los estudiantes. , no simplemente temas relacionados.

Capturando el proceso de pensamiento de los estudiantes

Cada actividad de aprendizaje se basa y tiene el potencial de afectar la identidad, las capacidades sociales y emocionales, las capacidades cognitivas, incluida la función ejecutiva y la metacognición, e incluso el bienestar físico y mental, explica Bror Saxberg, vicepresidente de ciencias del aprendizaje en la Iniciativa Chan Zuckerberg (CZI) , citando el trabajo del colega de CZI Brooke Stafford-Brizard sobre el marco integral de desarrollo estudiantil.

"Simplemente no hay forma de separar estas cosas", dice Saxberg. "Dentro de un cerebro real, no puedes simplemente sacar el procesador matemático y jugar con él en un banco, actualizarlo y luego reinstalarlo".
Una de las mejores formas en que la tecnología puede mejorar la evaluación y la recopilación de evidencia es capturar más del proceso de pensamiento del estudiante hacia una solución, dice Saxberg. "Necesitamos mejores evaluaciones formativas, y no solo evaluaciones de si obtuviste la práctica, por ejemplo, correcta o incorrecta, sino evaluaciones reales y recopilación de evidencia sobre el proceso de los estudiantes".

En lugar de simplemente entregar un ensayo terminado, un estudiante podría trabajar en una herramienta, por ejemplo, PowerNotes, que le permite comenzar con un esquema, acceder a referencias y recursos desde él, luego revisar su esquema, elaborar presentaciones y conclusiones, y finalizar su ensayo

"La tecnología puede comenzar a capturar eso y tal vez incluso andamiarlo", dice Saxberg. "Puede ver ese proceso y compararlo con otros", posiblemente utilizando el aprendizaje automático.

Andreas Oranje, gerente general de investigación del Educational Testing Service (ETS), está de acuerdo. Él dice que las actividades curriculares basadas en tecnología pueden producir y analizar una gran cantidad de datos de proceso y otra información para ayudar al estudiante y al maestro a tomar decisiones sobre qué aprender a continuación. Esos datos pueden ayudar a ETS y a otros a descubrir los procesos cognitivos que subyacen en el aprendizaje y el pensamiento de un estudiante, identificar posibles errores e ideas erróneas de los estudiantes, luego anticiparlos y prevenirlos, o determinar cómo intervenir de manera específica si suceden.

Los datos del proceso también podrían informar una imagen más completa del rendimiento de los estudiantes que aumenta las pruebas estandarizadas de fin de año, dice Oranje.

De manera similar, la inteligencia artificial (IA) podría extraer datos de procesos para que coincidan con pares y pares cercanos para mejorar el aprendizaje colaborativo, dice Joseph South, Director de Aprendizaje de ISTE. "Imagine un sistema que comprende que el Estudiante A tiene un concepto erróneo particular que el Estudiante B acaba de dominar hace un par de días", dice. "Podemos usar ese sistema para unir al Estudiante A con el Estudiante B y hacer que el Estudiante B sea el tutor del Estudiante A y ayudarlos a encontrar el mismo dominio que acaban de lograr".

"Solo saber dónde estás puede marcar una gran diferencia en la motivación para mejorar".

Otra forma importante en que los investigadores creen que la tecnología puede medir y apoyar mejor el aprendizaje es proporcionando comentarios en tiempo real. "Si podemos acortar la brecha entre el desempeño de un estudiante y el momento en que un estudiante recibe retroalimentación sobre ese desempeño, entonces podemos hacer las correcciones del curso antes, lo que puede permitir que el estudiante mejore mucho más rápido", dice South. “No queremos subestimar la visibilidad que estas herramientas pueden proporcionar a los estudiantes y a los padres.

"Solo saber dónde estás puede marcar una gran diferencia en la motivación para mejorar", dice. “Por eso llevamos FitBits. Cuando sabemos cuántos pasos hemos tomado, de repente nos sentimos motivados a tomar los 2,000 adicionales para alcanzar nuestra meta de 10,000 al día. Los niños son de la misma manera ".

Mejora de pasos de datos

La tecnología también puede mejorar cómo se recopilan, analizan y presentan los datos de evaluación.

Al agrupar los datos de la evaluación en un panel de control accionable, puede brindarle al educador "una vista de 360 ​​grados" del rendimiento escolar de un estudiante y cómo ayudarlo, dice South. Del mismo modo, algunas nuevas herramientas de evaluación no solo informan a los padres antes sobre las áreas de necesidad de sus alumnos, sino que también proporcionan recomendaciones sobre cómo ayudar al alumno en el hogar.

“A través de la tecnología, podrían construir puentes con acero simulado y edificios con materiales simulados.

Entonces podría simular un terremoto y ver si sus estructuras pueden resistir esas fuerzas. Es un nivel completamente diferente de aprendizaje y comprensión y un nivel completamente diferente de fidelidad al mundo real ".
En el Centro de Innovación de Productos de la Asociación de Evaluación del Noroeste (NWEA), el director sénior Mike Nesterak y su equipo están buscando mejores herramientas de retroalimentación para maestros, estudiantes y padres. "Queremos asegurarnos de que el lenguaje y el método de proporcionar información sea apropiado para cada parte interesada", dice Nesterak.

Una herramienta que NWEA está explorando es un prototipo de sitio web donde los padres pueden ingresar uno de los puntajes de evaluación de sus hijos y luego ver un video generado automáticamente que discute cómo les fue a su hijo en relación con los puntajes pasados ​​y los puntajes de otros estudiantes, y obtener predicciones sobre el crecimiento.

Otro proyecto de centro de innovación involucra informes basados ​​en consultas, que explotan el sistema integral de informes de NWEA para producir informes que responden a las principales preguntas de los directores sobre los datos de evaluación.

Los directores, maestros y administradores tienen necesidades particulares de información en cualquier momento en particular, dice Nesterak. El problema es que NWEA tiene tantos datos en su sistema que puede ser difícil saber qué, cuándo y cómo extraer información relevante. Entonces, el centro de innovación encuestó a los directores de las escuelas intermedias, solicitando los 10 datos más importantes que necesitaban de los datos de evaluación de NWEA. Luego, los investigadores utilizaron esa retroalimentación para dar forma a un "informe de perspicacia" de 20 páginas respondiendo esas preguntas clave para los directores en texto, gráficos y tablas. Ahora, los investigadores están creando prototipos de un informe similar para administradores a nivel de distrito, y planean desarrollar informes para maestros y padres también.

La tecnología también hace que las pruebas durante todo el año sean una propuesta más manejable.

NWEA ha estado probando un modelo de todo el año para Louisiana que evaluaría a los estudiantes durante dos días cuatro veces al año en materiales relacionados con una unidad de instrucción recién completada. Para que las pruebas sean más justas, las "lecturas en frío" utilizadas en la mayoría de las evaluaciones se reemplazan con una "lectura en caliente" que permite a los estudiantes consultar el texto durante la prueba, una "lectura en caliente" que incluye material nuevo pero relacionado con el tema han estado estudiando, y una sección final que les pide que analicen y sinteticen información de ambos pasajes y saquen conclusiones.

Los datos de las cuatro evaluaciones se agregarán a un puntaje de artes lingüísticas en inglés. "Evaluamos el conocimiento, en lugar de solo las habilidades", dice Nesterak. "Hemos eliminado la evaluación de fin de año, e incorporamos esa evaluación en la evaluación educativa".

Evaluación tecnológica y formativa.

El modelo piloto de Louisiana subraya otro amplio beneficio de la tecnología. "Si utiliza la tecnología para las evaluaciones formativas correctas, entonces puede obtener la misma o la mayor parte de la misma información que reuniría en las evaluaciones sumativas en el camino", dice South. "No significa que no necesitamos algún tipo de evaluación sumativa, pero las evaluaciones sumativas deberían ser la guinda del pastel".

El educador de Filadelfia Chris Lehmann también enfatiza la interacción entre la tecnología y la evaluación formativa. "Debido a sus niveles y velocidad de comunicación, la tecnología nos permite hacer evaluaciones formativas con mucha más frecuencia", dice Lehmann, director fundador de Science Leadership Academy, que enfatiza el aprendizaje basado en proyectos y basado en la investigación.

Para los modelos basados ​​en consultas, la tecnología inmersiva es muy prometedora. Oranje dice que puede hacer que la enseñanza y la evaluación de la ciencia sean mucho más vívidas, claras, eficientes, accesibles y seguras. "Hay ciertas cosas ... simplemente no se pueden hacer en el aula", dice. “No se puede acercar al nivel molecular en un aula. No puedes hacer experimentos que requieran mucho tiempo, por ejemplo, si quieres explicar algo sobre los fósiles ".

"Hemos eliminado la evaluación de fin de año, y hemos incorporado esa evaluación en el
evaluación de instrucción ".

Los laboratorios virtuales y los sistemas dialógicos permiten a los estudiantes trabajar a través de un experimento o practicar habilidades o comportamientos complejos, aprendiendo de sus errores sin consecuencias del mundo real.

"Durante mucho tiempo, hemos hecho que los estudiantes construyan puentes de palillos de dientes o palitos de helado para comprender los principios básicos de la ingeniería", dice South. “A través de la tecnología, podrían construir puentes con acero simulado y edificios con materiales simulados. Entonces podría simular un terremoto y ver si sus estructuras pueden resistir esas fuerzas. Es un nivel completamente diferente de aprendizaje y comprensión y un nivel completamente diferente de fidelidad al mundo real ".

Existe un tremendo poder en esa capacidad para superponer tareas de complejidad y textura adicionales, como restricciones de tiempo y distracciones, cuando los datos en tiempo real muestran que el estudiante está listo para ello, dice Saxberg de CZI.

En el Centro de innovación de productos de NWEA, donde los investigadores han construido un prototipo de laboratorio de ciencias de realidad aumentada que permite a los estudiantes realizar tres experimentos en cualquier lugar de una habitación, Nesterak ve la tecnología inmersiva como una forma de nivelar el campo de juego para las escuelas que carecen de espacio de laboratorio, equipo y materiales También aumenta el compromiso. "A los estudiantes les encanta", dice, y agrega que los investigadores aún están evaluando cómo afecta el rendimiento de los estudiantes.

Nesterak ve la posibilidad de una realidad aumentada en otras áreas, incluidas las artes del idioma inglés, donde podría permitir que un personaje "cobre vida" mientras el alumno lee.

Otra tecnología emergente prometedora es la informática conversacional, dice Nesterak. En NWEA, los investigadores han creado un prototipo que permitiría a los maestros conversar con Alexa de Amazon para recuperar información sobre el rendimiento de la evaluación matemática de sus alumnos. Para pasar el prototipo, la herramienta debería ser compatible con FERPA. Los investigadores de NWEA también están explorando si pueden desarrollar una evaluación que se realiza a través de un avatar conversacional o una entidad conversacional como Alexa.

El dispositivo podría seguir el enfoque de un estudiante para resolver un problema al rastrear las preguntas que el niño le plantea. Esos datos, a su vez, podrían proporcionar una imagen más completa del desempeño de los estudiantes y ayudar a mejorar las evaluaciones, tal vez incluso adaptar las pruebas futuras al enfoque de resolución de problemas de un estudiante individual.

Nesterak también ve la IA como una gran oportunidad no solo para calificar evaluaciones, donde ya ha construido un buen historial, sino también para el análisis de big data. NWEA ya está utilizando IA para analizar su extensa base de datos de puntajes de evaluaciones individuales para patrones de desempeño y encontrar una progresión de aprendizaje más empírica.

Finalmente, la tecnología puede ayudar a eliminar algunos de los puntos ciegos de la evaluación tradicional. "Hay cosas que son importantes para el éxito de un estudiante que son difíciles de medir en una hoja de papel", dice South, señalando cosas como el aprendizaje social y emocional y la resolución creativa o colaborativa de problemas. "La tecnología realmente puede ser una herramienta importante para ayudarnos a hacer eso ... Abre muchas más vías de expresión que pueden ayudarnos a comprender una gama más matizada de sus habilidades".

Involucrar a educadores

Entonces, ¿qué debe suceder para aprovechar el potencial de la tecnología para remodelar el aprendizaje y la evaluación?
Primero, los proveedores de soluciones necesitan involucrar a los educadores a lo largo del proceso de desarrollo para asegurarse de que estén creando una herramienta que satisfaga sus necesidades y les facilite la vida, no la dificulte, dice South. Entonces, los educadores deben estar al tanto de lo que hay ahí fuera y estar dispuestos a aprender y usar esas herramientas. Finalmente, los líderes escolares necesitan apoyar enfoques basados ​​en competencias, que pueden requerir más que solo flexibilidad en cómo y cuándo se realizan las pruebas, dice.

Puede requerir cambios en los procedimientos y la cultura del aula, la formación del profesorado y la autonomía y responsabilidad de los alumnos.

"Lo mejor que pueden hacer los maestros y los encargados de formular políticas y los compradores y las personas y los directores del distrito escolar es asegurarse de que estén prestando atención al aprendizaje primero", dice Saxberg. "Debes pensar qué es lo que mis alumnos realmente necesitan para mejorar su rendimiento y luego preguntar cómo puede ayudar la tecnología a que eso suceda".

La búsqueda de la equidad.

Alicia Johal está de acuerdo en poner el aprendizaje en primer lugar es clave, y considera que mejorar la equidad es parte de eso. Antes de convertirse en subdirector del Centro de Innovación y Pensamiento Empresarial de la Academia Judía de San Diego, Johal enseñó ciencias de la escuela secundaria, biotecnología y biología marina durante siete años. Muchos de los niños en las escuelas públicas del sur de San Diego, donde ella enseñaba, provenían de hogares de bajos ingresos, y la mayoría eran estudiantes del idioma inglés.

Johal pronto se dio cuenta de que las evaluaciones tradicionales que estaba dando a sus alumnos no demostraban cuánto sabían realmente sobre ciencia porque las pruebas les imponían barreras. Esas barreras, o prejuicios, pueden presentarse de diferentes maneras. ¿La evaluación mide con precisión lo que debe medir? ¿Su contenido le da a un subgrupo de estudiantes una ventaja sobre otro? ¿Las preguntas del examen suponen conocimientos previos o experiencias compartidas que es menos probable que un subgrupo posea?

Por ejemplo, un grupo de género, cultural o étnico puede estar en desventaja al responder un problema verbal sobre la velocidad y la aceleración en función de un deporte competitivo en particular. La pregunta puede ser una barrera para los estudiantes que nunca han practicado el deporte. “Además de tratar de resolver este problema de velocidad, no tienen idea de por qué una pelota de fútbol se lanza en espiral hacia la zona final. ¿Qué pasa si ni siquiera saben cuál es la zona final? ”, Dice Johal. "Hay tantas maneras de escribir estas cosas que no estás señalando a los estudiantes en base a las experiencias que tienen".

Para mejorar la equidad y los resultados, Johal hizo un cambio cultural, cambiando la forma en que evaluó, calificó y enseñó a sus alumnos.

Además de escribir más de sus propias preguntas para reducir las barreras, Johal adoptó estándares de dos partes que separan la habilidad del contenido.

Johal también comenzó a proporcionar una rúbrica al final de cada evaluación. Utilizando términos amigables para los estudiantes, la rúbrica explicaba los criterios de habilidad y contenido necesarios para obtener una calificación de "Dominio". La única otra opción de calificación era "Trabajo en progreso", y Johal permitió a los estudiantes corregir errores y volver a enviar una evaluación hasta que Dominio logrado. "Se convirtió en parte de la cultura de la clase", dice Johal.

Johal encontró otra forma de hacer que algunas evaluaciones sean más accesibles y que apoyen el aprendizaje: videos de estudiantes. Por ejemplo, en lugar de exigir a sus alumnos que escriban un informe de laboratorio tradicional, primero les pidió que usaran la aplicación Explicar todo para narrar un informe de laboratorio de video complementado con fotos, tablas de datos y texto. "Muchos estudiantes de idiomas son realmente buenos para hablar sobre ciencia y contarte lo que saben, pero cuando les pides que lo escriban, eso es más difícil", dice Johal. "Es más fácil para ellos escribir si pueden hablar sobre su conocimiento primero".

Johal utilizó los videos como un andamio para informes escritos. "Fue una forma de utilizar la tecnología para apoyar el aprendizaje de idiomas, y fue un cambio de juego en cada clase", dice ella.

Al igual que Johal, Nesterak de NWEA y otros, Oranje en ETS enfatiza la búsqueda de equidad.

"Es genial crear nuevas cosas, pero tenemos que asegurarnos de que sea justo y accesible", dice Oranje. “Tiene que ser asequible. Tiene que ser culturalmente imparcial o parcial. Y debe funcionar para estudiantes con una variedad de necesidades.

"Es un imperativo moral: eso es lo que debemos hacer".

Reshan Richards, director de estudios en New Canaan Country School en Connecticut, sugiere que los maestros se hagan tres preguntas antes de evaluar a los estudiantes. Descubre cuáles son esas tres cosas en el siguiente video: 

 

 

---

Chris Frisella es un escritor independiente que explora la tecnología educativa y su poder para remodelar el aprendizaje y las vidas. Anteriormente, pasó más de 30 años escribiendo y editando para periódicos en Oregon y Alaska. Vive en Eugene, Oregón, donde disfrutó de ser voluntario en escuelas del área.