Jueces

“Como evaluadores, lo mejor que podemos hacer por nuestros estudiantes es no solo aplaudirles por lo que hicieron pero además evaluar su entendimiento del “como” y del “porque” del proyecto.” – F. A. Barillas

Hola! Por casi dos décadas he servido como juez de ferias científicas en Puerto Rico. Proveo entrenamiento y asesoramiento a docentes en las diferentes fases de competencia. Y he sido el mentor o supervisor de varios proyectos incluyendo a más de una docena que llego a competir en Regeneron ISEF.

Gracias por prestarse como juez en esta competencia tan importante para los estudiantes, los docentes, la escuela, y la comunidad. La participación cambia la mentalidad y el nivel de confianza en si mismos en los estudiantes y motiva a otros a atreverse a competir.

Todo participante y su equipo docente pusieron un gran esfuerzo relativo a la condición, apoyo, y recursos disponibles en su escuela.  He visitado a decenas de escuelas como mentor y presentador por muchos años.  Las condiciones, el nivel de participación, y los recursos para los estudios MATIC (Matemáticas, Arquitectura, Tecnología, Ingeniería, y Ciencias o STEM en inglés) caen en un espectro amplio.   Por consiguiente, el nivel competitivo y la calidad de los proyectos caen en un espectro igualmente amplio.

Esto es importante tener en cuenta al hacer nuestra evaluación como juez oficial de una feria científica.   Pero es igualmente importante reconocer nuestra misión fundamental:

La misión del juez es la evaluación objetiva y factual de la calidad, complejidad, veracidad, y complimiento de un proyecto con el método científico.  El enfoque e interés demostrado hacia cada proyecto debe ser consistente, respetuoso, y reconciliador con el método científico.   

Para ayudarle en su labor, el Departamento de Educación nos provee una rubrica de evaluación.  En la medida posible, se le asignarán proyectos en su área de experiencia y practica profesional.   Sin embargo, le invito a explorar evaluar otras categorías para ampliar su participación.   

Cada proyecto requiere la evaluación de tres jueces a lo mínimo.  En muchos casos no hay suficientes jueces para cumplir este requerimiento por lo que el DEPR depende de profesionales dispuestos a extenderse en sus funciones.

He evaluado más de 15 categorías definidas por ISEF.   En mi opinión, es un win-win para todos puesto que he aprendido muchísimo en muchos proyectos y he extendido mi participación en esta labor significativamente.  

Frequently Asked Questions

Los proyectos varían en su tema. ISEF identifica 22 categorías para las ferias. Hay dos clases de proyectos en general:

  • Proyectos de Investigación Científica
  • Proyectos de Ingeniería

Los Proyectos de Investigación son aquellos que buscan verificar una o varias hipótesis. Estos son proyectos en categorías como Biología, Ciencias Ambientales, Física y Astronomía, Matemáticas, psicología, etc. Las hipótesis pueden resultar ciertas como falsas. El valor del proyecto no se afecta en absoluto en cualquiera de esos casos. Lo que importa es que sea un proyecto que siga el método científico.

Los Proyectos de Ingeniería son aquellos que tienen un objetivo de construcción o programación. Estos proyectos mayormente están en categorías como Ingeniera Biomédica, Energía, Tecnología, Robótica, Sistemas Software, y otras más.

En estos casos, la hipótesis es reemplazada por un objetivo. Igualmente, no hay un Grupo Control (Control Group).

Cual es el nivel de complejidad de los proyectos?

El nivel de complejidad cae en un espectro amplio que contiene proyectos en temas muy técnicos y asesoria de universidades en USA hasta proyectos con temas mas limitados. Si usted es asignado a un proyecto que usted considera fuera de su zona de comodidad como juez, podrá pedir una reasignación sin ningun problema.

Es importante recalcar que el nivel técnico del proyecto tiene un peso significativo en su puntuación contal que el estudiante lo haya ejecutado de acuerdo al metodo científico o las guias de ingeniería. Lo opuesto es igualmente importante. Podra evaluar proyectos con temas relativamente simples con una ejecucion ejemplar que mereceran una puntuación alta.

Cuales son las áreas de evaluación?

La rúbrica de evaluación nos requiere evaluar proyectos usando una escala de 100 puntos divididos en las siguientes criterios:

  • La claridad y enfoque del proyecto y la utilización del metodo científico.
  • La metodología y el diseño del experimento incluyendo el control de variables
  • La ejecución y la definición de conclusiones basadas en analísis de data
  • El nivel de creatividad e inventividad usada en el proyecto
  • La presentación del proyecto tanto en el poster como en la defensa oral del proyecto.

Cuales son algunos de los errores mas comunes en proyectos?

Como mencionado anteriormente, la calidad y cumplimiento de un proyecto cae dentro de un espectro amplio debido en inconsistencias en nivel de recursos disponibles, orientación, y profundidad de investigacion preparativa. He tenido el deber de evaluar cientos de proyectos a varios niveles. En mi experiencia, estos son los errores mas comunes:

  • Deficiente o insufiente investigación preparativa acerca del tema en desarrollo. Esto es evidente por la falta de referencias académicas y la sobreutilización de videos como referencias.
  • Deficiente o errónea identificatión de variables dependientes e independientes. Esto es evidente por la falta de control de las variables del experimento y establecimiento cuestionable de correlaciones.
  • Deficiente o incorrecto uso de herramientas de medidas y/o documentacion de data. Esto es evidente por errores en magnitudes de medida.
  • Escaso e insuficiente número de experimentaciones (trials). Lo mínimo recomendado es entre 3 a 5 trials para experimentos simples. Para comparación entre dos o mas variaciones, se recomienda un mínimo de 10 trials. En experimentos más complejos, se recomienda un mínimo de 30 trials. En proyectos cuyo objetivo es establecer alguna conclusión acerca de una población, se espera el número de trials basado en el confidence interval y margen de error especificado en el plan de investigación.
  • Utilización de solo el promedio para justificar diferencias entre dos alternativas. Se espera el uso de las medidas de estadistica aplicables y apropiadas en cada caso.
  • Lenguaje hiperbólico en conclusiones con tenue enlace con la data u observaciones. Se espera que toda conclusion sea directamente basada en el analisis de data colectada. El tono de la escritura y la presentacion oral debe minimizar ejemplos o conclusiones hiperbólicas sobre el alcanze o significancia del experimento.

No existe un proyecto en el cual no se podra criticar algun paso, cálculo, escritura, o análisis. No existen en este nivel o en la vida real en laboratorios y departamentos de R&D corporativos. Nuestra evaluación como juez debe acomodarse al nivel de competitividad del nivel secundario que consistentemente eleve los proyectos año tras año.

Recomendaciones Importantes

Agradezca la participación del estudiante en la feria al comienzo de su entrevista.

El nivel de participacion ha estado creciendo en los ultimos años en el Oeste de PR. Lo que ha cambiado es la orientación a docentes y estudiantes, y la mentoria directa en proyectos para demonstrar que ellos son capacez de competir. En muchos casos, participacion en la feria no es compulsiva y tanto la estudiante como su maestra o maestro lo hacen en su tiempo libre.

Todo estudiante viene con energía, entusiasmo, y nervios. Se sienten orgullosos de su trabajo y quieren representarse y a su escuela con excelencia. El agradecerles su participación al comienzo de la entrevista es una manera exitosa de establecer una buena relación entre ambos.

Si el proyecto tiene fallas significantes, tome la oportunidad de enseñar.

En algunos casos, se encontrará con proyectos con fallas significantes. La puntuación que le dará se encarga de nuestra labor como juez. Pero además de jueces podemos ser educadores especialmente si somos expertos en la materia. Tome la oportunidad de guiar al estudiante a descubrir inconsistencias, error en conclusion o analisis, o escasa data para soportar una conclusión. He encontrado que los estudiantes estan abiertos a la retroalimentación y a los consejos de profesionales evaluando sus proyectos. Esta experiencia debe de motivar a continuar explorando y construyendo.

Have fun.

Gracias por participar como juez. Usted es un elemento importantisimo en este proceso. Estudiantes tratan de presentarle en 15 a 20 minutos un proceso que llevo meses en preparación y ejecución. Estos estudiantes y maestras son de los mas comprometidos en aprender y explorar en nuestro país. Nuestro deber de evaluar objetivamente no debe opacar la energía positiva de todos los participantes y la suya personal. Disfrute la experiencia. Have fun.

En la sección de Blogs encontrará articulos y guias para cada paso de un proyecto.