Detalle de las prácticas

Evaluación de Competencias Transversales en Estudiantes de Ingeniería: Assessment Center de Desarrollo ETSE

Palabras Clave: competencias; evaluación; transversal

Resumen de la Práctica

¿Qué es un AC, para qué se utiliza y en qué consiste? La evaluación realizada, mediante la técnica conocida como Assessment Center (AC), se utiliza para medir las características o variables personales necesarias para desenvolverse eficazmente en un determinado puesto de trabajo o profesión. Esta técnica permite evaluar de forma exhaustiva las características y el potencial que posee cada persona, a la vez que permite proporcionar feedback a los participantes sobre su desempeño en las pruebas. El AC consiste en una serie de ejercicios individuales y grupales, así como en la realización de varios test psicológicos tales como test de personalidad, de inteligencia, etc.

 ¿Por qué un AC en la ETSE? La Escuela Técnica Superior de Ingeniería (ETSE) de la Universidad de Santiago de Compostela (USC) implantó esta técnica en el curso 2008-2009 para evaluar las competencias transversales adquiridas por los estudiantes de las titulaciones del centro. Desde su implantación y posterior desarrollo de manera anual, sus resultados sirven como indicadores para acciones de mejora relacionadas con la adquisición de dichas competencias transversales. Si bien el AC es una técnica habitual en los procesos de selección de personal, no conocemos la existencia de iniciativas similares a la que presentamos en esta práctica: la implantación de un AC en el contexto de un centro de la USC.

 ¿Cómo se diseñó la práctica? Atendiendo a la demanda específica de la ETSE tras el análisis de resultados del centro sobre los datos del curso 2007/2008, el Grupo de Investigación de Recursos Humanos y Rendimiento de la USC opta por diseñar un AC de desarrollo, teniendo en cuenta las características particulares de los estudiantes de ingeniería y de su futuro mercado laboral. De este modo, se crea un instrumento personalizado y adaptado a las necesidades de la ETSE. El diseño de la práctica se basa en las siguientes referencias:

  • Salgado, J. F. (1997). The Five Factor Model of personality and job performance in the European Community. Journal of Applied Psychology, 82 (1), 30-43.
  • Salgado, J. F. (2002). The Big Five Personality Dimensions and Counterproductive Behaviors. International Journal of Selection and Assessment, 10(1&2), 117-125.

En la práctica se analizan una serie de dimensiones, como la capacidad de organización y planificación, la minuciosidad, la iniciativa o habilidades interpersonales, como la capacidad de interacción, entre otras.

Los objetivos del AC en la ETSE.

  • Evaluar las competencias transversales que los estudiantes poseen/obtienen en las titulaciones de grado y posgrado de las ingenierías que se imparten en el centro (Grados en Ingeniería Informática e Ingeniería Química; Máster en Ingeniería Ambiental, Máster en Ingeniería Química y Bioprocesos; Máster en Tecnologías de Análisis de Datos Masivos).
  • Generar indicadores que puedan servir de referencia para las acciones de mejora relacionadas con las competencias transversales.
  • Proporcionar a los estudiantes que participan en la actividad un informe personalizado con las fortalezas y debilidades que presentan en las diferentes dimensiones estudiadas.

1.- Planificación de la Práctica

Detección de la necesidad. En el curso 2007-2008, como consecuencia de las reuniones del profesorado que se desarrollaban anualmente para revisar el desarrollo del curso anterior y planificar el curso siguiente se detectó la falta de información que se tenía sobre la adquisición por los estudiantes de aspectos relacionados con su formación en competencias transversales. 

Como área de mejora se planteó la necesidad de buscar algún mecanismo para evaluar dichas competencias transversales. La dirección del centro llegó entonces a un acuerdo con el Grupo de Investigación de Recursos Humanos y Rendimiento de la USC para que este ejecutara la técnica de evaluación conocida como Assessment Center (es algo ya establecido en la literatura de forma estándar) para los estudiantes de la ETSE. El AC se desarrolló por primera vez en el curso 2008-2009 y a partir de ese momento se desarrolla una vez por curso. 

El AC en el marco del Aula Profesional. El AC se incluye como actividad en el marco del Aula Profesional (http://www.usc.es/etse/aulaprofesional), un programa de formación complementaria en el cual se desarrollan diferentes actividades relacionadas con las titulaciones del centro (conferencias, visitas técnicas, talleres profesionales, seminarios, presentaciones de empresas, etc). Como actividad del Aula Profesional, el AC puede reconocerse como créditos en el Grado de Ingeniería Química (máximo 3 ECTS). Los horarios del AC, al igual que el de todas las actividades del Aula Profesional, se adecúan a los horarios de los estudiantes, organizándose las actividades generalmente a comienzos de cuatrimestre, y dando prioridad a algunos grupos de estudiantes. Así, en todas las ediciones han participado estudiantes de las dos titulaciones de Grado del centro (Ingeniería Química e Ingeniería Informática) con el objetivo de disponer de series históricas sobre estos dos títulos. Además, en algunas convocatorias participan estudiantes de los otros títulos del centro con el objetivo de poder establecer comparaciones evolutivas entre diferentes niveles académicos (grados, másteres e incluso doctorado). 

Organización del AC. El conjunto de las pruebas se dividen en dos sesiones. En la primera sesión se realizan una serie de ejercicios, tanto individuales como grupales, y en la segunda se aplican varios test psicológicos online. Los grupos sobre los que se aplica el AC de desarrollo están formados por entre 4 y 7 estudiantes y supervisados por un mínimo de 4 evaluadores por grupo. Estos evaluadores tienen una jornada de entrenamiento. Los recursos que se necesitan para la actividad se reducen a una sala para las actividades, algún material de papelería y un aula de informática (o equipos informáticos) para los test on-line.

Feedback. Los estudiantes reciben un informe individualizado. Por motivos de protección de datos personales (aparece información de capacidades personales) dicho informe es reservado y sólo disponible para el propio participante. El centro recibe un informe anonimizado por titulación/colectivo para poder usarlo como evidencia para el análisis de la adquisición de competencias transversales.

2.- Desarrollo y ejecución de la Práctica

En relación al desarrollo y ejecución de la práctica, se detallan a continuación las dimensiones analizadas en el AC, así como la estructura y duración de la práctica, dividida en dos sesiones: una primera de ejercicios y una segunda de test psicológicos.

Dimensiones analizadas. Las dimensiones analizadas (pueden verse los aspectos específicos de cada una de ellas en un documento anexo) en el AC son las siguientes.

  1. Organización y Planificación
  2. Juicio
  3. Minuciosidad
  4. Tolerancia al Estrés
  5. Comunicación Oral
  6. Flexibilidad
  7. Liderazgo
  8. Habilidades Interpersonales
  9. Aportación al Equipo
  10. Iniciativa
  11. Extraversión
  12. Amigabilidad
  13. Conciencia
  14. Estabilidad Emocional
  15. Apertura a la Experiencia
  16. Potencial de Dirección
  17. Razonamiento Analítico 

Primera sesión. En el primer bloque de ejercicios se evaluan diez dimensiones (conjunto de habilidades, destrezas y conocimientos que pueden ser medidos de forma graduable y que se aplican en el desempeño de una tarea o función ocupacional) importantes para un buen desempeño en diferentes puestos de trabajo relacionados con el ámbito de las ingenierías.

Este bloque inicial consiste en la realización de cuatro ejercicios, cada uno de ellos de una hora de duración aproximadamente. El primero de los ejercicios realizados es un “test in-basket”, en el cual se le presenta a los participantes una serie de mensajes de correo, notas, memorandos, etc. para que procedan a ordenarlos y confeccionar con ellos una agenda de trabajo, en este caso correspondiente a un puesto de ingeniero/a. Una vez ordenados los ítems y compuesta la agenda deben exponer ante los evaluadores el trabajo realizado. Se incluye en el anexo un ejemplo de mensaje. El segundo ejercicio consiste en la realización de una dinámica grupal, en la cual debían ordenar una serie de objetos según su importancia para la supervivencia en una situación concreta. Los objetos se ordenan primero individualmente, para después intentar llegar a una solución por consenso. Para el tercer ejercicio, los participantes deben preparar y posteriormente presentar en público un breve discurso sobre un tema concreto. El último ejercicio consistió en una discusión grupal sobre un tema de actualidad y polémico. Esta primera parte del AC tiene una duración aproximada de 4 horas.

Segunda sesión. Los test psicológicos aplicados durante el segundo bloque de pruebas sirven para evaluar la personalidad de los participantes (según el modelo de Cinco Grandes Factores), el razonamiento analítico y la capacidad de dirección. Según el modelo de referencia, la personalidad se describe mediante cinco grandes dimensiones denominadas: Extraversión, Amigabilidad, Conciencia, Estabilidad Emocional y Apertura a la Experiencia. La investigación ha demostrado que las cinco dimensiones básicas de la personalidad son buenos predictores del desempeño en el puesto de trabajo, el éxito en la formación, los comportamientos contraproductivos, la rotación en el empleo, el éxito académico, el trabajo en equipo, el liderazgo, los progresos de carrera, la satisfacción laboral y otros criterios organizacionales importantes. La evaluación de personalidad durante el AC desarrollado para la ETSE se lleva a cabo mediante el Inventario de Personalidad de Cinco Factores. Este instrumento evalúa los cinco grandes factores, así como un total de 29 facetas de la personalidad.

Las pruebas psicológicas, del segundo bloque del AC, fueron aplicadas de manera informatizada en el Aula de Informática de la ETSE. En total, este bloque consistía en tres test psicológicos: un test de personalidad basado en el modelo de cinco grandes factores, un test de potencial de dirección y un test de razonamiento analítico. La duración de las pruebas psicológicas es de aproximadamente 90 minutos.

3.- Resultados de la Práctica

Informes de resultados. Los resultados acumulados se publican en la página web relativa a temas de calidad de la ETSE (http://www.usc.es/etse/taxonomy/term/23) para que sean conocidos por todos los grupos de interés del centro. Actualmente están disponibles los resultados desde el curso 2008-2009 hasta el curso 2014-2015. Se adjunta como documentación anexa la memoria completa del AC.

Para cada una de las características a evaluar se analizar su grado de adquisición mediante una rúbrica de evaluación. A continuación se presenta un ejemplo de rúbrica de una de las competencias analizadas (Minuciosidad): 

 

No profundiza en su propuesta. Omite varios de los mensajes del ejercicio. Confunde y mezcla los mensajes. Comete errores y cae en todas las trampas.

(1)  Insuficiente

 

 

(2) No alcanza la media

Se esfuerza por no olvidar ningún detalle pero comete errores puntuales. Omite alguno de los mensajes del ejercicio. Debería aportar más información sobre sus planteamientos.

(3) Suficiente

 

 

(4) Bueno

Trata toda la información aportada en detalle, tiene en cuenta todas las alternativas y no comete errores. Detalla en profundidad su propuesta.

(5) Excelente

 

En el informe que se entrega a los participantes se indica la puntuación obtenida en cada una de las características analizadas. Como documentación anexa se incluyen ejemplos de información proporcionada en los informes de resultados, tanto relativa a la puntuación de diversos aspectos como el informe textual resultado de la observación de los evaluadores.

Los resultados obtenidos mediante la ejecución del AC sobre los estudiantes de las titulaciones del centro permiten conocer la adquisición de competencias transversales desde diferentes puntos de vista. En concreto: 

  1. Permiten conocer el perfil de cada titulación (lo cual permite adaptar iniciativas al perfil anual).
  2. Permiten conocer las diferencias entre los estudiantes de diferentes titulaciones (lo cual permite tomar iniciativas diferentes para cada titulación).
  3. Permite comparar resultados de maduración personal a lo largo de los diferentes niveles educativos que se imparten en el centro (grado, máster, doctorado).
  4. Y permite seguir la evolución temporal de cada característica (y comprobar si las iniciativas tomadas en el centro afectan de forma favorable e estos indicadores). 

Participación. A lo largo de estos 7 cursos han participado un total de 180 estudiantes de grado y 27 de posgrado. Cada estudiante que participa en el programa recibe un informe individualizado sobre cada una de las dimensiones estudiadas (como puede verse en el extracto de información que se adjunta).

4.- Evaluación y revisión de la Práctica

Tal y como se ha indicado previamente, la práctica requiere de pocos recursos, no habiéndose encontrado incidencias en este aspecto desde la implantación de la misma. 

En cuanto al diseño de las actividades, el primer curso se realizó una prueba piloto para comprobar la adecuación de la propuesta, que tras ligeros ajustes ha permanecido estable a lo largo del tiempo, lo que permite obtener series de resultados comparables. Como también se ha mencionado, en todas las ediciones ha participado alumnado de los grados impartidos en la ETSE, pero se han incorporado en algunas convocatorias estudiantes de otros títulos del centro para poder obtener comparaciones evolutivas. 

La actividad tiene una buena acogida por parte de los estudiantes ya que todos los años se cubren las 30 plazas ofertadas, incluso con más demanda que oferta. Como acción de mejora general para las actividades del Aula Profesional (y por tanto, del AC en particular) en la Memoria de Calidad de la Escuela se recoge una acción encaminada a la implementación de encuestas propias, entre las que se contempla un cuestionario de satisfacción dirigido al alumnado participante.

5.- Carácter Innovador de la Práctica

Innovación interna (dentro de la USC) y externa. Este instrumento suele emplearse en el mundo laboral con dos objetivos principales: selección y desarrollo. En el primer caso, el AC es utilizado por las empresas para escoger al mejor candidato para ocupar un puesto determinado. En el segundo caso, permite detectar tanto los puntos fuertes de las personas como los aspectos a mejorar, con el fin de ayudarles a alcanzar el éxito profesional.

La innovación interna es que se trata de una iniciativa destinada a intentar evaluar la adquisición de competencias transversales por los estudiantes, aspecto, en general, poco considerado en las titulaciones. La información obtenida por los estudiantes que se someten a estos estudios los prepara mejor para su incorporación al mundo laboral.

6.- Divulgación de la Práctica

Los resultados de la experiencia están disponibles a través de la página de calidad de la Escuela Técnica Superior de Ingeniería (http://www.usc.es/etse/taxonomy/term/23). Además, miembros del grupo de investigación impartieron recientemente una conferencia plenaria en el III Congreso de Innovación Docente en Ingeniería Química (http://www.coddiq.es/cidiq/), celebrado en la marco de la Conferencia de Directores y Decanos de Ingeniería Química (CODDIQ), dándoles a conocer la experiencia y los resultados de la misma.

7.- Fuentes Complementarias

Aula Profesional de la Escuela Técnica Superior de Ingeniería: http://www.usc.es/etse/aulaprofesional

Informes de resultados del Assesment Center de Desarrollo: http://www.usc.es/etse/taxonomy/term/23

Congreso de Innovación Docente en Ingeniería Química: http://www.coddiq.es/cidiq/


Regresar al Listado de Buenas Prácticas