El informe de evaluación

BLOQUE IV. EL INFORME DE EVALUACIÓN

1. CONCEPTO Y SENTIDO DEL INFORME DE EVALUACIÓN

El proceso evaluativo concluye con la elaboración de un informe. Es el proceso de elaboración, presentación y comunicación de los informes de evaluación. Tiene como finalidad dar cuenta a los interesados de las conclusiones de la evaluación, el proceso seguido, los resultados obtenidos, la interpretación de los datos y las recomendaciones para la acción. [pic 1]

Informe de evaluación                    Momento final del proceso de evaluación [pic 2][pic 3][pic 4][pic 5][pic 6][pic 7]

Informe de evaluación                    En diferentes momentos del proceso evaluativo[pic 8]

Cuando hablamos del informe de evaluación solemos asociarlo al momento final del proceso de evaluación, pero esto no es así. Si nos fijamos desde una perspectiva metodológica, esta asociación es inexacta. ¿Por qué? El informe final es un documento de muy lenta elaboración, debe comenzar a definirse al inicio de la evaluación, cuando se tienen las primeras reuniones con el cliente (personas beneficiarias del producto que se ofrece), el evaluador debe tener este informe en mente casi de forma permanente, aunque no de la misma manera en todos los momentos de la evaluación. Ejemplo: cuando estamos metidas en el proceso de recogida de información, en el trabajo de campo, no es tan fácil tener el informe en mente, porque este trabajo este proceso requiere mucho esfuerzo y no permite pensar a la vez en otras cosas. Sin embargo, cuando pasa el momento intermedio de la evaluación, si es cuando comienza a constituirse en el reto más importante del evaluador, es su máxima preocupación. 

¿Qué aporta un informe de evaluación frente a una investigación de tipo aplicada? B. Mac Donald: los informes de evaluación responden a una serie de preguntas y problemas en un tiempo relativamente corto, abordando éstas de una forma directa e incluyendo formulaciones concretas de la problemática y a su vez recomendaciones más que conclusiones del propio estudio.

El informe es un documento dinámico, útil para la negociación y la recogida de datos, con connotaciones claramente formativas, que debe representar el pensamiento de actores e implicados, ser producto de la interacción entre evaluados y evaluador, que haga emerger recomendaciones viables y que, a través de un lenguaje sencillo, preciso y riguroso, se convierta en un elemento adecuado de comunicación para las distintas audiencias.

Los informes son para el evaluador el elemento que concreta la negociación/el acuerdo que ha establecido con el cliente en primera instancia. Desde la perspectiva de la evaluación se concibe como el elemento resultante del proceso evaluador, pero a la vez como un documento dinámico hasta que llega a construirse el que damos el nombre de informe final. Es decir, lo normal es que

tengamos informes parciales (que se construyen o elaboran en todo el proceso, desde el inicio de la evaluación, algunos autores lo han denominado informes de progreso, realizados en momentos intermedios de la evaluación) para después tener un informe final, que resulta de todos esos informes parciales.

La elaboración del informe no es un ejercicio de generalización de los datos, sino más bien un proceso de compilación de las piezas de un puzzle dentro de una estructura más general.

2. CARACTERÍSTICAS

Distinguimos dos tipos de características:

a) Técnicas: Un informe ha de ser:

• Personalizado: Identifica la audiencia. Considera al destinatario y se adecua en la forma, en el tamaño y en el lenguaje.
• Pertinente: Coherente con los propósitos de la evaluación y coherente entre las partes, de manera que estén conectadas y sin contradicciones entre sí. Recoge los aspectos más significativos de los datos obtenidos y elimina la información menos significativa.
• Valorativo: interpreta la información obtenida de la evaluación de acuerdo con la ideación acordada. Realizado por las personas que se haya acordado que llevarán a cabo la interpretación, ya que no se trata de que se pronuncien en términos de verdad, sino de atribuir valor, y éste siempre tendrá que construirse de forma intersubjetiva.
• Claro, preciso, sencillo y comprensible: descripción precisa, lo más exacta posible. Descripciones sencillas: simples, no dobles, sin artificios ni elementos superfluos. Evitar expresiones complejas. Escrito de forma directa. Descripción comprensible: que se comprenda fácilmente. Puede ayudarse la comprensión con gráficos o ilustraciones y ejemplos que ayuden a relacionar los resultados con las circunstancias prácticas. Con definición de los términos técnicos que se utilicen.
• Oportuno: en el tiempo previsto: entregado en el tiempo que puedan aprovecharse mejor los resultados. Evitar la dilación excesiva. Si se retrasa mucho el envío se pierde sobremanera la perspectiva de la evaluación. Si no se usan los resultados es un cúmulo de recursos innecesario. De acuerdo con el calendario previamente elaborado, revisado en el transcurso de su realización y, si hace falta, ajustado. Si tiene que ajustarse al calendario, hay que informar a los receptores y pensar alternativas: cómo reducir la muestra de población, revisar el contenido de los instrumentos y entregar previamente informes parciales.
• Planificado: descripción del objeto de evaluación (por ejemplo: objeto, subobjetos, indicadores), de la finalidad evaluadora, de los procedimientos utilizados (fuentes, técnicas e instrumentos) y de los resultados de la evaluación, de forma que los receptores puedan entender rápidamente lo que se ha hecho, para qué se ha hecho, qué información se ha obtenido, a qué conclusiones se ha llegado y qué propuestas se llevan a cabo.
• Diversificado: descripción justificada de las fuentes, técnicas e instrumentos que se han utilizado en función de la información que ha querido medirse. Con información que haya sido triangulada en las fuentes, técnicas o instrumentos para poder compararla y hacerla más fiable.
• Contextualizado: descripción del contexto escolar en el que se ha producido la evaluación, indicando las circunstancias que pueden explicar las situaciones o los datos recogidos, los factores contextuales de interés (historia, registros, documentos, rutinas, acciones previas, etc.) y, si es el caso, con la notación de las interferencias o los elementos que han podido proporcionar una ayuda especial.
• Fundamentado: las conclusiones tienen que estar fundamentadas explícitamente, basadas en la información recopilada. Los datos de las conclusiones tienen que extraerse de los instrumentos y fuentes, que es preciso poderlas contrastar siempre entre sí, evitando fundamentar las conclusiones en una sola fuente, técnica o instrumento.
• Objetivo: recoge las diferentes perspectivas. No se recogen únicamente aspectos de la realidad que son tangenciales o deformados. Que pueda objetivarse si se analiza de la realidad y se tratan los datos intersubjetivamente. Con datos numéricos que facilitan la comprensión.

b) Sociales y éticas:

• Completa y franca: el informe pone de manifiesto honestamente todas las cuestiones que se han planteado en el proceso evaluador, sin ocultaciones o tergiversaciones que respondan a intereses sectoriales o de oportunidad. Si es el caso, siempre tiene que recogerse la opinión discrepante/contraria. El informador no tiene que retrasar el envío ni endulzar el contenido. Si no tenemos evidencia suficiente para formar el juicio sobre una situación que afecta sustancialmente a algunos componentes, tenemos que abstenernos de formar juicio y expresarlo.
• Equilibrada: destaca al mismo tiempo los aspectos positivos y los negativos. Informa de los aciertos y carencias, para que puedan implementarse los primeros y modificarse los segundos. Presenta valoraciones positivas y también se recogen aspectos o situaciones inadecuadas.
• Negociada: formula las valoraciones con la participación de todos los afectados. Parte del dialogo y la reflexión sobre los resultados entre los implicados. Incluye diferentes perspectivas para formular juicios de valor intersubjetivos.
• Respetuosa: con las personas implicadas y sus legítimos intereses. Hay que evitar juicios de valor referidos a las actuaciones de las personas y las descalificaciones personales.

Pero también podemos considerar como características del informe de evaluación que son:

• Canales de comunicación. Los informes son dinámicos, se convierten en un elemento de la recogida de datos por métodos como la observación, entrevistas, etc. Además, supone un elemento de negociación con los participantes y con el propio cliente. El informe incluye “informaciones” o datos que los distintos participantes han manifestado y que una vez que han dado su conformidad de que sea utilizada públicamente, deben dar su aprobación a la interpretación que se hace de ella.
• Representación de los hechos y pensamientos de los participantes. Además de ser la representación de los hechos que han tenido lugar, lo son también no solo de las opiniones de los participantes que forman parte de la evaluación, sino que también de sus pensamientos. Es decir, supone un compromiso y un reto para el evaluador, pues no recae toda la responsabilidad en la emisión de juicios por parte del que evalúa, sino todo lo contrario, puesto que el cliente no solo busca un juicio experto, sino también escuchar u oír a los participantes, sus voces, etc. Esto es muy importante porque favorece las correcciones o mejoras que se hagan de lo que estamos evaluando.
• Fuente de recomendaciones. Las recomendaciones forman parte del contenido propio de la evaluación, pero no siempre las recomendaciones son un apartado específico del informe. En cualquier caso, lo que si es cierto es que el evaluador tiene como tarea fundamental que la evaluación sea de utilidad tanto para los clientes como para los participantes, y esta utilidad parte por ofrecer modificaciones o mejoras de lo que se evalúa (lo realizan las personas que participan, pero el evaluador debe contribuir o garantizar que esto suceda). En este sentido muchos autores manifiestan la falta de incidencia en cuanto a las decisiones que se toman después de lo que se ha sugerido en la evaluación. Es por esto importante que, aunque el evaluador sea la persona que formalice las recomendaciones, están deben realizarse entre la discusión del evaluador con el cliente y los participantes.
• Reto más importante: que lo que se recoja en el informe de evaluación sea válido, que no aparezcan sesgados hacia ningún grupo particular, es decir, que la construcción del argumento entre las percepciones de todos los actores implicados.

3. TIPOS DE INFORME DE EVALUACIÓN

• Formativos: todos los informes pueden tener como propósito o finalidad ser formativos. Imaginemos que estamos evaluando un programa, si la evaluación es formativa y su finalidad es mejorar el programa, el informe deberá comunicar a los implementadores cómo está funcionando el programa y qué cambios sería necesario hacer para mejorarlo. Una evaluación formativa sería aquella que se realiza a través de todo el proceso del desarrollo del programa en la práctica. Desde esta perspectiva, se elaborarán distintos informes que se entregarán periódicamente. La sistematicidad en su entrega y difusión entre los implementadores impulsará la mejora del programa.
• Sumativos: se les da también el nombre de conclusivos o concluyentes, son los que se pueden llamar informes finales. Esto quiere decir que son los que recogen y plantean la visión global del objeto evaluado, haciendo uso de toda la información que se ha recogido a lo largo de todo el proceso. El informe deberá aportar información sobre su utilidad a aquellas personas que: a) puedan aplicarlo en un futuro, b) que puedan proporcionar recursos para continuar aplicando el programa, c) que tengan que tomar decisiones a partir de los datos expuestos en el informe.

• Parcial: algunos autores lo llaman de progreso. Puede entenderse como un instrumento de trabajo, pudiendo utilizarlo como un elemento para negociar datos y de recogida de información adicional. En algunos programas a veces se pide que el informe parcial y el final vayan desconectados, cuando lo que resulta más importante en una evaluación con enfoque de procesos es que los informes parciales vayan dirigiendo el informe final. En este tipo de informes es importante que aparezca clara la diferencia entre:
  - Hechos o hallazgos: son datos empíricos encontrados.

- Interpretaciones: son las explicaciones que se hacen sobre los hechos.

- Juicios: son las valoraciones que se hacen de los hechos en el sentido de si es lo que se había proyectado, lo que se esperaba o lo que se considera como bueno o malo, o deseable o no.

...