Metodos De Valuacion

En la administración tributaria se toman decisiones diariamente que pueden afectar a la economía de todo el país.

¿Cómo se toman estas decisiones? ¿Son decisiones buenas o malas? La meta de una evaluación es informar sobre

los efectos de políticas actuales y potenciales. Existen varios métodos de evaluación con diferentes niveles de fiabilidad.

La calidad de la evaluación es de suma importancia para poder entregar resultados correctos. Este documento

ofrece un breve resumen de los métodos más comunes con las ventajas y desventajas de cada uno y una descripción

de las condiciones bajo las cuales cada método produce resultados fiables.

Antes de presentar los métodos específicos, se presentarán algunos conceptos básicos:

El objetivo de cada evaluación de impacto es demonstrar un efecto causal: Se quiere medir el impacto de un programa

o una política en alguna variable de interés. Por ejemplo, cuál es el impacto de una notificación en las rectificaciones

de impuestos. Existe una causa y un efecto. La causa es el cambio de una política o la implementación de

un programa nuevo. El efecto es el resultado que se atribuye directamente a la política o al programa nuevo.

La dificultad en medir el impacto está en que solamente se puede observar lo que ocurrió, no lo que hubiera ocurrido

sin el programa. Vemos si un contribuyente que recibió una notificación hizo una rectificación, pero no vemos

que hubiera hecho si no hubiera recibido la notificación, es decir no sabemos si el contribuyente hubiera hecho la

misma rectificación. Esta situación imaginaria, lo que

hubiera pasado sin el programa, se llama el contrafactual.

Entender el contrafactual es clave para

entender el impacto de un programa.

Si existiera una representación correcta del contrafactual

la estimación del impacto sería fácil. El

impacto del programa o de la política es la diferencia

entre el resultado que observamos con el programa

y el resultado que hubiera ocurrido sin el

programa ‐ el contrafactual.

Como en la realidad el contrafactual no existe, ya que es lo que hubiera pasado en un escenario distinto, cada

evaluación intenta ‐ de manera explícita o implícita ‐ construir una estimación del contrafactual para compararlo

con lo que ocurrió. Normalmente, la estimación del contrafactual se representa con un grupo que se denomina el

grupo de control o de comparación. El grupo de control consiste de personas o empresas que no participaron en el

programa, mientras que el grupo de tratamiento es el grupo que participó en el programa. Para estimar el impacto

de la intervención se compara el grupo de tratamiento con el grupo de control.

 Harvard Business School , Rock Center 213, Soldiers Field Road, Boston, MA 02163, dpomeranz@hbs.edu.

FIGURA 1 ‐ EL CONTRAFACTUAL

FUENTE: J‐PAL (2010)

2

La evaluación produce resultados fiables, si el grupo de control es igual al grupo de tratamiento en todas las características

‐ observables y no observables ‐ salvo una: su exposición al programa. En este caso, cualquier diferencia

después de la intervención se le puede atribuir al programa, ya que en su ausencia los dos grupos serían iguales.

Cada método utilizado para la construcción del grupo de comparación impone ciertos supuestos bajo los cuales el

grupo de control y el grupo de tratamiento serían comparables. Cuando los supuestos son realistas, el grupo de

control es una buena representación del contrafactual. Pero cuando los supuestos no son realistas, la estimación

del impacto del programa resulta sesgada. Una evaluación sesgada puede resultar en malas decisiones, y genera

pérdidas de esfuerzo, tiempo y fondos públicos.

Por lo tanto, es importante hacer explícitos los supuestos involucrados en cada método de evaluación y trabajar

con métodos de alta calidad. En la siguiente parte del documento, se presentarán los diferentes métodos de evaluación

con una descripción de sus características, cualidades y limitaciones.

1. EVALUACIÓN ALEATORIA

Las evaluaciones aleatorias (o evaluaciones experimentales) construyen

un grupo de comparación de máxima calidad: la asignación aleatoria

tiene como objetivo que no exista ninguna diferencia entre los individuos

del grupo de tratamiento y del grupo de control, salvo el hecho

que uno ha sido escogido al azar para participar en el programa y el

otro no. Por lo tanto, las evaluaciones aleatorias representan el caso

ideal de una evaluación de impacto. Es por esta razón que en la evaluación

de nuevas medicinas y en las investigaciones de ciencias naturales,

se usa casi exclusivamente este método.1

Sin embargo, la asignación aleatoria

requiere que la evaluación se prepare

antes de iniciar el programa. Por esto,

este método también se denomina

evaluación prospectiva. En un proceso

aleatorio se asigna individuos (o empresas

u otras entidades) al grupo de

tratamiento y aquellos que no se

seleccionan forman parte del grupo

de control. El proceso aleatorio puede

ser algo tan simple como tirar una

moneda o un sorteo. Normalmente, la

asignación aleatoria se hace a través

de un simple proceso en Excel o Stata.

No es necesario que los dos grupos

sean de igual tamaño.

1 Hay que distinguir entre una evaluación aleatoria y un muestreo aleatorio: Muchos estudios hacen muestreos aleatorios para

sacar información representativa de la población. El muestreo aleatorio no intenta medir impacto. La característica distintiva de

una evaluación aleatoria es la asignación aleatoria del tratamiento.

Aleatorización en la práctica

Es importante que el proceso de aleatorización sea realmente aleatorio y no

un proceso que simplemente “parece” arbitrario. Por ejemplo, asignar personas

con apellidos con la primera letra “A‐L” a tratamiento y “M‐Z” a control

parece aleatorio, pero no lo es. Tal asignación requiere el supuesto que personas

“A‐L” son iguales a personas “M‐Z”. Pero es posible que las familias con

apellidos con la primera letra “A‐L” sean distintas de las familias con apellidos

que comiencen con “M‐Z”. Por ejemplo, la composición étnica puede variar.

Para evitar esta situación se recomienda el uso de un proceso automatizado,

por

...