e-México, la necesidad de una auténtica evaluación

Como comenté en la entrada anterior, una de las preocupaciones del gobierno federal en México en los últimos años, y aparentemente una preocupación de la actual Comisión de Ciencia y Tecnología de la Cámara de Senadores es el problema de la adopción de la tecnología para la educación y las Pymes. Al menos, la serie de comentarios reprobatorios sobre la Enciclomedia y el programa e-México de los últimos días por la cámara de Senadores parece indicar que así es.

Me resulta muy interesante para iniciar que la Cámara de Senadores, que entiendo está involucrada en la aprobación de los presupuestos, y que en los últimos años se opuso a la inversión en tecnología argumentando por la necesidad de invertir en otras necesidades más básicas, ahora se deslinde de la responsabilidad y culpe al ejecutivo del rezago. El poder legislativo es corresponsable en los aciertos y los errores.

Por otro lado, me parece que se requiere una auténtica evaluación que esté separada de intereses políticos, y que objetivamente, señale los aciertos y problemas de la política pasada y actual, y propositiva, sugiriendo mejoras para el plan nacional de desarrollo actual.

Personalmente, estoy convencido de que el programa e-México es definitivamente perfectible, pero creo que también se han dado aciertos. La infraestructura que se ha instalado hasta ahora es un avance, y los contenidos que se han creado en el portal e-México también ha sido un acierto. Hace falta más, cierto, pero reprobar el esfuerzo sin entender lo que significa me parece poco constructivo. Creo que en lugar de pensar en calificaciones aprobatorias o reprobatorias, parece más conveniente pensar en las desviaciones que existen entre la situación actual y la visión de país que tenemos, y pensar en estrategias para avanzar hacia esta visión.

Hace algunos meses escribí con unos colegas un artículo sobre e-México para la revista Government Information Quarterly, y actualmente se encuentra en prensa. Si a alguien le interesa, puede ser accesado a través de la página de la revista aquí.

Economía Digital

Estoy trabajando actualmente con una estudiante de Maestría en un proyecto en el que estamos tratando de entender de mejor forma el programa de Economía Digital en México. El supuesto básico de programas como éste es que la introducción y el uso de las tecnologías de información por parte de las empresas incrementa la productividad. Más aún, la promoción de la industria local de tecnología (ya que existe una mayor demanda por tecnología) genera derramas adicionales sobre la capacidad de innovación del país (a veces conocidos como efectos de red).


Tecnologías de información -------------------> Productividad

Aunque muchos gobiernos y agencias internacionales siguen creyendo de forma importante en este supuesto, en realidad no es tan clara o directa la relación entre uso de tecnologías y productividad o entre uso de tecnologías y capacidad de innovación. Un grupo importante de investigadores han venido trabajando en entender esta relación --de hecho-- en establecer su existencia. Los resultados contradictorios que se han obtenido con modelos estadísticos han llevado a llamar a esta área de investigación la "paradoja de la productividad" (productivity paradox). Más aún, creo que esta paradoja pertenece a una familia de fenómenos que tienen que ver con la innovación en las organizaciones (calidad total, aprendizaje organizacional, etc.), en los que se observan resultados contradictorios, y las inversiones en innovación no siempre conducen a un mejor desempeño.

¿Cuáles son los factores de éxito que determinan en qué casos existe un retorno interesante sobre la inversión? aún tenemos mucho que aprender. Ciertamente, las empresas saben mucho más de lo que creemos. Lo que necesitamos son herramientas de análisis que nos permitan establecer estos factores de éxito con claridad para invertir mejor los recursos con los que se cuenta, y aprender de otros esfuerzos de innovación. Creo que la simulación es una herramienta mucho más poderosa que la estadística para identificarlos.

Hasta pronto

Más sobre evaluación

Una gran cantidad de los esfuerzos asociados con la evaluación del gobierno electrónico se han orientado al trabajo de evaluación de portales o sitios de Internet de los gobiernos, ya sea a nivel federal, estatal o local. En la realización de estos esfuerzos, es posible identificar al menos tres enfoques en la realización del trabajo.

Un primer enfoque se relaciona con la evaluación de los portales en términos de etapas de desarrollo. Uno de los principales trabajos en relación a etapas de desarrollo es el realizado por Layne y Lee (2001), quienes identifican 4 etapas de desarrollo del gobierno electrónico: Catalogación, Transacción, Integración Vertical e Integración Horizontal. Uno de los mejores ejemplos en el uso de este enfoque para evaluar portales es el esfuerzo de Darrell West, quien desde la Universidad de Brown realiza año con año evaluaciones de portales nacionales y de los estados de la Unión americana siguiendo este enfoque.

Un segundo enfoque se basa en características de calidad de los portales, como transparencia, usabilidad, accesibilidad, etc. evaluados desde el punto de vista de un experto. Uno de los primeros en usar este enfoque fue Jon Gant y Diana Gant (2002), quienes aplicaron este enfoque para evaluar los portales de los estados de la Unión Americana. Yo he aplicado este tipo de enfoque para evaluar los portales estatales en México junto con mi colega Demián Castillo y una estudiante de la Universidad, Lorena Alcázar hace un par de años.

El tercer enfoque está relacionado con el uso de herramientas automáticas de evaluación de portales, las que se basan en criterios que un programa o aplicación de cómputo puede valorar de forma automática como el número de links rotos o la calidad de la escritura, etc. Una de las herramientas más conocidas para realizar este tipo de análisis es WebXact.

Durante los últimos meses he tenido la oportunidad de trabajar con mis colegas Rodrigo Sandoval y Ramón Gil (ver página 22 del pdf), con quienes hemos usado el primer enfoque para evaluar los portales estatales en México. Este es un trabajo que Rodrigo viene haciendo ya desde hace algunos años, y que para incrementar la validez y confiabilidad del trabajo nos invitó a colaborar con él. Esperen los resultados de este año, que creo que son bastante interesantes. Serán publicados en la revista Política Digital.

Hasta pronto.