Diseños de bloques incompletos como una alternativa para la evaluación de proyectos en organizaciones gubernamentales y no gubernamentales

• Main Authors: Osval Antonio Montesinos López, Francisco Javier Luna Vázquez, Emeterio Franco Pérez, Alberto Pastrana Palma, Raymundo Buenrostro Mariscal
• Format: Article
• Language: English
• Published: Universidad De La Salle Bajío 2019-05-01
• Series: Nova Scientia
• Subjects: diseño de bloques incompletos; evaluación de proyectos; proyectos de investigación científica; diseños experimentales estadísticos; convocatorias; financiamiento
• Online Access: http://novascientia.delasalle.edu.mx/ojs/index.php/Nova/article/view/1867

Introducción: La evaluación transparente de propuestas a proyectos de investigación científica  con apoyo económico es de suma importancia, ya que incrementa la confianza en los investigadores que participan en las convocatorias, emitidas por las instituciones gubernamentales u organizaciones privadas, y optimiza el uso de los recursos financieros. El método actual de evaluación de proyectos con financiamiento consiste en la obtención de un promedio de las calificaciones asignadas por un grupo de evaluadores a cada proyecto. Sin embargo, este método no descuenta el efecto del evaluador y produce un sesgo en el dictamen final de cada proyecto, ya sea que los proyectos se vean favorecidos por evaluadores que no son estrictos o afectados por evaluadores exigentes. Método: En esta investigación se propone el uso de dos diseños experimentales estadísticos como una alternativa al proceso de evaluación de proyectos: (a) diseño de bloques incompletos balanceados y el (b) diseño de bloques Alpha. Además, proporcionamos códigos en el software estadístico R, para ambos diseños de experimentos, que permite implementar la evaluación de proyectos de una forma rápida y precisa. Resultados: Con base en la evaluación de los métodos propuestos, se encontró que el método tradicional presenta un sesgo muy importante considerando  la heterogeneidad entre los evaluadores, mientras que, al hacer uso de los dos diseños experimentales se puede reducir este sesgo considerablemente. Discusión y Conclusión: En este artículo se propone el uso de dos diseños experimentales, los cuales son los siguientes: el diseño de bloques incompletos balanceados y diseño de bloques Alpha, para el proceso de evaluación de proyectos en instituciones  gubernamentales  y no gubernamentales. De acuerdo con los ejemplos realizados, ambos diseños experimentales producen resultados similares, pero que son bastante diferentes al método tradicional; básicamente, esto se debe a la capacidad de los diseños experimentales propuestos de remover el efecto del evaluador a diferencia del método tradicional. Este efecto se ve reflejado en la dictaminación final de los proyectos, ya sea en beneficio o perjuicio, ya que el ranking resultante esta enmascarado con las calificaciones verdaderas de los proyectos más el efecto del evaluador.