Avaliação de resultados e impactos da pesquisa e desenvolvimento: avanços e desafios metodológicos a partir de estudo de caso Evaluation of R&D results and impacts: methodological improvements and challenges based on a case study

• Main Authors: André Tosi Furtado, Adriana Bin, Maria Beatriz Machado Bonacelli, Sônia Regina Paulino, Maria Augusta Miglino, Paula Felício Drummond de Castro
• Format: Article
• Language: Portuguese
• Published: Universidade Federal de São Carlos 2008-08-01
• Series: Gestão & Produção
• Subjects: Avaliação de resultados; Avaliação de impactos; Programa de pesquisa; Saneamento básico; Demandas sociais; Result evaluation; Impact evaluation; Research program; Sanitation; Social needs
• Online Access: http://www.scielo.br/scielo.php?script=sci_arttext&pid=S0104-530X2008000200013

O presente artigo apresenta e discute o trabalho de aperfeiçoamento e adaptação de uma metodologia de avaliação de resultados e impactos de programas de pesquisa e sua aplicação para o Programa de Pesquisas em Saneamento Básico (PROSAB), apoiado pela Financiadora de Estudos e Projetos (FINEP). O PROSAB é executado principalmente por universidades e tem como objetivo atender a demandas tecnológicas da sociedade brasileira na área de saneamento. O estudo concentra-se tanto na discussão sobre a importância da avaliação de programas de pesquisa quanto na criação de uma metodologia capaz de capturar os aspectos inerentes que resultam dos referidos programas. O estudo foi desenvolvido em duas vertentes: avaliação de resultados, que se concentrou na mensuração dos inputs e outputs do programa, e avaliação de impactos, que se baseou na mensuração da intensidade e importância das transformações potenciais ou percebidas na sociedade brasileira em decorrência do programa. A avaliação de resultados foi focada nos executores do programa (pesquisadores do PROSAB), sendo o projeto de pesquisa a unidade de referência para a análise. Já a avaliação de impactos teve como abrangência o conjunto de atores relacionados ao setor de saneamento no Brasil, incluindo aqueles relacionados à política, gestão, regulação e legislação, a comunidade científica e as companhias de saneamento. Neste caso, a unidade de análise foi o próprio programa.<br>This paper discusses efforts to improve and adapt a method of evaluation of results and impacts of research programs and its application to the PROSAB program (Basic Sanitation Research Program) sponsored by FINEP, Brazil's federal agency for financing studies and projects. The PROSAB program is executed mainly by universities, although its purpose is to meet the technological needs of Brazilian society in the area of sanitation. The study concentrates on the discussion of the importance of evaluating research programs and on the creation of a methodology that can capture the inherent aspects resulting from those programs. The study was developed along two lines: evaluation of results, which concentrated on measuring the program's inputs and outputs; and evaluation of impacts, which was based on measurements of the intensity and importance of potential or perceived transformations in Brazilian society as a result of the program. The evaluation of results focused on the people executing the program (PROSAB researchers), and the unit of reference for the analysis was the research project. The evaluation of impacts encompassed the entire set of actors related to Brazil's sanitation sector, comprising the research community, sanitation companies, public actors at local and federal levels, and the unit of analysis was the program itself.