Preprint / Version 1

What works? Why? In what context? A methodological proposal for policy evaluation through mixed and sequential systematic review

##article.authors##

  • Bruno Marques Schaefer Rio de Janeiro State University image/svg+xml https://orcid.org/0000-0002-5127-7240
    • Conceptualization
    • Data Curation
    • Formal Analysis
    • Funding Acquisition
    • Investigation
    • Methodology
    • Project Administration
    • Resources
    • Software
    • Supervision
    • Validation
    • Visualization
    • Writing – Original Draft Preparation
    • Writing – Review & Editing
  • Tomás Paixão Borges Rio de Janeiro State University image/svg+xml https://orcid.org/0000-0002-5276-6636
    • Conceptualization
    • Data Curation
    • Formal Analysis
    • Investigation
    • Methodology
    • Resources
    • Software
    • Validation
    • Visualization
    • Writing – Original Draft Preparation
    • Writing – Review & Editing
  • Carlos Freitas Rio de Janeiro State University image/svg+xml https://orcid.org/0000-0002-2493-8154
    • Conceptualization
    • Formal Analysis
    • Investigation
    • Methodology
    • Resources
    • Software
    • Validation
    • Visualization
    • Writing – Original Draft Preparation
    • Writing – Review & Editing
  • Frederico Augusto Auad de Gomes Filho Rio de Janeiro State University image/svg+xml https://orcid.org/0009-0004-2217-8077
    • Conceptualization
    • Data Curation
    • Investigation
    • Methodology
    • Software
    • Resources
    • Validation
    • Visualization
    • Writing – Original Draft Preparation
    • Writing – Review & Editing
  • Ana Paula Lima dos Santos Rio de Janeiro State University image/svg+xml https://orcid.org/0000-0002-5566-423X
    • Conceptualization
    • Data Curation
    • Formal Analysis
    • Investigation
    • Methodology
    • Resources
    • Software
    • Validation
    • Visualization
    • Writing – Original Draft Preparation
    • Writing – Review & Editing

DOI:

https://doi.org/10.1590/SciELOPreprints.17986

Keywords:

Policy evaluation, Systematic review, Mixed Methods, Evidence Synthesis, Bolsa Verde

Abstract

This paper proposes a systematic review protocol for policy evaluation. The protocol's innovation lies in combining mixed and sequential features: mixed, in that it emphasizes the integration of different study types within the review; sequential, in that it structures this integration into complementary stages, avoiding the conventional hierarchization that tends to leave important aspects of how policies function in the background. The result is a guide for more complete evaluations of policies and interventions, which can be presented at different levels of complexity, whether in a more detailed form for the academic community or synthesized into a "toolbox" better suited to informing policy formulation and implementation, or to disseminating results. Beyond the conceptual discussion and description of the methodology, the paper also includes an empirical section, in which we apply the protocol to the concrete case of the Bolsa Verde Program. In doing so, we hope to make the methodology more tangible and to elucidate its advantages and limitations.

Downloads

Download data is not yet available.

Author Biographies

Bruno Marques Schaefer, Rio de Janeiro State University

Professor Adjunto do Departamento de Estudos Políticos do IESP (Instituto de Estudos Sociais e Políticos) da UERJ (Universidade do Estado do Rio de Janeiro). Coordenador do programa de pós-graduação em Ciência Política no IESP. Graduado do Curso de Ciências Sociais, habilitação Bacharelado e Licenciatura. Concluiu o Mestrado em Ciência Política em 03/2018 e o doutorado no PPG de Ciência Política da UFRGS em 09/2022, realizando pesquisas. Foi professor substituto na mesma Universidade, vinculado ao Departamento de Ciência Política. Participa, como pesquisador, do OLB (Observatório do Legislativo brasileiro) e do DOXA (Laboratório de Estudos Eleitorais, de Comunicação Política e Opinião Pública). Co-coordena o MAPE (Laboratório de Monitoramento e Avaliação de Políticas Públicas e Eleições do IESP-UERJ). É Editor de Replicabilidade na Revista DADOS. As áreas de interesse acadêmico são: políticas públicas, partidos políticos, metodologia científica e financiamento político. Também foi colunista de política e instituições no Nuances Blog, professor voluntário no Curso Pré-Vestibular Popular Liberato Salzano, consultor do Tribunal Superior Eleitoral e bolsista da Fundação Konrad Adenauer Brasil para pesquisa em partidos políticos.

Tomás Paixão Borges, Rio de Janeiro State University

Doutorando pelo Instituto de Estudos Sociais e Políticos da Universidade do Estado do Rio de Janeiro (IESP-UERJ), com período sanduíche no Massachusetts Institute of Technology (MIT). Mestre em Ciência Política pelo IESP-UERJ e bacharel em Línguas Estrangeiras Aplicadas às Negociações Internacionais pelo CEFET-RJ, com mobilidade acadêmica no Sciences Po Strasbourg. Pesquisador do Laboratório de Monitoramento e Avaliação de Políticas e Eleições (MAPE) do IESP-UERJ. Possuo interesse nas áreas de políticas públicas, eleições e métodos computacionais para ciências sociais.

Carlos Freitas, Rio de Janeiro State University

Doutorando e mestre em Ciência Política pelo Instituto de Estudos Sociais e Políticos da Universidade do Estado do Rio de Janeiro (IESP-UERJ). Pesquisador do Núcleo de Estudos sobre o Congresso (NECON), do Laboratório de Monitoramento e Avaliação de Políticas e Eleições (MAPE) e do Centro de Estudos de Finanças Sustentáveis (CeFiS), do IESP-UERJ. Possuo interesse nas áreas de instituições, comportamento político e políticas públicas.

Frederico Augusto Auad de Gomes Filho, Rio de Janeiro State University

Doutorando pelo Instituto de Estudos Sociais e Políticos da Universidade do Estado do Rio de Janeiro (IESP-UERJ). Mestre em Ciência Política pelo IESP-UERJ e bacharel em Ciências Sociais e em Direito, ambos pela Universidade Federal do Rio de Janeiro (UFRJ). Pesquisador do Laboratório de Monitoramento e Avaliação de Políticas e Eleições (MAPE) do IESP-UERJ. Possuo interesse nas áreas de políticas públicas, economia política e clima.

Ana Paula Lima dos Santos, Rio de Janeiro State University

Doutoranda pelo Instituto de Estudos Sociais e Políticos da Universidade do Estado do Rio de Janeiro (IESP-UERJ), com período sanduíche na University of Toronto (UofT). Mestre e bacharel em Ciência Política pela Universidade Federal do Estado do Rio de Janeiro (UNIRIO). Pesquisadora do Laboratório de Monitoramento e Avaliação de Políticas e Eleições (MAPE) do IESP-UERJ. Possui interesse nas áreas de representação, eleições e políticas públicas.

Submitted

09/08/2026

Posted

09/09/2026

How to Cite

What works? Why? In what context? A methodological proposal for policy evaluation through mixed and sequential systematic review. (2026). In SciELO Preprints. https://doi.org/10.1590/SciELOPreprints.17986

Section

Human Sciences

Reviews

No Reviews Available

Plaudit

Data statement