RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 1
A PROPOSTA DE UM PROGRAMA DE PÓS-GRADUAÇÃO EM EDUCAÇÃO E AS
AVALIAÇÕES DA CAPES: UM ESTUDO DE CASO A PARTIR DA
UNIVERSIDADE ESTADUAL DO OESTE DO PARANÁ
LA PROPUESTA DE UN PROGRAMA DE POSGRADO EN EDUCACIÓN Y LAS
EVALUACIONES DE LA CAPES: UN ESTUDIO DE CASO A PARTIR DE LA
UNIVERSIDAD ESTATAL DEL OESTE DE PARANÁ
THE PROPOSAL FOR A GRADUATE PROGRAM IN EDUCATION AND CAPES'
EVALUATIONS: A CASE STUDY FROM THE STATE UNIVERSITY OF WEST
PARANÁ
Fábio Lopes ALVES1
e-mail: fabiobidu@hotmail.com
Yuliia FELENCHAK2
e-mail: yufelenchak@yahoo.com
Andrii HOLOD3
e-mail: aholod2012@gmail.com
Como referenciar este artigo:
ALVES, F. L.; FELENCHAK, Y.; HOLOD, A. A proposta de um
Programa de Pós-Graduação em Educação e as avaliações da
CAPES: Um estudo de caso a partir da Universidade Estadual do
Oeste do Paraná. Revista Ibero-Americana de Estudos em
Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-
5587. DOI: https://doi.org/10.21723/riaee.v18i00.17773
| Submetido em: 24/02/2023
| Revisões requeridas em: 08/03/2023
| Aprovado em: 18/04/2023
| Publicado em: 14/12/2023
Editor:
Prof. Dr. José Luís Bizelli
Editor Adjunto Executivo:
Prof. Dr. José Anderson Santos Cruz
1
Universidade Estadual do Oeste do Paraná (UNIOESTE), Cascavel PR Brasil. Professor do Programa de Pós-
Graduação em Sociedade, Cultura e Fronteiras. Pós-doutorado em Educação (UNIFESP).
2
Lviv State University of Physical Culture (LSUPC), Lviv Ucrânia. Professora visitante estrangeira junto ao
Programa de Pós- Graduação em Sociedade, Cultura e Fronteiras da Universidade Estadual do Oeste do Paraná.
Doutorado em Demografia, economia do trabalho, economia social e política (UNDL, Ucrânia).
3
Lviv State University of Physical Culture (LSUPC), Lviv Ucrânia. Professor visitante estrangeiro junto ao
Programa de Pós- Graduação em Sociedade, Cultura e Fronteiras da Universidade Estadual do Oeste do Paraná.
Doutorado em Desenvolvimento de forças produtivas e economia regional (UTEC, Ucrânia).
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 2
RESUMO: Este artigo propõe analisar como a Coordenação de Aperfeiçoamento de Pessoal
de Nível Superior (CAPES) avalia um Programa de Pós-Graduação em Educação. Os objetivos
são: problematizar o desempenho do Programa de Pós-Graduação em Educação da
Universidade Estadual do Oeste do Paraná (PPGE/UNIOESTE) descritos nos Pareceres finais
da Comissão de Área; analisar, através das recomendações dos avaliadores, quais são as
melhorias indicadas pelos consultores; apresentar, em perspectiva comparada, sugestões,
diretrizes e estratégias que são adotadas por Programas consolidados e, que, eventualmente,
possam ser adotados tanto pelo PPGE/UNIOESTE, quanto por outros Programas de Pós-
Graduação em situação similar. Os resultados da pesquisa problematizam os comentários
positivos, negativos e as sugestões exaradas pelos avaliadores, bem como parte das tendências
e dos desafios impostos aos Programas de Pós-Graduação em Educação no Brasil.
PALAVRAS-CHAVE: Avaliação. Programas de Pós-Graduação. CAPES.
RESUMEN: Este artículo propone analizar la forma en que la CAPES (Coordinación de
Perfeccionamiento de Personal de Nivel Superior) ha evaluado la propuesta de un programa
de posgrado en educación. Los principales objetivos de este texto son: problematizar el
desempeño del PPGE/UNIOESTE descritos en los Dictámenes finales de la Comisión de Área;
analizar, por medio de las recomendaciones de los evaluadores, cuáles son las mejoras que los
consultores han indicado; presentar, a partir de ejemplos en perspectiva comparada
sugerencias, directrices y estrategias que están siendo adoptadas por Programas consolidados
y que eventualmente puedan ser adoptados tanto por el PPGE/UNIOESTE, como por otros
Programas de posgrado en situación similar. Los resultados de la investigación problematizan
los comentarios positivos, negativos y las sugerencias expresadas por los evaluadores, así
como parte de las tendencias y desafíos impuestos a los Programas de Posgrado en Educación
en Brasil.
PALABRAS CLAVE: Evaluación. Programas de Posgrado. CAPES.
ABSTRACT: This article aims to analyze the way in which CAPES (Coordination for the
Improvement of Higher Education Personnel) has evaluated the proposal for a Graduate
Program in Education. The main objectives of this text are: to problematize the performance
of PPGE / UNIOESTE described in the Final Opinions of the Area Commission; to analyze,
through the recommendations of the evaluators, what are the improvements that the consultants
have indicated; to present, from examples in a comparative perspective, suggestions, guidelines
and strategies that are being adopted by consolidated Programs and that, respecting the
idiosyncrasies, may eventually be adopted both by PPGE / UNIOESTE and by other Graduate
Programs in a similar situation. The research results problematize the positive and negative
comments and suggestions made by the evaluators as well as part of the trends and challenges
imposed on the Graduate Programs in Education in Brazil.
KEYWORDS: Evaluation. Graduate Programs. CAPES.
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 3
Introdução
O presente artigo se propõe, a partir do conceito de Campo Científico (BOURDIEU,
2004; SCARTEZINI, 2011), analisar a maneira pela qual a CAPES (Coordenação de
Aperfeiçoamento de Pessoal de Nível Superior) tem avaliado, ao longo dos anos, a proposta do
Programa de Pós-Graduação em Educação da Universidade Estadual do Oeste do Paraná,
Campus Cascavel (PPGE/UNIOESTE). A ficha de avaliação/Parecer final da Comissão de
Área (até o ano de 2017) foi composta por cinco itens, a saber: 1- Proposta do Programa; 2-
Corpo docente; 3- Corpo discente, Teses e Dissertações; 4- Produção Intelectual; e 5- Inserção
Social. Entretanto, dado as limitações espaciais que um texto como este nos impõe, nosso foco
recai, exclusivamente, sobre o parecer da Comissão de Área no tocante a Proposta do Programa,
que se constitui no primeiro item do Parecer.
Embora esse item, Proposta do Programa, não tenha recebido atribuição de peso
quantitativo no cômputo do conceito final recebido pelo Programa, ele se torna um importante
indicador, na medida que se constitui no único item de avaliação qualitativo e, por sua vez, se
torna um dos pilares fundamentais de qualquer programa de Pós-Graduação, uma vez que se
torna um balizador da maneira pela qual os consultores ad hoc enxergam a proposta do
respectivo Programa de Pós-Graduação.
Assim, o presente texto tem os seguintes objetivos: problematizar o desempenho do
PPGE/UNIOESTE descritos nos Pareceres finais da Comissão de Área; analisar, por meio das
recomendações dos avaliadores, quais são as melhorias que os consultores têm indicado;
apresentar, a partir de exemplos em perspectiva comparada (CATANI; AZEVEDO, 2013)
sugestões, diretrizes e estratégias que estão sendo adotadas por Programas consolidados e por
Programas conceitos 6 e 7, isto é, considerados pela CAPES como padrão de excelência
internacional e que, respeitadas as idiossincrasias, eventualmente possam ser adotados tanto
pelo PPGE/UNIOESTE, quanto por outros Programas de Pós-Graduação em situação similar,
visando superar algumas fragilidades apresentadas pelos avaliadores na Ficha de Avaliação. O
texto encontra-se estruturado da seguinte forma: num primeiro momento, apresenta-se o
referencial teórico e a justificativa que fundamentam a presente discussão. Num segundo
momento, contextualiza a metodologia adotada. Posteriormente, problematiza o histórico do
PPGE/UNIOESTE, bem como efetua-se a análise de dados (CAPES, 2010; 2013; 2017;
HORTA, 2002; HORTA; MORAES, 2005; CASTANHA; GRÁCIO, 2012; RIBEIRO, 2012).
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 4
Referencial Teórico
Ao realizar um estudo comparado entre os indicadores de avaliação utilizados pela
CAPES para os Programas de Pós-Graduação em Matemática, referentes ao triênio 2007- 2009,
Castanha e Grácio (2012), apontaram para a carência de estudos similares, em outras áreas de
conhecimento, que se preocupassem em fazer um balanço detalhado da complexa metodologia
adotada em tais avaliações. Nas considerações finais do texto, as autoras indicaram a
necessidade de que estudos semelhantes fossem desenvolvidos em outras áreas da Pós-
Graduação brasileira, propiciando, assim, novos olhares à sistemática de avaliação, dados mais
recentes e reflexões atualizadas sobre essa temática pouco explorada no Brasil (CASTANHA;
GRÁCIO, 2012, p. 95).
Mesmo diante dessa ressalva, tal tarefa vista como necessária à compreensão de por
onde e como caminham as avaliações de desempenho dos Programas de Pós-Graduação
Programas de Pós-Graduação no Brasil (CASTANHA; GRÁCIO, 2012) , na área de
Educação, ainda carece de efetivação. Eis, portanto, a razão da proposta desse texto: contribuir
para uma área de pesquisa pouco explorada.
Nesse sentido, uma chave de interpretação para estudos como o aqui proposto é a noção
de Campo Científico:
A noção de campo está aí para designar esse espaço relativamente autônomo,
esse microcosmo dotado de suas leis próprias. Se, como o macrocosmo, ele é
submetido a leis sociais, essas o são as mesmas. Se jamais escapa às
imposições do macrocosmo, ele dispõe, com relação a este, de uma autonomia
parcial mais ou menos acentuada. [...] Em outras palavras é preciso escapar à
alternativa da ‘ciência pura’, totalmente livre de qualquer necessidade social,
e da ciência escrava’, sujeita a todas as demandas político-econômicas. O
campo científico é um mundo social e, como tal, faz imposições, solicitações
etc., que são, no entanto, relativamente independentes das pressões do mundo
social global que o envolve. De fato, as pressões externas, sejam de que
natureza forem, se exercem por intermédio do campo, são mediatizadas
pela lógica do campo (BOURDIEU, 2004, p. 21).
O que Pierre Bourdieu nos mostra é o quanto o campo científico tornou-se um espaço
de conflito e de disputa, por autoridade e capital científico. Daí a defesa que Bourdieu faz de
que a ciência não é neutra. No âmbito das Universidades e, também, dos Programas de Pós-
Graduações, são os detentores de capitais científicos que irão definir o que é importante para
os pesquisadores, bem como em que eles devem concentrar seus esforços (BOURDIEU, 2004).
“Ou seja, os agentes fazem os fatos científicos e até mesmo o próprio campo científico a partir
de sua posição neste campo, posição esta que determina suas possibilidades e suas
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 5
impossibilidades” (SCARTEZINI, 2011, p. 34). Assim, para se pensar na avaliação, é preciso
também compreender como os atores sociais se movem no âmbito desse campo científico, bem
como as regras desse jogo.
João Silvério Baia Horta então representante da Área de Educação junto à CAPES
(1999-2001) , ao relatar os processos que marcam a avaliação da Pós-Graduação, a partir de
análise de dados da CAPES, destaca, entre outros, três aspectos para revelar que, nesse
processo/jogo, há um outro lado da moeda, a saber: a) os programas que alcançaram conceitos
mais elevados na avaliação da CAPES são aqueles que, em geral, têm tido um resultado abaixo
da média nos indicadores ligados à orientação. Isso é, formam menos alunos; b) esses mesmos
programas apresentam um tempo médio de titulação mais alto do que os programas com
conceitos inferiores, além de um número de titulados abaixo da média, demorando mais tempo
para titulá-los; c) ao contrário do que se acredita, um elevado tempo médio de titulação e um
baixo número de orientandos por docente repercutem muito pouco no conceito dos programas
com notas inferiores. No entanto, são fatais na hora da distribuição de bolsas CAPES (HORTA,
2002; HORTA; MORAES, 2005).
Ora, as revelações acima confirmam que, nesse jogo (BOURDIEU, 2004), as regras
embora sejam as mesmas para todos conduzem a resultados finais com nítida desproporção
de critérios entre Programas com conceitos elevados e Programas com conceito inferiores.
Assim,
[...] docentes de programas com alto conceito dedicam mais tempo à produção
científica, garantindo assim a manutenção desses conceitos e o financiamento
por parte dos órgãos que consideram fundamental o conceito no momento da
distribuição das verbas. Entretanto, formam menos alunos, demoram mais
para titulá-los e perdem mais alunos por abandono ou desligamento.
Entretanto, docentes de programas com baixo conceitobuscam
desesperadamente que todos os seus orientandos se titulem o mais
rapidamente possível, para que seus programas não percam bolsas da CAPES;
conseguem isso, mas publicam menos, seus programas mantêm baixos
conceitos e, consequentemente, tornam-se menos competitivos no momento
de disputar financiamento de outras agências (HORTA; MORAES, 2005, p.
101).
Corroborando essa ideia que se expressa por meio da competitividade ou da metáfora
da olimpíada , Renato Janine Ribeiro, ex-diretor de avaliação da CAPES e ex-ministro da
Educação, esclarece que:
A pós-graduação e sua avaliação pela CAPES sempre foram entendidas pelo
viés mais competitivo do que cooperativo. uma metáfora que alguns usam,
a da olimpíada, na qual a cada edição se exige mais dos competidores: o
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 6
sarrafo, na prova de salto, está sempre subindo. Como o mesmo vale na
produção científica, é natural que as exigências constantemente cresçam e
que um curso que estaria bem situado na sua nota, seja ela 3 ou 7, se não tiver
o cuidado de se atualizar, de aumentar sua qualidade, de produzir mais, corre
o risco de perder o conceito em um ou dois triênios. Além disso, como a
avaliação é forçosamente comparativa, o momento da Trienal causa um certo
nervosismo, pelo qual as áreas e no interior delas os programas se
comparam e se defrontam. Portanto, o elemento competitivo existe e faz parte
do sistema, que procura gerar uma classificação hierárquica que tem vários
efeitos positivos: 1) estimula o melhor desempenho, mediante uma avaliação
externa; 2) atribui maior autonomia na gestão e obtenção de recursos aos
programas que estão se saindo melhor no seu desempenho; 3) orienta os
candidatos a procurar os melhores cursos (RIBEIRO, 2012, p. 88).
Daí a necessidade de, em função do campo científico (BOURDIEU, 2004) ser também
um espaço de disputa, problematizar as fichas de avaliações em perspectiva comparada
(CATANI; AZEVEDO, 2013), torna-se uma tarefa imperiosa. Nesse ínterim, é importante uma
ressalva: não se trata, aqui, de publicizar problemas internos de um Programa de Pós-
Graduação (PPG), mas, antes, estimular que Programas que estejam em situação similar ao
Programa aqui analisado possam olhar para as fichas de avaliação de Programas que estejam
em estratos superiores e, caso queiram, tomarem, respeitado suas devidas especificidades, como
bússola para suas práticas cotidianas. Do contrário, a própria movimentação das disputas
internas desse campo científico (BOURDIEU, 2004) se encarregará de colocar às margens
quem não estiver atento sobre como aqueles que detém capital científico (Programas notas 6 e
7) e as regras do jogo, estão se movimentando e para qual direção eles estão indo. Além do
mais, não faria sentido a eventual crítica a estarmos dando publicidade aos problemas internos
de um PPG em função de que,
Há vários anos as fichas de avaliação que resumem a apreciação da CAPES
sobre um programa e concluem atribuindo-lhe um conceito (ou nota) estão
disponíveis na Internet, cada uma na entrada do respectivo curso.
Introduzimos algumas inovações. A primeira é a forte recomendação para que
sejam muito claras e didáticas. Um curso, sobretudo quando pode melhorar (e
sempre pode), tem tudo a ganhar se receber conselhos e comentários claros.
Os cursos confiarão mais nos resultados da avaliação se virem que as fichas
foram bastante objetivas e diretas. E os alunos, que são os principais
beneficiários da avaliação, poderão escolher melhor o curso em que desejam
matricular-se ou cobrar, do curso em que estão, as melhoras necessárias. A
segunda mudança importante foi a inclusão, na página de cada curso novo, da
respectiva ficha de recomendação. A “ficha de avaliação” é preenchida na
Avaliação Trienal e examina um curso em funcionamento. a “ficha de
recomendação” expressa a aprovação, ou não, de uma proposta de curso novo
(RIBEIRO, 2012, p. 09, grifos do autor).
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 7
Verificou-se, portanto, que a realidade ilustrada acima, conduz à compreensão de que o
atual modelo de avaliação encaminhou os Programas de Pós-Graduação a um verdadeiro campo
de disputa e conflitos por espaços e capital científico que é preciso, cada vez mais, investigar.
Uma pesquisa, como a aqui proposta, justifica sua execução tendo em vista a carência
de estudos dessa natureza tanto no âmbito do PPGE, quanto de outros Programas na área da
Educação. Trata-se, portanto, de um caminho que ainda precisa ser desbravado, dado seu
potencial reflexivo sobre os desafios impostos pela área, as potencialidades do
PPGE/UNIOESTE, bem como os aspectos que carecem especial atenção com vistas a adoção
de políticas de melhorias (CASTANHA; GRÁCIO, 2012). Os dados aqui apresentados
permitirão que tanto o PPGE/UNIOESTE quanto outros Programas de Pós-Graduação, a partir
de suas idiossincrasias, possam avaliar suas respectivas práticas cotidianas, além de refletir
sobre as ações futuras. Acresce-se a isso, o fato de esta pesquisa ter o potencial de permitir, aos
interessados na temática, uma oportunidade de conhecer os meandros da avaliação para além
de seu próprio PPGE. Em síntese, oferecer uma melhor compreensão das metodologias
adotadas pelas avaliações da CAPES (RIBEIRO, 2012) e, consequentemente, o impacto
positivo que isso pode gerar nos Programas justifica a execução desta pesquisa.
Portanto, é sobre esse cenário que a pesquisa se edifica, pois consideramos que a
sistematização desses dados, seguida de uma análise reflexiva, traz contribuições aos
interessados na compreensão de como se dá o processo de avaliação dos programas da área de
educação pela CAPES.
Metodologia
Para compreender os indicadores utilizados pela CAPES na avaliação de do
PPGE/UNIOESTE, essa pesquisa triangula a Análise de Conteúdo e estudo de caso descritivo
(YIN, 2001; GOODE; HATT, 1979). Trata-se, portanto, de uma pesquisa que combina a
utilização de diversas metodologias. A esse respeito, segundo Mirian Goldenberg (2002, p. 63),
“a combinação de metodologias diversas no estudo do mesmo fenômeno, conhecida como
triangulação, tem por objetivo abranger a máxima amplitude na descrição, explicação e
compreensão do objeto de estudo”.
Martin Bauer (2002, p. 192), ao discorrer sobre os potenciais da metodologia da Análise
de Conteúdo, afirma que:
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 8
[...] através da reconstrução de representações, os analistas de conteúdo
inferem as expressões dos contextos, e o apelo através desses contextos. Se
enfocarmos a fonte, o texto é um meio de expressão. Fonte e público são o
contexto e o foco de inferência. Um corpus de texto é a representação e a
expressão de uma comunidade que escreve. [...] A AC nos permite reconstruir
indicadores e cosmovisões, valores, atitudes, opiniões, preconceitos e
estereótipos e compará-los entre comunidades. Em outras palavras, a AC é a
pesquisa de opinião pública com outros meios.
O estudo de caso, conforme definido por Goode e Hatt (1979, p. 421-422), não se trata
de uma técnica específica de pesquisa. Mas sim, “um meio de organizar dados sociais
preservando o caráter unitário do objeto social estudado”. Portanto, o estudo de caso no presente
artigo se configura numa estratégia de pesquisa que tem a finalidade de trazer à baila elementos
do processo avaliativo de um determinado Programa de Pós-Graduação, mas que, seguramente,
podemos afirmar que se aplicam também a outros.
Segundo Yin (2001, p. 39), “o estudo de caso é uma investigação empírica que investiga
um fenômeno contemporâneo em profundidade e em seu contexto de vida real”.
Assim, por meio do estudo de caso, reunimos dados sobre um PPG para, a partir dele,
refletir sobre questões mais amplas.
Nesse sentido, o estudo de caso, como o experimento, não representa uma
amostragem, e o objetivo do pesquisador é expandir e generalizar teorias
(generalização analítica) e não enumerar frequências (generalização
estatística). Ou, como descrevem três notáveis cientistas sociais em seu estudo
de caso único, o objetivo é fazer uma análise generalizante e não
particularizante (YIN, 2001, p. 29).
Nesse sentido, a perspectiva do estudo de caso se torna útil à medida que nos permite
ampliar a “lente do microscópio” para observar o desempenho do PPGE diante das avaliações
da CAPES, ao passo que também nos permite relacionar com situações semelhantes
vivenciadas por outros Programas de Pós-Graduação no Brasil.
Em síntese, a pesquisa foi desenvolvida em duas etapas: num primeiro momento, foram
coletadas as fichas de avaliação do PPGE, elaboradoras por consultores designados pela área
da educação. As fichas de avaliação de 2010, que compreende o triênio de 2007 a 2009; a ficha
de avaliação de 2013, que compreende o triênio de 2010 a 2012 e; a ficha de avaliação de 2017,
que compreende o quadriênio de 2013 a 2016. Nesse documento registram-se “o peso de cada
quesito além da descrição de como foi realizada a avaliação, apresentando detalhadamente o
que foi analisado (CAPES, 2017, p. 03).
Num segundo momento, realizou-se a Análise de Conteúdo (BAUER, 2002) de tais
fichas, em conjunto com o Documento de Área e a literatura correlata.
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 9
[...] conhecer o documento de área (cada área tem documento e diretrizes
próprias) é tarefa primeira e fundamental para aqueles, que pretendem propor
um novo curso de mestrado e/ou doutorado, e essencial para os docentes que
pretendem atuar e se manter credenciados, a fim de qualificar seus PPG.
Conhecer as demandas, exigências, diferenças e expectativas dos avaliadores
se torna vital (RÔÇAS; ANJOS; PEREIRA, 2017, p. 48).
Com essas informações cruzou-se os dados para, em perspectiva comparada, analisar as
diversas variantes que se apresentam em tais documentos, de modo a apresentar as tendências
da área, os desafios e os aspectos a serem superados pelo PPGE.
Vale ressaltar que o item Proposta do Programa se constitui no primeiro item da Ficha
de Avaliação e está dividido em quatro tópicos, conforme veremos abaixo. No primeiro tópico,
intitulado “Coerência, consistência, abrangência, e atualização das áreas de concentração,
linhas de pesquisa, projetos em andamento e proposta curricular” qualitativamente, dentre
outros elementos, os avaliadores aferem se há coerência entre as linhas de pesquisa, a área de
concentração do programa e os projetos desenvolvidos; se as ementas e bibliografias das
disciplinas estão atualizadas; se o programa estimula que seu corpo docente se aperfeiçoe por
meio de pós-doutorado, estágios de pesquisas etc.; se um estímulo por parte do programa
para que seus discentes possam participar de eventos, seminários, entre outros. Vale ressaltar
que esse item corresponde a 50% (cinquenta por cento) do peso da avaliação desse quesito
(CAPES, 2017e).
Representando 30% (trinta por cento) do peso da avaliação, encontra-se o item
“Planejamento do Programa com vistas a seu desenvolvimento futuro, contemplando os
desafios internacionais da Área na produção do conhecimento, seus propósitos de
aprimoramento na formação, meta quanto à inserção social e acadêmica de seus egressos”.
Nesse item, verifica-se em que medida o Programa evidencia seu compromisso com as
necessidades locais, nacionais e internacionais; quais são as estratégias elencadas para enfrentar
os desafios futuros; se na bibliografia dos cursos literatura estrangeira, participação de
professores estrangeiros, bem como oferta de disciplina em outro idioma; se há a existência de
política de credenciamentos e recredenciamento de docentes; se os docentes são estimulados à
formação continuada, seja ela na forma de participação em eventos, na feitura de pós-doutorado,
em estágio de pesquisa no exterior e se existe uma política de acompanhamento de egressos
(CAPES, 2017e).
No quesito “Infraestrutura para o ensino, pesquisa e administração universitária” que,
por sua vez, ocupa 10% (dez por cento) da avaliação onde são analisados dois itens:
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 10
a) se infraestrutura (salas de aula, biblioteca, laboratórios etc.) adequados para o
ensino e a pesquisa;
b) infraestrutura para administração do Programa (CAPES, 2017e).
Por fim, também correspondendo há 10% do peso da avaliação, o item “Definição clara
da proposta do Programa como Acadêmico, voltado para o desenvolvimento da pesquisa e
formação de pesquisadores e professores para o ensino superior”. Esse tópico serve para
verificar três aspectos: a) se adequação do Programa aquilo que se espera de um Programa
Acadêmico; b) se há grupos de pesquisas que sustentam o Programa e; c) se convênios e
parcerias com outras instituições (nacionais e internacionais), visando à realização de pesquisas
e intercâmbios (CAPES, 2017e).
Considerando que esses quatro quesitos são avaliados com instrumentos de natureza
qualitativa, eles recebem os seguintes conceitos possíveis: Muito Bom; Bom; Regular, Fraco
ou Insuficiente.
Proposta do PPGE/UNIOESTE e as avaliações da CAPES
O Programa de Pós-Graduação em Educação da Unioeste foi criado no ano de 2006. No
entanto, as atividades iniciaram, efetivamente, no ano de 2007. Teve como área de concentração
Sociedade, Estado e Educação até o início do ano de 2019, quando foi alterada para Educação.
Num primeiro momento, o Programa contou com apenas uma linha de pesquisa:
Educação, Políticas Sociais e Estado. Em seguida, após a primeira avaliação trienal, (2010)
criou-se mais 02 (duas) linhas: História da Educação; Formação de Professores e Processos de
Ensino e de Aprendizagem. Por fim, no ano de 2013, criou-se a linha de pesquisa em Ensino
de Ciências e Matemática.
Desse modo, passou a contar com 04 (quatro) linhas de pesquisas, a saber: a) Educação,
Políticas Sociais e Estado; b) História da Educação; c) Formação de Professores e Processos de
Ensino e Aprendizagem; e d) Ensino de Ciências e Matemática. Posteriormente, reduziu-se para
3 (três) linhas em função da extinção da linha Ensino de Ciências e Matemática.
Os membros da linha extinta, algum tempo, vinham arduamente trabalhando na
consolidação de um novo Programa de Pós-Graduação em Educação, mas com uma identidade
voltada para o ensino de Ciências e Matemática. O resultado desse esforço foi a aprovação,
concomitante, no ano de 2017, do mestrado e doutorado em Educação em Ciências e Educação
Matemática. É valido ressaltar que foi algo raro para uma primeira submissão de curso novo,
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 11
pois o processo contumaz é a obtenção da aprovação para funcionamento do mestrado para,
após sua devida consolidação, pleitear a autorização de doutoramento.
Com a aprovação do Mestrado e Doutorado em Educação em Ciências e Educação
Matemática, a maioria dos docentes que faziam parte da linha de pesquisa em Ensino de
Ciências e Matemática do PPGE/UNIOESTE, na condição de docentes permanentes, em função
de estarem como docentes permanentes no outro curso, optaram por ficar como professores
colaboradores no PPGE/UNIOESTE, até que as orientações em andamento fossem concluídas
o que levou, evidentemente, à extinção da linha de pesquisa Ensino de Ciências e Matemática.
Como dissemos acima, a Proposta do Programa é o único quesito da ficha de avaliação
da CAPES que não é atribuído peso, embora seja objeto de avaliação. De acordo com a ficha
de avaliação (CAPES, 2010), esse item é composto de três aspectos avaliativos na qual
destacam-se: a) a coerência e atualização das áreas de concentração, linhas de pesquisa, projetos
de pesquisa e a proposta curricular; b) planejamento futuro, ações de internacionalização e
acompanhamento dos egressos; c) infraestrutura para o desenvolvimento do ensino, pesquisa e
extensão.
No caso do PPGE/UNIOESTE, na sua primeira avaliação (CAPES, 2010), foi visto
pelos avaliadores como positivo alguns itens, dentre os quais: a estrutura curricular; as temáticas
das dissertações; atualização das bibliografias e a consonância com o corpo docente; a
existência de projetos para enfrentar desafios futuros; a existência de política de credenciamento
e recredenciamento de docentes; o apoio da instituição para qualificação docente (pós-
doutorado e participação em eventos); e a infraestrutura adequada.
Entretanto, na ocasião foi registrado (CAPES, 2010) que merecia atenção do Programa,
no sentido de envidar esforços para a melhoria, os seguintes aspectos: inconsistência de alguns
projetos de pesquisa; falta de organicidade das linhas de pesquisa; disciplinas que eram
ofertadas que envolviam todos os docentes e necessidade de investimento visando à ampliação
do acervo bibliográfico.
Em apertada síntese, esse foi o parecer da primeira avaliação (CAPES, 2010) a respeito
da Proposta do PPGE. Vejamos, agora, como se deu o desempenho na segunda avaliação, bem
como em que ela se diferencia da primeira.
Em grande medida, na segunda avaliação (CAPES, 2013), a maior parte dos aspectos
positivos identificados na primeira avaliação (2010) se manteve, não havendo, portanto,
mudanças substanciais. Muito embora os avaliadores reconheceram que, naquele momento
(2010 a 2012), era possível observar uma organicidade entre as linhas de pesquisa e os
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 12
projetos de pesquisa. Algo que, na avaliação do primeiro triênio (2007 a 2009), fora objeto de
recomentada atenção. As temáticas das dissertações e a aproximação do programa com a
educação básica, também foram objetos de elogios por parte dos avaliadores.
Entretanto, o fato de, na Proposta do Programa, não ter sido evidenciado projetos
vinculados à linha de pesquisa recém-criada “Ensino de Ciências e Matemática” foi algo que
pesou de forma desfavorável. Nesse diapasão, a não informação de uma política de
acompanhamento de egressos se somou como item que merecia atenção por parte do Programa.
Na avaliação de 2017, os consultores destacaram que as linhas de pesquisa e os projetos
em andamento eram abrangentes. Por outro lado, ressaltaram: “porém, pouco consistentes e
articulados, dada a diversidade de objetivos, abordagens e temáticas dos projetos. Dessa forma,
a relação dos projetos com as linhas de pesquisa em que se inserem é pouco consistente”
(CAPES, 2017a, p. 4).
Foi nessa avaliação que apareceu um elemento novo, que até então não havia sido objeto
de indicação de atenção do Programa, muito pelo contrário, em 2010, fora, inclusive, objeto de
elogio, a saber: bibliografias das disciplinas. Se em 2010, a esse respeito foi exarado que a
bibliografia, na ocasião, era atual e estava em consonância com o corpo docente, no ano de
2017 foi ressaltado que tanto as bibliografias das disciplinas obrigatórias, quanto das disciplinas
optativas, “embora contenham clássicos e estejam em consonância com as perspectivas teórico-
metodológicas dos docentes, não trazem a contribuição dos novos debates da área, ou sejam,
não estão atualizadas” (CAPES, 2017, p. 4).
No tocante à aderência dos projetos de pesquisa com as linhas de pesquisa, os
avaliadores alertaram para a falta de consistência e articulação entre eles. Nesse sentido,
subtende-se que a crítica seja aos projetos dos docentes, tendo em vista que, ao passo que é
realizada essa crítica, o parecer enfatiza que as temáticas das dissertações, por sua vez, estavam
adequadas às linhas de pesquisa. Nesse contexto, segundo os avaliadores, é a diversidade de
objetivos, abordagens e temáticas dos projetos que o tornam pouco consistentes e articulados
(CAPES, 2017a).
Estratégias para o enfrentamento dos desafios apontados pela CAPES
Na tentativa de trazer algumas alternativas para o enfretamento dos desafios impostos
pela avaliação da CAPES, esta pesquisa verificou como alguns Programas consolidados se
articulam naqueles pontos que para o PPGE ainda se constitui como um desafio.
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 13
No tocante à articulação entre linhas de pesquisas, projetos de pesquisa e grupos de
pesquisas, percebe-se que o PPGE está na contramão dos Programas de excelência
internacional. Enquanto na Unioeste um número considerável de grupos de pesquisa, no
Programa de Pós-Graduação em Educação da Universidade do Vale do Rio dos Sinos
(UNISINOS), por exemplo (conceito 7), linhas de pesquisa que se estruturam, apenas a partir
de (02) dois grupos de pesquisas. Percebe-se, portanto, que a CAPES não tem visto o mero
aumento de grupo de pesquisa como algo positivo. Mas, antes disso, tem valorizado grupos de
pesquisas que possuam: a) redes de pesquisa com outras instituições, preferencialmente
estrangeiras; b) que tanto os alunos quanto egressos participem das atividades do grupo; c) que
se encontre interinstitucionalmente estruturado (CAPES, 2017b).
Foi nesse contexto que os avaliadores (CAPES, 2017b) registraram elogios à proposta
do PPGE da UNISINOS que tem a interinstitucionalidade como característica principal do
Grupo Interinstitucional de Pesquisa em Docências, Pedagogias e Diferenças, por exemplo.
Esse grupo, formado em 2015, tem como instituições parceiras: Universidade Federal do Rio
Grande do Sul, Universidade de Santa Cruz do Sul, Universidade Federal do Pampa,
Universidade Federal de Pelotas, Universidad Nacional de La Patagonia Austral e Universidade
do Porto.
Na Universidade Federal do Paraná, a rede de cooperação também foi objeto de
reconhecimento na avaliação.
Merece destaque o Projeto “Estudos sobre Interculturalidade na
Universidade” aprovado e financiado pelo Edital 01/2014 CAPES e
SECADI/MEC, que envolve cooperação em pesquisa e mobilidade acadêmica
de discentes de doutorado das universidades: UFPR (programas de pós-
graduação em Educação, em Sociologia e em Psicologia); UEM (Mestrado
em Sociologia); Universidade Tiradentes; Texas University at Austin (EUA);
Universitat Autónoma Metropolitana (México); Université de Yaoundé I
(Camarões). Ressalta-se ainda o PROGRAMA
CAPES/FORTALECIMENTO MERCOSUL UFPR/UTALCA (Chile), que
estabelece uma relação de colaboração que já dura 6 anos com programas de
pós-graduação de países do cone sul no desenvolvimento de pesquisas e troca
de experiências entre docentes e discentes (CAPES, 2017c, p. 7).
Na Universidade Federal de Santa Catarina, experiência semelhante foi objeto de
reconhecimento da avaliação.
A Proposta do Programa apresenta-se de forma adequada aos propósitos de
um programa acadêmico, evidenciando-se a existência de grupos de pesquisa
e iniciativas de parceria para a realização de convênios, pesquisas e integração
de docentes e pesquisadores de diferentes instituições como, por exemplo, o
“Projeto interinstitucional com a Universidade Federal de Minas Gerais, no
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 14
projeto: Moderno, Modernidade e Modernização: a educação nos projetos de
Brasil séculos XIX e X”, o projeto “Desenvolvimento humano e
aprendizagem nos primeiros anos da escolarização em países
latinoamericanos Brasil, Cuba e México” e o projeto “Ensino de História: O
estudo das práticas de ensino utilizando documentos judiciais, periódicos
impressos e narrativas orais”, com a participação de diversas universidades
brasileiras e estrangeiras (CAPES, 2017d, p. 2).
Portanto, a ideia de grupos de pesquisas “fechados em si mesmos”, e com ações
limitadas ao âmbito da própria instituição de origem, é algo que, na atualidade, precisa ser
superado. Não basta apenas incluir os alunos da graduação e da pós-graduação nas atividades
dos grupos. É preciso ir além. No momento, o desafio que se impõe é trabalhar com pesquisas
em rede articulando-se por meio de ações interinstitucionais.
Nesse sentido, dados os elogios por parte dos avaliadores da CAPES, vale a pena a
leitura das fichas de avaliação do PPGE da UNISINOS (CAPES, 2017b) e da Universidade
Federal do Paraná (UFPR) (CAPES, 2017c), tendo em vista a maneira como encontram-se
organizadas as linhas de pesquisa, projetos de pesquisa etc.
No caso do PPGE/UNIOESTE, no tocante ao desafio das bibliografias que foram
consideradas desatualizadas, por não trazerem contribuição dos novos debates da área, uma
alternativa seria pensar em ações colegiadas no sentido de sugerir que cada docente pudesse
propor uma ementa que contivesse uma bibliografia que atendesse alguns critérios, tais como:
clássicos da área, autores com produções atualizadas nos últimos anos, dossiês de revistas
especializadas e que essa literatura transitasse tanto pela língua portuguesa quanto estrangeira.
Desse modo, a atualização apontada pela CAPES estaria se fazendo presente.
Embora a sistemática de credenciamento e recredenciamento de docentes não tenha sido
um problema para o PPGE/UNIOESTE, conhecer a experiência da CPA (Comissão Permanente
de Avaliação) do PPGE da UFPR é salutar, tendo em vista que segundo os pareceristas, no
tocante ao PPGE/UFPR:
A Proposta apresentou uma política de credenciamento e recredenciamento de
docentes, com uma comissão permanente de avaliação (CPA) que acompanha
a produção docente e discente anualmente, com critérios bem definidos para
novos credenciamentos, eventuais descredenciamentos e oferta de vagas em
processos seletivos. O trabalho regular da CPA tem garantido um
funcionamento sereno e maduro dos processos de credenciamento e
descredenciamento docente. A partir do trabalho da CPA é também
incentivado o afastamento de docentes para estágios e pós-doutoramento em
outras instituições. No quadriênio, o PPGE ampliou sua inserção internacional
em 2016, cerca de 30% dos docentes do quadro permanente participaram de
atividades em colaboração com instituições de outros países avançando no
que se refere ao contato com grupos e centros de pesquisa de outros países, o
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 15
que tem contribuído para a qualidade das disciplinas ofertadas e para as
pesquisas desenvolvidas (CAPES, 2017c, p. 2).
O acompanhamento dos egressos é um desafio que atinge a maioria dos Programas no
país. Todavia, uma ação inicial poderia ser a de monitorar, sistematizar e incentivar a produção
bibliográfica não só dos alunos, mas também dos formados, bem como acompanhar a inserção
profissional deles, a fim de verificar o impacto da formação stricto sensu na carreira
profissional, além de promover eventos periódicos de egressos com os alunos matriculados,
com o fito de permitir efetiva troca de experiências.
Constantemente, os Programas são cobrados quanto às estratégias adotadas para
enfrentar os desafios futuros. Nesse sentido, vem da Universidade Federal de Santa Catarina
(CAPES, 2017d) duas ações importantes que podem ser replicadas, a saber: contração de
professor visitante para atuação no Programa; financiamento da tradução e revisão de artigos
com vistas à publicação em revistas em língua estrangeira.
Considerações finais
Nosso olhar incidiu sobre os comentários positivos, negativos, bem como as respectivas
sugestões exaradas pelos avaliadores. Com essas informações foi possível cruzar os dados para,
em perspectiva comparada, analisar as diversas variantes que se apresentam em tais
documentos, de modo a apresentar as tendências, os desafios e os aspectos a serem superados
pelo PPGE/UNIOESTE.
Esse trabalho, para além das análises realizadas de cunho pontual e específico junto ao
PPGE da UNIOESTE, tornou possível afirmar que a pós-graduação no Brasil, embora possua
sim programas conceituados e que estão na vanguarda de pesquisas de ponta em diferentes áreas
do saber, ainda apresenta dificuldades e carência em programas que buscam se adequar aos
padrões normativos estabelecidos pela CAPES.
Uma evidência disso é a volatilidade de seus preceitos normativos/avaliativos para os
programas e suas capacidades de adequação. Exemplo disso é que: se até pouco tempo atrás o
incentivo fora para os programas ampliarem, o ximo possível, suas inter-relações com outros
programas de suas próprias instituições, envolvendo alunos da graduação e da pós-graduação
em atividades de grupo, hoje, essa prática é avaliada como se esses programas estivessem
“fechados em si mesmos”, logo, necessitarão ampliar sua rede de interlocução com outras
instituições e, para alcançarem uma maior valorização, a internacionalização é a meta almejada.
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 16
Evidentemente que isso é algo positivo a ser pensado, articulado e trabalhado pelos
programas visando o seu aprimoramento, contudo, instituições periféricas geograficamente, ou
seja, que estão mais distantes dos grandes centros, e com parcos recursos cabe salientar que
se compreende sim, que os parcos recursos aqui mencionados, não são dificuldades somente
destas instituições periféricas , tendem a encontrar maiores dificuldades para efetivamente se
adequarem a essa demanda.
O que se mostra positivo nesse trabalho é que essa abordagem de pesquisa, a pesquisa
comparada, oportunizou conhecer programas que possuem uma expertise em relação aos
marcadores avaliativos que a CAPES tem valorado e utilizado, o que pode, e se espera com
esse artigo, é que o mesmo possa ser considerado não somente pela coordenação, mas por todo
colegiado do PPGE/UNIOESTE, como mote de reflexão que envolva as experiências exitosas
de outras instituições, algumas aqui pontuadas, às adequações de suas atividades, visando muito
mais do que sua pontuação pela CAPES, e sim, uma melhoria qualitativa do trabalho que
ofertam no cenário da pós-graduação. Evidentemente que se espera que essas reflexões possam
também oportunizar, a outros interessados, uma melhor compreensão de como se o processo
de avaliação dos programas da área de educação pela CAPES.
O que se espera também ao final desse trabalho é que, de fato, a metáfora da olimpíada,
citada no texto e comentada por um dos ex-diretores de avaliação da CAPES, deixe de ser a
tônica dos programas de pós-graduação de nosso país e, principalmente, de seu mecanismo
avaliativo. Que possamos avançar, cada um com suas potencialidades e suas limitações, mas
que possamos fazê-lo de uma forma cooperativa, tanto em nossos programas institucionais,
como na importante e necessária inter-relação com as demais instituições produtoras do saber
sistematizado.
REFERÊNCIAS
BAUER, M.; GASKELL, G. Pesquisa qualitativa com texto, imagem e som: um manual
prático. Petrópolis, RJ: Vozes, 2002.
BOURDIEU, P. Os usos sociais da ciência: por uma sociologia clínica do campo científico.
São Paulo: Edunesp, 2004.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2010.
Disponível em: http://trienal.capes.gov.br/wp-
content/uploads/2010/12/fichas/40015017008P1.pdf. Acesso em: 25 fev. 2020.
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 17
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2013.
Disponível em:
http://conteudoweb.capes.gov.br/conteudoweb/VisualizadorServlet?nome=40015017/038/201
3_038_40015017008P1_Ficha.pdf&aplicacao=avaliacaotrienal&idEtapa=2&ano=2013&tipo
=divulga. Acesso em: 25 fev. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Documento de
Área: Educação. 2017. Disponível em: https://www.gov.br/capes/pt-br/centrais-de-
conteudo/Educao.pdf. Acesso em: 25 fev. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2017a.
Disponível em:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/viewPreenchimentoFicha.jsf
?idFicha=4219&popup=true, Acesso em: 25 fev. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade do Vale
do Rio dos Sinos. 2017b. Disponível em:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4369&idTipoAvaliacao=1&publico=true&popup=true. Acesso em: 25 fev. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade Federal
do Paraná. 2017c. Disponível em:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4143&idTipoAvaliacao=1&publico=true&popup=true. Acesso em: 25 fev. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade Federal
de Santa Catarina. 2017d. Disponível em:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4493&idTipoAvaliacao=1&publico=true&popup=true. Acesso em: 25 fev. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Relatório da
Avaliação Quadrienal - Educação. 2017e. Disponível em:
http://capes.gov.br/images/documentos/Relatorios_quadrienal_2017/20122017-
Educacao_relatorio-de-avaliacao-quadrienal-2017_final.pdf. Acesso em: 25 fev. 2020.
CASTANHA, R. C. G.; GRÁCIO, M. C. C. Indicadores de avaliação de Programas de Pós-
Graduação: um estudo comparativo na área da Matemática. Em Questão, Porto Alegre, v. 18,
Edição Especial, p. 81-97, dez. 2012. Disponível em:
https://seer.ufrgs.br/EmQuestao/article/view/33192. Acesso em: 25 fev. 2020.
CATANI, A. M.; AZEVEDO, M. L. N. Estudos de políticas de educação em uma perspectiva
comparada: uma antecipação crítica de Bourdieu e Passeron. Jornal de Políticas
Educacionais, n. 14, jul./dez. 2013. Disponível em:
https://revistas.ufpr.br/jpe/article/view/38224. Acesso em: 25 fev. 2020.
A proposta de um Programa de Pós-Graduação em Educação e as avaliações da CAPES: Um estudo de caso a partir da Universidade
Estadual do Oeste do Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 18
GOLDENBERG, M. A arte de pesquisar: como fazer pesquisa qualitativa em Ciências
Sociais. Rio de Janeiro: Record, 2002.
GOODE, W.; HATT, P. Métodos em Pesquisa Social. São Paulo: Cia Editora Nacional,
1969.
HORTA, J. S. B.; MORAES, M. C. M. O sistema Capes de avaliação da Pós-Graduação: da
área de Educação à grande área de humanas. Revista Brasileira de Educação, n. 30, p. 95-
116, set./dez. 2005. Disponível em:
http://www.scielo.br/scielo.php?script=sci_arttext&pid=S1413-24782005000300008. Acesso
em: 25 fev. 2020.
HORTA, J. S. B. Prefácio. In: BIANCHETTI, L.; MACHADO, A. M. N. A bússola do
escrever: desafios e estratégias na orientação de teses e dissertações. Florianópolis, SC:
EdUfsc, 2002.
RIBEIRO, R. J. Para que serve a avaliação da pós-graduação. A visão da CAPES. Revista
Argentina de Educación Superior (RAES), n. 4, p. 63-104, 2012. Disponível em:
http://www.untref.edu.ar/raes/documentos/raes_5_ribeiro.pdf. Acesso em: 25 fev. 2020.
RÔÇAS, G.; ANJOS, M. B.; PEREIRA, M. V. Quanto vale ou é por quilo: o peso da
produção acadêmica na área de ensino. Ensino e Tecnologia em Revista, Londrina, v. 1, n. 1,
p. 46-66, 2017. Disponível em: https://periodicos.utfpr.edu.br/etr/article/view/5949/4414.
Acesso em: 4 fev. 2020.
SCARTEZINI, N. Introdução ao método de Pierre Bourdieu. Cadernos de Campo,
Araraquara, n. 14-15, p. 25-37, 2011. Disponível em:
https://periodicos.fclar.unesp.br/cadernos/article/view/5159. Acesso em: 25 fev. 2020.
YIN, R. Estudo de caso: planejamento e métodos. Tradução: Daniel Grassi. Porto Alegre:
Bookman, 2001.
Fábio Lopes ALVES; Yuliia FELENCHAK e Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 19
CRediT Author Statement
Reconhecimentos: Não aplicável.
Financiamento: Fundação Araucária.
Conflitos de interesse: Não aplicável.
Aprovação ética: Não aplicável.
Disponibilidade de dados e material: Não aplicável.
Contribuições dos autores: bio Lopes Alves desenvolvimento da pesquisa e elaboração
da primeira versão. Yuliia Felenchak e Andrii Holod aprofundamento das análises.
Processamento e editoração: Editora Ibero-Americana de Educação.
Revisão, formatação, normalização e tradução.
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 1
LA PROPUESTA DE UN PROGRAMA DE POSGRADO EN EDUCACIÓN Y LAS
EVALUACIONES DE LA CAPES: UN ESTUDIO DE CASO A PARTIR DE LA
UNIVERSIDAD ESTATAL DEL OESTE DE PARANÁ
A PROPOSTA DE UM PROGRAMA DE PÓS-GRADUAÇÃO EM EDUCAÇÃO E AS
AVALIAÇÕES DA CAPES: UM ESTUDO DE CASO A PARTIR DA UNIVERSIDADE
ESTADUAL DO OESTE DO PARANÁ
THE PROPOSAL FOR A GRADUATE PROGRAM IN EDUCATION AND CAPES'
EVALUATIONS: A CASE STUDY FROM THE STATE UNIVERSITY OF WEST
PARANÁ
Fábio Lopes ALVES1
e-mail: fabiobidu@hotmail.com
Yuliia FELENCHAK2
e-mail: yufelenchak@yahoo.com
Andrii HOLOD3
e-mail: aholod2012@gmail.com
Editor:
Prof. Dr. José Luís Bizelli
Editor Adjunto Ejecutivo:
Prof. Dr. José Anderson Santos Cruz
1
Universidad Estatal del Oeste de Paraná (UNIOESTE), Cascavel PR Brasil. Profesor del Programa de
Posgrado en Sociedad, Cultura y Fronteras. Posdoctorado en Educación (UNIFESP).
2
Universidad Estatal de Cultura Física de Lviv (LSUPC), Lviv Ucrania. Profesora visitante extranjero en el
Programa de Posgrado en Sociedad, Cultura y Fronteras de la Universidad Estatal del Oeste de Paraná. Doctora
en Demografía, Economía del Trabajo, Economía Social y Política (UNDL, Ucrania).
3
Universidad Estatal de Cultura Física de Lviv (LSUPC), Lviv Ucrania. Profesor visitante extranjero en el
Programa de Posgrado en Sociedad, Cultura y Fronteras de la Universidad Estatal del Paraná Occidental.
Doctorado en Desarrollo de las Fuerzas Productivas y Economía Regional (UTEC, Ucrania).
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 2
RESUMEN: Este artículo propone analizar la forma en que la CAPES (Coordinación de
Perfeccionamiento de Personal de Nivel Superior) ha evaluado la propuesta de un programa de
posgrado en educación. Los principales objetivos de este texto son: problematizar el desempeño
del PPGE/UNIOESTE descritos en los Dictámenes finales de la Comisión de Área; analizar,
por medio de las recomendaciones de los evaluadores, cuáles son las mejoras que los
consultores han indicado; presentar, a partir de ejemplos en perspectiva comparada sugerencias,
directrices y estrategias que están siendo adoptadas por Programas consolidados y que
eventualmente puedan ser adoptados tanto por el PPGE/UNIOESTE, como por otros Programas
de posgrado en situación similar. Los resultados de la investigación problematizan los
comentarios positivos, negativos y las sugerencias expresadas por los evaluadores, así como
parte de las tendencias y desafíos impuestos a los Programas de Posgrado en Educación en
Brasil.
PALABRAS CLAVE: Evaluación. Programas de Posgrado. CAPES.
RESUMO: Este artigo propõe analisar como a Coordenação de Aperfeiçoamento de Pessoal
de Nível Superior (CAPES) avalia um Programa de Pós-Graduação em Educação. Os objetivos
são: problematizar o desempenho do Programa de Pós-Graduação em Educação da
Universidade Estadual do Oeste do Paraná (PPGE/UNIOESTE) descritos nos Pareceres finais
da Comissão de Área; analisar, através das recomendações dos avaliadores, quais são as
melhorias indicadas pelos consultores; apresentar, em perspectiva comparada, sugestões,
diretrizes e estratégias que são adotadas por Programas consolidados e, que, eventualmente,
possam ser adotados tanto pelo PPGE/UNIOESTE, quanto por outros Programas de Pós-
Graduação em situação similar. Os resultados da pesquisa problematizam os comentários
positivos, negativos e as sugestões exaradas pelos avaliadores, bem como parte das tendências
e dos desafios impostos aos Programas de Pós-Graduação em Educação no Brasil.
PALAVRAS-CHAVE: Avaliação. Programas de Pós-Graduação. CAPES.
ABSTRACT: This article aims to analyze the way in which CAPES (Coordination for the
Improvement of Higher Education Personnel) has evaluated the proposal for a Graduate
Program in Education. The main objectives of this text are: to problematize the performance
of PPGE / UNIOESTE described in the Final Opinions of the Area Commission; to analyze,
through the recommendations of the evaluators, what are the improvements that the consultants
have indicated; to present, from examples in a comparative perspective, suggestions, guidelines
and strategies that are being adopted by consolidated Programs and that, respecting the
idiosyncrasies, may eventually be adopted both by PPGE / UNIOESTE and by other Graduate
Programs in a similar situation. The research results problematize the positive and negative
comments and suggestions made by the evaluators as well as part of the trends and challenges
imposed on the Graduate Programs in Education in Brazil.
KEYWORDS: Evaluation. Graduate Programs. CAPES.
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 3
Introducción
Se propone este artículo, a partir del concepto de Campo Científico (BOURDIEU, 2004;
SCARTEZINI, 2011) para analizar la forma en que la CAPES (Coordinación de
Perfeccionamiento del Personal de Nivel Superior) ha evaluado, a lo largo de los años, la
propuesta del Programa de Posgrado en Educación de la Universidad Estatal del Oeste de
Paraná, Campus Cascavel (PPGE/UNIOESTE). El formulario de evaluación/opinión final del
Comité de Área (hasta 2017) estaba compuesto por cinco ítems, a saber: 1- Propuesta de
Programa; 2- Profesorado; 3- Alumnado, Tesis y Disertaciones; 4- Producción Intelectual y 5-
Inserción Social). Sin embargo, dadas las limitaciones espaciales que un texto como este nos
impone, nuestro enfoque recae exclusivamente en la opinión del Comité de Área sobre la
Propuesta de Programa, que constituye el primer punto de la Opinión.
Si bien a este ítem, Propuesta de Programa, no se le ha dado peso cuantitativo en el cálculo
del concepto final recibido por el Programa, se convierte en un indicador importante, ya que
constituye el único ítem de evaluación cualitativa y, a su vez, se convierte en uno de los pilares
fundamentales de cualquier Programa de Posgrado, ya que se convierte en un marcador de la
forma en que los consultores ad hoc ven la propuesta del respectivo Programa de Posgrado.
Postgrado.
Así, el presente texto tiene los siguientes objetivos: problematizar el desempeño del
PPGE/UNIOESTE descrito en los Dictámenes Finales de la Comisión de Área; analizar, a
través de las recomendaciones de los evaluadores, cuáles son las mejoras que los consultores
han indicado; presente, a partir de ejemplos en perspectiva comparada (CATANI; AZEVEDO,
2013) sugerencias, directrices y estrategias que están siendo adoptadas por los Programas
consolidados y por los conceptos 6 y 7 de los Programas, es decir, considerados por la CAPES
como un estándar de excelencia internacional y que, respetando la idiosincrasia, pueden
eventualmente ser adoptados tanto por el PPGE/UNIOESTE como por otros Programas de
Posgrado en situación similar, con el objetivo de superar algunas debilidades presentadas por
los evaluadores en el Formulario de Evaluación. El texto está estructurado de la siguiente
manera: en primer lugar, se presenta el marco teórico y la justificación que subyace a esta
discusión. En segundo lugar, contextualiza la metodología adoptada. Posteriormente, se
problematiza la historia del PPGE/UNIOESTE, así como el análisis de los datos (CAPES, 2010;
2013; 2017; HORTA, 2002; HORTA; MORAES, 2005; CASTANHA; GRÁCIO, 2012;
RIBEIRO, 2012).
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 4
Marco Teórico
Al realizar un estudio comparativo entre los indicadores de evaluación utilizados por la
CAPES para los Programas de Posgrado en Matemática, referidos al trienio 2007-2009,
Castanha y Grácio (2012) señalaron la falta de estudios similares, en otras áreas del
conocimiento, que se preocuparan por hacer un balance detallado de la compleja metodología
adoptada en tales evaluaciones. En las consideraciones finales del texto, los autores indicaron
la necesidad de que estudios similares se desarrollen en otras áreas de los Estudios de Posgrado
brasileños, proporcionando así nuevas perspectivas sobre el sistema de evaluación, datos más
recientes y reflexiones actualizadas sobre este tema poco explorado en Brasil (CASTANHA;
GRÁCIO, 2012, p. 95).
Incluso frente a esta salvedad, esta tarea vista como necesaria para comprender dónde
y cómo las evaluaciones de desempeño de los Programas de Posgrado en Brasil (CASTANHA;
GRÁCIO, 2012) en el área de Educación, aún falta implementación. Esta es, entonces, la
razón del propósito de este texto: contribuir a un área de investigación que ha sido poco
explorada.
En este sentido, una interpretación clave para estudios como el que aquí se propone es
la noción de Campo Científico:
La noción de campo está ahí para designar este espacio relativamente
autónomo, este microcosmos dotado de sus propias leyes. Si, como el
macrocosmos, está sujeto a leyes sociales, éstas no son lo mismo. Si nunca
escapa a las imposiciones del macrocosmos, tiene una autonomía parcial más
o menos acentuada con respecto a él. [...] En otras palabras, es necesario
escapar de la alternativa de la "ciencia pura", totalmente libre de cualquier
necesidad social, y de la "ciencia esclava", sujeta a todas las exigencias
político-económicas. El campo científico es un mundo social y, como tal, hace
imposiciones, peticiones, etc., que son, sin embargo, relativamente
independientes de las presiones del mundo social global que lo rodea. De
hecho, las presiones externas, de cualquier naturaleza, sólo se ejercen a través
de la intermediación del campo, están mediadas por la lógica del campo
.BOURDIEU, 2004, p. 21, nuestra traducción).
Lo que Pierre Bourdieu nos muestra es hasta qué punto el campo científico se ha
convertido en un espacio de conflicto y disputa, para la autoridad y el capital científico. De ahí
la defensa de Bourdieu de que la ciencia no es neutral. En el contexto de las Universidades y
Programas de Posgrado, son los poseedores del capital científico quienes definirán qué es
importante para los investigadores, así como en qué deben concentrar sus esfuerzos
(BOURDIEU, 2004). "Es decir, los agentes hacen los hechos científicos e incluso el propio
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 5
campo científico desde su posición en este campo, posición que determina sus posibilidades y
sus imposibilidades" (SCARTEZINI, 2011, p. 34, nuestra traducción). Por lo tanto, para pensar
la evaluación, también es necesario comprender cómo se mueven los actores sociales dentro de
este campo científico, así como las reglas de este juego.
João Silvério Baia Horta entonces representante del Área de Educación de la CAPES
(1999-2001) , al relatar los procesos que marcan la evaluación de los Estudios de Posgrado, a
partir del análisis de los datos de la CAPES, destaca, entre otros, tres aspectos para revelar que,
en ese proceso/juego, hay otra cara de la moneda, a saber: a) los programas que alcanzaron
conceptos superiores en la evaluación de la CAPES son aquellos que, En general, se han
comportado por debajo de la media en los indicadores relacionados con la orientación. Es decir,
gradúan menos estudiantes; b) estos mismos programas tienen un tiempo promedio de titulación
más alto que los programas con calificaciones más bajas, además de un número de graduados
por debajo del promedio, tardando más en titularlos; c) Contrariamente a lo que se cree, un alto
promedio de graduación y un bajo número de alumnos por docente tienen muy poco impacto
en el concepto de programas con calificaciones más bajas. Sin embargo, son fatales cuando se
trata de la distribución de becas de la CAPES (HORTA, 2002; HORTA; MORAES, 2005).
Ahora bien, las revelaciones anteriores confirman que, en este juego (BOURDIEU,
2004), las reglas -aunque son las mismas para todos- conducen a resultados finales con una
clara desproporción de criterios entre los Programas con calificaciones altas y los Programas
con calificaciones más bajas. Así
[...] Los profesores de programas con un alto concepto dedican más tiempo a
la producción científica, asegurando así el mantenimiento de estos conceptos
y el financiamiento por parte de los organismos que consideran el concepto
fundamental al momento de la distribución de fondos. Sin embargo, gradúan
menos estudiantes, tardan más en graduarlos y pierden más estudiantes debido
a la deserción o el despido. Sin embargo, los profesores de programas con bajo
concepto buscan desesperadamente que todos sus alumnos se gradúen lo antes
posible, para que sus programas no pierdan las becas de la CAPES; Lo
consiguen, pero publican menos, sus programas mantienen conceptos bajos y,
en consecuencia, se vuelven menos competitivos a la hora de competir por la
financiación de otras agencias (HORTA; MORAES, 2005, p. 101, nuestra
traducción).
Corroborando esta idea que se expresa a través de la competitividad o de la metáfora
de la Olimpiada Renato Janine Ribeiro, ex director de evaluación de la CAPES y ex ministro
de Educación, aclara que:
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 6
Los estudios de posgrado y su evaluación por parte de la CAPES siempre han
sido entendidos desde una perspectiva competitiva y no cooperativa. Hay una
metáfora que algunos utilizan, la de los Juegos Olímpicos, en la que con cada
edición se exige más a los competidores: el listón, en la prueba de salto,
siempre está subiendo. Al igual que ocurre con la producción científica, es
natural que las exigencias crezcan constantemente, y que un curso que estaría
bien situado en su grado ya sea 3 o 7, si no se cuida de actualizarse, de
aumentar su calidad, de producir más, corre el riesgo de perder el concepto en
uno o dos trienios. Además, como la evaluación es necesariamente
comparativa, el momento de la Trienal provoca un cierto nerviosismo, en el
que las áreas y dentro de ellas los programas se comparan y se enfrentan.
Por lo tanto, el elemento competitivo existe y forma parte del sistema, que
busca generar una clasificación jerárquica que tenga varios efectos positivos:
1) estimula un mejor desempeño, a través de una evaluación externa; 2) otorga
mayor autonomía en la gestión y obtención de recursos a los programas que
están teniendo un mejor desempeño en su desempeño; 3) orienta a los
candidatos a buscar los mejores cursos (RIBEIRO, 2012, p. 88, nuestra
traducción).
De ahí la necesidad, debido a que el campo científico (BOURDIEU, 2004) también es
un espacio de disputa, de problematizar las formas de evaluación en una perspectiva comparada
(CATANI; AZEVEDO, 2013), se convierte en una tarea imperativa. Mientras tanto, es
importante hacer una salvedad: no se trata de dar a conocer los problemas internos de un
Programa de Posgrado (PPG), sino de incentivar a los Programas que se encuentran en una
situación similar al Programa aquí analizado, a mirar las formas de evaluación de los Programas
que se encuentran en estratos superiores y, si lo desean, a tomar, respetando sus debidas
especificidades, como brújula para tus prácticas diarias. De lo contrario, el propio movimiento
de las disputas internas de este campo científico (BOURDIEU, 2004) se encargará de poner en
los márgenes a quienes no son conscientes de cómo se mueven y hacia dónde van quienes
detentan el capital científico (Programas de y 7º grado) y de las reglas del juego. Además,
no tendría sentido criticar el hecho de que estemos dando a conocer los problemas internos de
un PPG porque
Desde hace varios años, los formularios de evaluación que resumen la
evaluación de un programa por parte de la CAPES y concluyen asignándole
un concepto (o calificación) están disponibles en Internet, cada uno en la
entrada del curso respectivo. Hemos introducido algunas innovaciones. La
primera es la fuerte recomendación de que sean muy claros y didácticos. Un
curso, especialmente cuando puede mejorar (y siempre puede), tiene todas las
de ganar si recibe consejos y comentarios claros. Los cursos confiarán más en
los resultados de la evaluación si ven que las fichas son muy objetivas y
directas. Y los estudiantes, que son los principales beneficiarios de la
evaluación, podrán elegir mejor el curso en el que quieren matricularse -o
cobrar, del curso en el que se encuentran, las mejoras necesarias-. El segundo
cambio importante fue la inclusión, en la página de cada nuevo curso, del
respectivo formulario de recomendación. El "formulario de evaluación" se
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 7
completa en la Evaluación Trienal y examina un curso en funcionamiento. Por
otro lado, el "formulario de recomendación" expresa la aprobación, o no, de
una propuesta de nuevo curso (RIBEIRO, 2012, p. 09, grifos del autor, nuestra
traducción).
Se comprobó, por lo tanto, que la realidad ilustrada anteriormente lleva a entender que
el actual modelo de evaluación ha dirigido a los Programas de Posgrado a un verdadero campo
de disputa y conflictos por espacios y capital científico que cada vez es más necesario
investigar.
Una investigación, como la que aquí se propone, justifica su ejecución ante la falta de
estudios de esta naturaleza tanto en el ámbito del PPGE como de otros Programas en el área de
Educación. Se trata, por tanto, de un camino que aún debe ser explorado, dado su potencial para
reflexionar sobre los desafíos impuestos por el área, las potencialidades del PPGE/UNIOESTE,
así como los aspectos que requieren especial atención con miras a la adopción de políticas de
mejora (CASTANHA; GRÁCIO, 2012). Los datos aquí presentados permitirán tanto al
PPGE/UNIOESTE como a otros Programas de Posgrado, a partir de su idiosincrasia, evaluar
sus respectivas prácticas cotidianas, además de reflexionar sobre acciones futuras. A esto se
suma el hecho de que esta investigación tiene el potencial de permitir a los interesados en el
tema la oportunidad de conocer los entresijos de la evaluación, más allá de su propio PPGE. En
síntesis, ofrecer una mejor comprensión de las metodologías adoptadas por las evaluaciones de
la CAPES (RIBEIRO, 2012) y, consecuentemente, el impacto positivo que esto puede generar
en los Programas justifica la ejecución de esta investigación.
Por lo tanto, es sobre este escenario que se construye la investigación, ya que
consideramos que la sistematización de esos datos, seguida de un análisis reflexivo, trae
contribuciones para los interesados en comprender cómo se desarrolla el proceso de evaluación
de programas en el área de educación por parte de la CAPES.
Metodología
Con el objetivo de comprender los indicadores utilizados por la CAPES en la evaluación
del PPGE/UNIOESTE, esta investigación triangula el Análisis de Contenido y el estudio de
caso descriptivo (YIN, 2001; GOODE; HATT, 1979). Se trata, por tanto, de una investigación
que combina el uso de varias metodologías. Al respecto, según Mirian Goldenberg (2002, p.
63, nuestra traducción), "la combinación de diferentes metodologías en el estudio de un mismo
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 8
fenómeno, conocida como triangulación, pretende abarcar la máxima amplitud en la
descripción, explicación y comprensión del objeto de estudio".
Martin Bauer (2002, p. 192, nuestra traducción), al discutir las potencialidades de la
metodología de Análisis de Contenido, afirma que:
[...] A través de la reconstrucción de las representaciones, los analistas de
contenido infieren las expresiones de los contextos y la apelación a través de
esos contextos. Si nos centramos en la fuente, el texto es un medio de
expresión. La fuente y la audiencia son el contexto y el foco de la inferencia.
Un corpus de texto es la representación y expresión de una comunidad de
escritores. [...] El AC nos permite reconstruir indicadores y visiones del
mundo, valores, actitudes, opiniones, prejuicios y estereotipos y compararlos
entre comunidades. En otras palabras, la AC es la encuesta de la opinión
pública con otros medios.
El estudio de caso, tal como lo definen Goode y Hatt (1979, p. 421-422, nuestra
traducción), no es una técnica de investigación específica. Más bien, es "un medio para
organizar los datos sociales preservando al mismo tiempo el carácter unitario del objeto social
estudiado". Por lo tanto, el estudio de caso en este artículo se configura como una estrategia de
investigación que tiene como objetivo traer a colación elementos del proceso de evaluación de
un determinado Programa de Posgrado, pero que, seguramente, podemos decir que también se
aplican a otros.
Según Yin (2001, p. 39, nuestra traducción), "el estudio de caso es una investigación
empírica que investiga un fenómeno contemporáneo en profundidad y en su contexto de la vida
real".
Por lo tanto, a través del estudio de caso, recopilamos datos sobre un PPG con el fin de
reflexionar sobre temas más amplios.
En este sentido, el estudio de caso, al igual que el experimento, no representa
un muestreo, y el objetivo del investigador es ampliar y generalizar teorías
(generalización analítica) y no enumerar frecuencias (generalización
estadística). O, como describen tres prominentes científicos sociales en su
estudio de caso único, el objetivo es hacer un análisis generalizador en lugar
de particularizante (YIN, 2001, p. 29, nuestra traducción).
En este sentido, la perspectiva del estudio de caso se torna útil, ya que nos permite
ampliar la "lente del microscopio" para observar el desempeño del PPGE frente a las
evaluaciones de la CAPES, a la vez que nos permite relacionarnos con situaciones similares
vividas por otros Programas de Posgrado en Brasil.
En síntesis, la investigación se desarrolló en dos etapas: en un primer momento, se
recolectaron los formularios de evaluación del PPGE, elaborados por consultores designados
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 9
por el área de educación. Los formularios de evaluación de 2010, que abarcan el período de tres
años comprendido entre 2007 y 2009; el formulario de evaluación de 2013, que abarca el
período de tres años de 2010 a 2012 y; el formulario de evaluación de 2017, que abarca el
cuatrienio comprendido entre 2013 y 2016. Este documento registra "el peso de cada ítem,
además de la descripción de cómo se realizó la evaluación, presentando en detalle lo analizado
(CAPES, 2017, p. 03, nuestra traducción).
En segundo lugar, se llevó a cabo el Análisis de Contenido (BAUER, 2002) de estos
archivos, junto con el Documento de Área y la bibliografía relacionada.
[...] Conocer el documento del área (cada área tiene su propio documento y
directrices) es una tarea primera y fundamental para quienes pretenden
proponer un nuevo curso de maestría y/o doctorado, e imprescindible para los
profesores que pretenden trabajar y permanecer acreditados, con el fin de
calificar su PPG. Conocer las demandas, requerimientos, diferencias y
expectativas de los evaluadores se vuelve vital (RÔÇAS; ANJOS; PEREIRA,
2017, p. 48, nuestra traducción).
Con esta información, los datos fueron cruzados para, en una perspectiva comparada,
analizar las diversas variantes que se presentan en dichos documentos, con el fin de presentar
las tendencias en el área, los desafíos y los aspectos a ser superados por el PPGE.
Cabe mencionar que el ítem de Propuesta de Programa es el primer ítem del Formulario
de Evaluación y se divide en cuatro temas, como veremos a continuación. En el primer tema,
titulado "Coherencia, consistencia, integralidad y actualización de áreas de concentración,
líneas de investigación, proyectos en curso y propuesta curricular" cualitativamente, entre otros
elementos, los evaluadores evalúan si existe coherencia entre las líneas de investigacn, área
de concentración del programa y proyectos desarrollados; si los programas y bibliografías de
las disciplinas están actualizados; si el programa incentiva a su profesorado a superarse a través
de estudios postdoctorales, pasantías de investigación, etc.; si existe un estímulo por parte del
programa para que sus estudiantes participen en eventos, seminarios, entre otros. Cabe
mencionar que este ítem corresponde al 50% (cincuenta por ciento) del peso de la evaluación
de este ítem (CAPES, 2017e).
Representando el 30% (treinta por ciento) del peso de la evaluación se encuentra el ítem
"Planificación del Programa con miras a su desarrollo futuro, contemplando los desafíos
internacionales del Área en la producción de conocimiento, sus propósitos de
perfeccionamiento en la formación, meta en cuanto a la inserción social y académica de sus
egresados". En este ítem se verifica en qué medida el Programa evidencia su compromiso con
las necesidades locales, nacionales e internacionales; cuáles son las estrategias enumeradas para
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 10
enfrentar los desafíos futuros; si en la bibliografía de los cursos hay literatura extranjera,
participación de profesores extranjeros, así como la oferta de disciplina en otro idioma; si existe
una política de acreditación y reacreditación de docentes; si se incentiva a los profesores a
continuar su formación, ya sea en forma de participación en eventos, posdoctorados, pasantías
de investigación en el extranjero, y si existe una política de seguimiento de los graduados
(CAPES, 2017e).
En el ítem "Infraestructura para la docencia, la investigación y la administración
universitaria" que, a su vez, ocupa el 10% (diez por ciento) de la evaluación donde se analizan
dos ítems: a) si existe infraestructura adecuada (aulas, biblioteca, laboratorios, etc.) para la
docencia y la investigación; b) infraestructura para la administración del Programa (CAPES,
2017e).
Finalmente, también correspondiendo al 10% del peso de la evaluación, el ítem
"Definición clara de la propuesta del Programa como Académica, orientada al desarrollo de la
investigación y formación de investigadores y profesores para la educación superior". Este tema
sirve para verificar tres aspectos: a) si el Programa es adecuado a lo que se espera de un
Programa Académico; b) si existen grupos de investigación que apoyen el Programa y; c) si
existen acuerdos y asociaciones con otras instituciones (nacionales e internacionales)
destinadas a realizar investigaciones e intercambios (CAPES, 2017e).
Teniendo en cuenta que estos cuatro ítems son evaluados con instrumentos cualitativos,
reciben los siguientes conceptos posibles: Muy bueno; Bien; regular, débil o insuficiente.
Propuesta PPGE/UNIOESTE y evaluaciones de la CAPES
El Programa de Posgrado en Educación de Unioeste fue creado en 2006. Sin embargo,
las actividades comenzaron en 2007. Su área de concentración fue Sociedad, Estado y
Educación hasta principios de 2019 cuando se cambió a Educación.
En un principio, el Programa tenía una sola línea de investigación: Educación, Políticas
Sociales y Estado. Luego, después de la primera evaluación trienal (2010), se crearon 02 (dos)
líneas más: Historia de la Educación; Formación del profesorado y procesos de enseñanza y
aprendizaje. Finalmente, en 2013, se creó la línea de investigación en Didáctica de las Ciencias
y las Matemáticas.
Así, ahora cuenta con 04 (cuatro) líneas de investigación, a saber: a) Educación,
Políticas Sociales y Estado; b) Historia de la Educación; c) Formación del profesorado y
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 11
Procesos de enseñanza y aprendizaje y d) Enseñanza de las Ciencias y las Matemáticas.
Posteriormente, se redujo a 3 (tres) neas debido a la extinción de la nea de Enseñanza de
Ciencias y Matemáticas.
Los integrantes de la extinta línea, desde hacía algún tiempo, venían trabajando en la
consolidación de un nuevo Programa de Posgrado en Educación, pero con una identidad
centrada en la enseñanza de las Ciencias y las Matemáticas. El resultado de este esfuerzo fue la
aprobación, concomitantemente, en 2017, de los títulos de maestría y doctorado en Educación
en Ciencias y Educación Matemática. Vale la pena señalar que era algo raro para una primera
presentación de un nuevo curso. Porque el proceso contumaz consiste en obtener la aprobación
para el funcionamiento de la maestría para, después de su debida consolidación, solicitar la
autorización del doctorado.
Con la aprobación de la Maestría y Doctorado en Educación en Ciencias y Educación
Matemática, la mayoría de los profesores que formaban parte de la línea de investigación en
Enseñanza de las Ciencias y las Matemáticas del PPGE/UNIOESTE, como profesores
permanentes, por ser profesores permanentes en el otro curso, optaron por permanecer como
profesores colaboradores en el PPGE/UNIOESTE. hasta que se concluyeron las orientaciones
en curso, que condujeron, evidentemente, a la extinción de la línea de investigación Didáctica
de las Ciencias y las Matemáticas.
Como dijimos anteriormente, la Propuesta de Programa es el único ítem del formulario
de evaluación de la CAPES al que no se le da peso, a pesar de estar sujeto a evaluación. De
acuerdo con el formulario de evaluación (CAPES, 2010), este ítem está compuesto por tres
aspectos evaluativos, en los que se destacan: a) la coherencia y actualización de las áreas de
concentración, líneas de investigación, proyectos de investigación y la propuesta curricular; b)
planificación futura, acciones de internacionalización y seguimiento de los egresados; c)
Infraestructura para el desarrollo de la docencia, la investigación y la extensión.
En el caso del PPGE/UNIOESTE, en su primera evaluación (CAPES, 2010), algunos
ítems fueron vistos como positivos por los evaluadores, entre ellos: la estructura curricular; los
temas de las disertaciones; actualización de bibliografías y consonancia con el profesorado; la
existencia de proyectos para afrontar los retos futuros; la existencia de una política de
acreditación y reacreditación de docentes; el apoyo de la institución a la formación docente
(posdoctorado y participación en eventos); y la infraestructura adecuada.
Sin embargo, en la época, se observó (CAPES, 2010) que los siguientes aspectos
merecían la atención del Programa, con el fin de realizar esfuerzos para mejorarlo:
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 12
inconsistencia de algunos proyectos de investigación; falta de organicidad de las líneas de
investigación; disciplinas que se ofrecían que involucraban a todos los profesores y la necesidad
de inversión para ampliar el acervo bibliográfico.
En síntesis, esta fue la opinión de la primera evaluación (CAPES, 2010) sobre la
Propuesta PPGE. Veamos ahora cómo se llevó a cabo el desempeño en la segunda evaluación,
así como en qué se diferencia de la primera.
En gran medida, en la segunda evaluación (CAPES, 2013), la mayoría de los aspectos
positivos identificados en la primera evaluación (2010) se mantuvieron y, por lo tanto, no hubo
cambios sustanciales. Sin embargo, los evaluadores reconocieron que en esa época (2010 a
2012), ya era posible observar una organicidad entre las líneas de investigación y los proyectos
de investigación. Algo que, en la evaluación del primer trienio (2007 a 2009), había sido objeto
de una renovada atención. Los temas de las disertaciones y la aproximación del programa a la
educación básica también fueron elogiados por los evaluadores.
Sin embargo, el hecho de que, en la Propuesta de Programa, no se evidenciaran
proyectos vinculados a la recién creada línea de investigación "Enseñanza de las Ciencias y las
Matemáticas" fue algo que pesó desfavorablemente. En este contexto, la falta de información
sobre una política de seguimiento de los egresados fue agregada como un ítem que merecía
atención por parte del Programa.
En la evaluación de 2017, los consultores destacaron que las líneas de investigación y
los proyectos en curso eran integrales. Por otro lado, enfatizaron: "sin embargo, no son
coherentes y articulados, dada la diversidad de objetivos, enfoques y temáticas de los proyectos.
Así, la relación entre los proyectos y las líneas de investigación en las que se insertan es poco
consistente" (CAPES, 2017a, p. 4, nuestra traducción).
Fue en esta evaluación que apareció un nuevo elemento, que hasta entonces no había
sido objeto de atención del Programa, por el contrario, en 2010, incluso había sido objeto de
elogios, a saber: bibliografías de las disciplinas. Si en 2010 al respecto se afirmaba que la
bibliografía, en ese momento, era actual y acorde con el profesorado, en 2017 se destacaba que
tanto las bibliografías de las asignaturas obligatorias como optativas, "si bien contienen clásicos
y están en consonancia con las perspectivas teórico-metodológicas de los profesores, no aportan
el aporte de los nuevos debates en el área, es decir, no están actualizados" (CAPES, 2017, p.
4, nuestra traducción).
En cuanto a la adherencia de los proyectos de investigación con las líneas de
investigación, los evaluadores advirtieron de la falta de coherencia y articulación entre ellos.
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 13
En este sentido, se asume que la crítica es a los proyectos de los profesores, considerando que,
mientras se realiza esta crítica, el dictamen enfatiza que los temas de las disertaciones, a su vez,
fueron adecuados a las líneas de investigación. En este contexto, según los evaluadores, es la
diversidad de objetivos, enfoques y temáticas de los proyectos lo que los hace inconsistentes y
articulados (CAPES, 2017a).
Estrategias para enfrentar los desafíos señalados por la CAPES
En un intento por traer algunas alternativas para enfrentar los desafíos impuestos por la
evaluación de la CAPES, esta investigación verificó cómo algunos Programas ya consolidados
se articulan en aquellos puntos que para el PPGE aún constituyen un desafío.
En cuanto a la articulación entre líneas de investigación, proyectos de investigación y
grupos de investigación, se percibe que el PPGE se encuentra en la dirección opuesta a los
Programas de excelencia internacional. Mientras que en la Unioeste hay un número
considerable de grupos de investigación, en el Programa de Posgrado en Educación de la
Universidad de Vale do Rio dos Sinos (UNISINOS), por ejemplo (concepto 7), hay líneas de
investigación que se estructuran solo a partir de (02) dos grupos de investigación. Se puede ver,
por lo tanto, que la CAPES no ha visto el mero aumento del grupo de investigación como algo
positivo. Pero, antes de eso, ha valorado grupos de investigación que tengan: a) redes de
investigación con otras instituciones, preferentemente extranjeras; b) que tanto los estudiantes
como los egresados participen en las actividades del grupo; c) que esté estructurada
interinstitucionalmente (CAPES, 2017b).
Fue en este contexto que los evaluadores (CAPES, 2017b) elogiaron la propuesta del
PPGE de UNISINOS, que tiene la interinstitucionalidad como principal característica del
Grupo de Investigación Interinstitucional en Enseñanza, Pedagogías y Diferencias, por ejemplo.
Este grupo, formado en 2015, tiene como instituciones asociadas: Universidad Federal de Rio
Grande do Sul, Universidad de Santa Cruz do Sul, Universidad Federal de Pampa, Universidad
Federal de Pelotas, Universidad Nacional de La Patagonia Austral y Universidad del Porto.
En la Universidad Federal de Paraná, la red de cooperación también fue reconocida en
la evaluación.
Cabe destacar el Proyecto "Estudios sobre Interculturalidad en la
Universidad" aprobado y financiado por el Aviso Público 01/2014 CAPES y
SECADI/MEC, que involucra la cooperación en investigación y movilidad
académica de doctorandos de las siguientes universidades: UFPR (programas
de posgrado en Educación, Sociología y Psicología); UEM (Maestría en
Sociología); Universidad de Tiradentes; Texas University at Austin (EUA);
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 14
Universitat Autónoma Metropolitana (México); Universidad de Yaundé I
(Camarúes). También se destaca el PROGRAMA DE FORTALECIMIENTO
CAPES/MERCOSUR UFPR/UTALCA (Chile), que
Establece una relación de colaboración de 6 años con programas de posgrado
de países del Cono Sur en el desarrollo de investigaciones e intercambio de
experiencias entre profesores y estudiantes (CAPES, 2017c, p. 7, nuestra
traducción).
En la Universidad Federal de Santa Catarina, una experiencia similar fue reconocida
en la evaluación.
La Propuesta de Programa se presenta de forma adecuada a los fines de un
programa académico, evidenciando la existencia de grupos de investigación e
iniciativas de asociación para la realización de convenios, investigación e
integración de profesores e investigadores de diferentes instituciones, como,
por ejemplo, el "Proyecto Interinstitucional con la Universidad Federal de
Minas Gerais, en el proyecto: Moderno, Modernidad y Modernización: la
educación en los proyectos de Brasil siglos XIX y X", el proyecto
"Desarrollo humano y aprendizaje en los primeros años de escolaridad en los
países de América Latina Brasil, Cuba y México" y el proyecto "Enseñanza
de la Historia: El estudio de las prácticas docentes a partir de documentos
judiciales, periódicos impresos y narraciones orales", con la participación de
varias universidades brasileñas y extranjeras (CAPES, 2017d, p. 2, nuestra
traducción).
Por lo tanto, la idea de grupos de investigación "encerrados en mismos", y con
acciones limitadas al ámbito de la propia institución de origen, es algo que, en la actualidad,
hay que superar. No basta con incluir a los estudiantes de pregrado y posgrado en las actividades
de los grupos. Tenemos que ir más allá. En este momento, el desafío es trabajar con la
investigación en red, articulándose a través de acciones interinstitucionales.
En este sentido, ante los elogios de los evaluadores de la CAPES, vale la pena leer los
formularios de evaluación del PPGE de la UNISINOS (CAPES, 2017b) y de la Universidad
Federal de Paraná (UFPR) (CAPES, 2017c), en vista de la forma en que se organizan las líneas
de investigación, proyectos de investigación, etc.
En el caso del PPGE/UNIOESTE, en lo que se refiere al desafío de bibliografías que se
consideraban obsoletas, por no aportar de los nuevos debates en el área, una alternativa sería
pensar en acciones colegiadas en el sentido de sugerir que cada profesor propusiera un programa
de estudios que contuviera una bibliografía que cumpliera con algunos criterios, tales como:
clásicos del área, autores con producciones actualizadas en los últimos años, dossiers de
revistas especializadas y que esta literatura transitó tanto en portugués como en lenguas
extranjeras. De esta forma, la actualización señalada por la CAPES estaría presente.
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 15
A pesar de que el sistema de acreditación y reacreditación de profesores no ha sido un
problema para el PPGE/UNIOESTE, conocer la experiencia de la CPA (Comisión
Permanente de Evaluación) del PPGE de la UFPR es saludable, considerando que, según los
revisores, en relación con el PPGE/UFPR:
La Propuesta presentaba una política de acreditación y reacreditación de
docentes, con un comité permanente de evaluación (CPA) que monitorea
anualmente la producción de docentes y estudiantes, con criterios bien
definidos para nuevas acreditaciones, eventuales descalificaciones y el
ofrecimiento de vacantes en procesos de selección. El trabajo regular de la
CPA ha garantizado un funcionamiento sereno y maduro de los procesos de
acreditación y desacreditación de docentes. Sobre la base de la labor de la
CPA, también se fomenta la destitución de profesores para realizar pasantías
y posdoctorados en otras instituciones. En el cuatrienio, el PPGE amplió su
inserción internacional en 2016, cerca del 30% del personal permanente
participó en actividades en colaboración con instituciones de otros países
avanzando en el contacto con grupos y centros de investigación de otros
países, lo que ha contribuido a la calidad de las disciplinas ofrecidas y a las
investigaciones desarrolladas (CAPES, 2017c, p. 2, nuestra traducción).
El seguimiento de los egresados es un reto que afecta a la mayoría de los Programas del
país. Sin embargo, una acción inicial podría ser monitorear, sistematizar e incentivar la
producción bibliográfica no solo de los estudiantes, sino también de los egresados, así como
monitorear su inserción profesional con el fin de verificar el impacto de la formación stricto
sensu en la carrera profesional, además de promover eventos periódicos de egresados con los
estudiantes matriculados con el fin de permitir un intercambio efectivo de experiencias.
Constantemente se pregunta a los programas sobre las estrategias adoptadas para
enfrentar los desafíos futuros. En este sentido, dos acciones importantes provienen de la
Universidad Federal de Santa Catarina (CAPES, 2017d), a saber: la contratación de un profesor
visitante para trabajar en el Programa; Financiación para la traducción y revisión de artículos
para su publicación en revistas en lengua extranjera.
Consideraciones finales
Nos centramos en los comentarios positivos y negativos, así como en las respectivas
sugerencias realizadas por los evaluadores. Con esta información, fue posible cruzar los datos
para, en una perspectiva comparada, analizar las diversas variantes que se presentan en dichos
documentos, con el fin de presentar las tendencias, desafíos y aspectos a ser superados por el
PPGE/UNIOESTE.
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 16
Este trabajo, además de los análisis realizados de carácter puntual y específico con el
PPGE de UNIOESTE, permitió afirmar que los estudios de posgrado en Brasil, a pesar de contar
con programas de renombre que están a la vanguardia de la investigación de vanguardia en
diferentes áreas del conocimiento, aún presentan dificultades y carencias en programas que
busquen adaptarse a los estándares normativos establecidos por la CAPES.
Prueba de ello es la volatilidad de sus preceptos normativos/evaluativos para los
programas y sus capacidades de adecuación. Un ejemplo de esto es que: si hasta hace poco el
incentivo era que los programas ampliaran, en la medida de lo posible, sus interrelaciones con
otros programas de sus propias instituciones, involucrando a estudiantes de pregrado y posgrado
en actividades grupales, hoy en día, esta práctica se evalúa como si estos programas que lo
hacen estuvieran "encerrados en mismos", Por lo tanto, necesitarán ampliar su red de diálogo
con otras instituciones y, para lograr una mayor apreciación, la internacionalización es el
objetivo a alcanzar.
Evidentemente, esto es algo positivo para ser pensado, articulado y trabajado por los
programas que apuntan a su mejora, sin embargo, las instituciones geográficamente periféricas,
es decir, aquellas que están más alejadas de los grandes centros, y con escasos recursos -cabe
destacar que se entiende que los escasos recursos aquí mencionados no son solo dificultades de
estas instituciones periféricas- tienden a encontrar mayores dificultades para adaptarse
efectivamente a esta demanda.
Lo positivo de este trabajo es que este abordaje de investigación, la investigación
comparativa, brindó la oportunidad de conocer programas que ya tienen experiencia en relación
a los marcadores evaluativos que la CAPES ha valorado y utilizado, lo que puede, y se espera
con este artículo, es que pueda ser considerado no solo por la coordinación, sino también por la
sino por todo el colegiado del PPGE/UNIOESTE, como lema de reflexión que involucra las
experiencias exitosas de otras instituciones, algunas de las cuales son puntuadas aquí, a la
adecuación de sus actividades, apuntando a mucho más que su puntaje por la CAPES, sino a
una mejora cualitativa del trabajo que ofrecen en el escenario de posgrado. Por supuesto, se
espera que estas reflexiones también puedan proporcionar a otras partes interesadas una mejor
comprensión de cómo se lleva a cabo el proceso de evaluación de programas en el área de
educación por parte de la CAPES.
Lo que también se espera al final de este trabajo es que, de hecho, la metáfora de la
Olimpiada, citada en el texto y comentada por uno de los ex directores de evaluación de la
CAPES, deje de ser la tónica de los programas de posgrado en nuestro país y, principalmente,
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 17
de su mecanismo de evaluación. Que avancemos, cada uno con sus propias potencialidades y
limitaciones, pero que avancemos de manera cooperativa, tanto en nuestros programas
institucionales como en la importante y necesaria interrelación con las demás instituciones que
producen conocimiento sistematizado.
REFERENCIAS
BAUER, M.; GASKELL, G. Pesquisa qualitativa com texto, imagem e som: um manual
prático. Petrópolis, RJ: Vozes, 2002.
BOURDIEU, P. Os usos sociais da ciência: por uma sociologia clínica do campo científico.
São Paulo: Edunesp, 2004.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2010.
Disponible en: http://trienal.capes.gov.br/wp-
content/uploads/2010/12/fichas/40015017008P1.pdf. Fecha de consulta: 25 feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2013.
Disponible en:
http://conteudoweb.capes.gov.br/conteudoweb/VisualizadorServlet?nome=40015017/038/201
3_038_40015017008P1_Ficha.pdf&application=evaluación
trienal&stageid=2&year=2013&type
=divulga. Fecha de consulta: 25 feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Documento de
Área: Educação. 2017. Disponible en: https://www.gov.br/capes/pt-br/centrais-de-
conteudo/Educao.pdf. Fecha de consulta: 25 feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2017a.
Disponible en:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/viewPreenchimentoFicha.jsf
?idFicha=4219&popup=true. Fecha de consulta: 25 feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade do Vale
do Rio dos Sinos. 2017b. Disponible en:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4369&idTipoAvaliacao=1&publico=true&popup=true. Fecha de consulta: 25 feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade Federal
do Paraná. 2017c. Disponible en:
La propuesta de un Programa de Posgrado en Educación y las evaluaciones de la CAPES: Un estudio de caso a patir de la Universidad
Estatal del Oeste de Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 18
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4143&idTipoAvaliacao=1&publico=true&popup=true. Fecha de consulta: 25 feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade Federal
de Santa Catarina. 2017d. Disponible en:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4493&idTipoAvaliacao=1&publico=true&popup=true. Fecha de consulta: 25 feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Relatório da
Avaliação Quadrienal - Educação. 2017e. Disponible en:
http://capes.gov.br/images/documentos/Relatorios_quadrienal_2017/20122017-
Educacao_relatorio-de-cuatrienal-evaluación-2017_final.pdf. Fecha de consulta: 25 feb. 2020.
CASTANHA, R. C. G.; GRÁCIO, M. C. C. Indicadores de avaliação de Programas de Pós-
Graduação: um estudo comparativo na área da Matemática. Em Questão, Porto Alegre, v. 18,
Edição Especial, p. 81-97, dez. 2012. Disponible en:
https://seer.ufrgs.br/EmQuestao/article/view/33192. Fecha de consulta: 25 feb. 2020.
CATANI, A. M.; AZEVEDO, M. L. N. Estudos de políticas de educação em uma perspectiva
comparada: uma antecipação crítica de Bourdieu e Passeron. Jornal de Políticas
Educacionais, n. 14, jul./dez. 2013. Disponible en:
https://revistas.ufpr.br/jpe/article/view/38224. Fecha de consulta: 25 feb. 2020.
GOLDENBERG, M. A arte de pesquisar: como fazer pesquisa qualitativa em Ciências
Sociais. Rio de Janeiro: Record, 2002.
GOODE, W.; HATT, P. Métodos em Pesquisa Social. São Paulo: Cia Editora Nacional,
1969.
HORTA, J. S. B.; MORAES, M. C. M. O sistema Capes de avaliação da Pós-Graduação: da
área de Educação à grande área de humanas. Revista Brasileira de Educação, n. 30, p. 95-
116, set./dez. 2005. Disponible en:
http://www.scielo.br/scielo.php?script=sci_arttext&pid=S1413-24782005000300008. Fecha
de consulta: 25 feb. 2020.
HORTA, J. S. B. Prefácio. In: BIANCHETTI, L.; MACHADO, A. M. N. A bússola do
escrever: desafios e estratégias na orientação de teses e dissertações. Florianópolis, SC:
EdUfsc, 2002.
RIBEIRO, R. J. Para que serve a avaliação da pós-graduação. A visão da CAPES. Revista
Argentina de Educación Superior (RAES), n. 4, p. 63-104, 2012. Disponible en:
http://www.untref.edu.ar/raes/documentos/raes_5_ribeiro.pdf. Fecha de consulta: 25 feb.
2020.
RÔÇAS, G.; ANJOS, M. B.; PEREIRA, M. V. Quanto vale ou é por quilo: o peso da
produção acadêmica na área de ensino. Ensino e Tecnologia em Revista, Londrina, v. 1, n. 1,
p. 46-66, 2017. Disponible en: https://periodicos.utfpr.edu.br/etr/article/view/5949/4414.
Fecha de consulta: 4 feb. 2020.
Fábio Lopes ALVES; Yuliia FELENCHAK y Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 19
SCARTEZINI, N. Introdução ao método de Pierre Bourdieu. Cadernos de Campo,
Araraquara, n. 14-15, p. 25-37, 2011. Disponible en:
https://periodicos.fclar.unesp.br/cadernos/article/view/5159. Fecha de consulta: 25 feb. 2020.
YIN, R. Estudo de caso: planejamento e métodos. Tradução: Daniel Grassi. Porto Alegre:
Bookman, 2001.
CRediT Author Statement
Reconocimientos: No aplicable.
Financiación: Fundación Araucaria.
Conflictos de intereses: No aplicable.
Aprobación ética: No aplicable.
Disponibilidad de datos y material: No aplicable.
Contribuciones de los autores: Fábio Lopes Alves Desarrollo de la investigación y
elaboración de la primera versión. Yuliia Felenchak y Andrii Holod: análisis en
profundidad.
Procesamiento y edición: Editora Iberoamericana de Educación - EIAE.
Corrección, formateo, normalización y traducción.
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 1
THE PROPOSAL FOR A GRADUATE PROGRAM IN EDUCATION AND CAPES'
EVALUATIONS: A CASE STUDY FROM THE STATE UNIVERSITY OF WEST
PARANÁ
A PROPOSTA DE UM PROGRAMA DE PÓS-GRADUAÇÃO EM EDUCAÇÃO E AS
AVALIAÇÕES DA CAPES: UM ESTUDO DE CASO A PARTIR DA UNIVERSIDADE
ESTADUAL DO OESTE DO PARANÁ
LA PROPUESTA DE UN PROGRAMA DE POSGRADO EN EDUCACIÓN Y LAS
EVALUACIONES DE LA CAPES: UN ESTUDIO DE CASO A PARTIR DE LA
UNIVERSIDAD ESTATAL DEL OESTE DE PARANÁ
Fábio Lopes ALVES1
e-mail: fabiobidu@hotmail.com
Yuliia FELENCHAK2
e-mail: yufelenchak@yahoo.com
Andrii HOLOD3
e-mail: aholod2012@gmail.com
How to reference this article:
ALVES, F. L.; FELENCHAK, Y.; HOLOD, A. The proposal for a
Graduate Program in Education and CAPES' evaluations: A case
study from the State University of West Paraná. Revista Ibero-
Americana de Estudos em Educação, Araraquara, v. 18, n. 00,
e023134, 2023. e-ISSN: 1982-5587. DOI:
https://doi.org/10.21723/riaee.v18i00.17773
| Submitted: 24/02/2023
| Revisions required: 08/03/2023
| Approved: 18/04/2023
| Published: 14/12/2023
Editor:
Prof. Dr. José Luís Bizelli
Deputy Executive Editor:
Prof. Dr. José Anderson Santos Cruz
1
State University of Western Paraná (UNIOESTE), Cascavel PR Brazil. Professor of the Postgraduate Program
in Society, Culture and Borders. Post-doctorate in Education (UNIFESP).
2
Lviv State University of Physical Culture (LSUPC), Lviv Ukraine. Foreign visiting professor at the
Postgraduate Program in Society, Culture and Borders at the State University of Western Paraná. PhD in
Demography, labor economics, social and political economy (UNDL, Ukraine).
3
Lviv State University of Physical Culture (LSUPC), Lviv Ukraine. Foreign visiting professor at the
Postgraduate Program in Society, Culture and Borders at the State University of Western Paraná. PhD in
Development of productive forces and regional economy (UTEC, Ukraine).
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 2
ABSTRACT: This article aims to analyze the way in which CAPES (Coordination for the
Improvement of Higher Education Personnel) has evaluated the proposal for a Graduate
Program in Education. The main objectives of this text are: to problematize the performance of
PPGE / UNIOESTE described in the Final Opinions of the Area Commission; to analyze,
through the recommendations of the evaluators, what are the improvements that the consultants
have indicated; to present, from examples in a comparative perspective, suggestions, guidelines
and strategies that are being adopted by consolidated Programs and that, respecting the
idiosyncrasies, may eventually be adopted both by PPGE / UNIOESTE and by other Graduate
Programs in a similar situation. The research results problematize the positive and negative
comments and suggestions made by the evaluators as well as part of the trends and challenges
imposed on the Graduate Programs in Education in Brazil.
KEYWORDS: Evaluation. Graduate programs. CAPES.
RESUMO: Este artigo propõe analisar como a Coordenação de Aperfeiçoamento de Pessoal
de Nível Superior (CAPES) avalia um Programa de Pós-Graduação em Educação. Os objetivos
são: problematizar o desempenho do Programa de Pós-Graduação em Educação da
Universidade Estadual do Oeste do Paraná (PPGE/UNIOESTE) descritos nos Pareceres finais
da Comissão de Área; analisar, através das recomendações dos avaliadores, quais são as
melhorias indicadas pelos consultores; apresentar, em perspectiva comparada, sugestões,
diretrizes e estratégias que são adotadas por Programas consolidados e, que, eventualmente,
possam ser adotados tanto pelo PPGE/UNIOESTE, quanto por outros Programas de Pós-
Graduação em situação similar. Os resultados da pesquisa problematizam os comentários
positivos, negativos e as sugestões exaradas pelos avaliadores, bem como parte das tendências
e dos desafios impostos aos Programas de Pós-Graduação em Educação no Brasil.
PALAVRAS-CHAVE: Avaliação. Programas de pós-graduação. CAPES.
RESUMEN: Este artículo propone analizar la forma en que la CAPES (Coordinación de
Perfeccionamiento de Personal de Nivel Superior) ha evaluado la propuesta de un programa
de posgrado en educación. Los principales objetivos de este texto son: problematizar el
desempeño del PPGE/UNIOESTE descritos en los Dictámenes finales de la Comisión de Área;
analizar, por medio de las recomendaciones de los evaluadores, cuáles son las mejoras que los
consultores han indicado; presentar, a partir de ejemplos en perspectiva comparada
sugerencias, directrices y estrategias que están siendo adoptadas por Programas consolidados
y que eventualmente puedan ser adoptados tanto por el PPGE/UNIOESTE, como por otros
Programas de posgrado en situación similar. Los resultados de la investigación problematizan
los comentarios positivos, negativos y las sugerencias expresadas por los evaluadores, así
como parte de las tendencias y desafíos impuestos a los Programas de Posgrado en Educación
en Brasil.
PALABRAS CLAVE: Evaluación. Programas de posgrado. CAPES.
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 3
Introduction
This article proposes, based on the concept of Scientific Field (BOURDIEU, 2004;
SCARTEZINI, 2011), to analyze the way in which CAPES (Coordination for the Improvement
of Higher Education Personnel) has evaluated, over the years, the proposal from the
Postgraduate Program in Education at the State University of West Paraná, Campus Cascavel
(PPGE/UNIOESTE). The evaluation form/Final Opinion of the Area Commission (until 2017)
was composed of five items, namely: 1- Program Proposal; 2- Teaching staff; 3- Student body,
Theses and Dissertations; 4- Intellectual Production; and 5- Social Insertion. However, given
the spatial limitations that a text like this imposes on us, our focus falls exclusively on the
opinion of the Area Commission regarding the Program Proposal, which constitutes the first
item of the Opinion.
Although this item, Program Proposal, has not been assigned quantitative weight in the
calculation of the final concept received by the Program, it becomes an important indicator, as
it constitutes the only qualitative evaluation item and, in turn, becomes one of the fundamental
pillars of any Postgraduate program, as it becomes a benchmark for the way in which ad hoc
consultants see the proposal for the respective Postgraduate Program.
Therefore, this text has the following objectives: to problematize the performance of
PPGE/UNIOESTE described in the Final Opinions of the Area Commission; analyze, through
the evaluators' recommendations, what improvements the consultants have indicated; present,
based on examples in a comparative perspective (CATANI; AZEVEDO, 2013), suggestions,
guidelines, and strategies that are being adopted by consolidated Programs and by Programs
concepts 6 and 7, that is, considered by CAPES as a standard of international excellence and
which, respecting the idiosyncrasies, they can eventually be adopted both by PPGE/UNIOESTE
and by other Postgraduate Programs in a similar situation, aiming to overcome some
weaknesses presented by the evaluators in the Evaluation Form. The text is structured as
follows: firstly, the theoretical framework and justification that underlie the present discussion
are presented. Secondly, it contextualizes the methodology adopted. Subsequently, the history
of PPGE/UNIOESTE is problematized, as well as data analysis is carried out (CAPES, 2010;
2013; 2017; HORTA, 2002; HORTA; MORAES, 2005; CASTANHA; GRÁCIO, 2012;
RIBEIRO, 2012).
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 4
Theoretical Reference
When carrying out a comparative study between the evaluation indicators used by
CAPES for Postgraduate Programs in Mathematics, referring to the triennium 2007-2009,
Castanha and Grácio (2012), pointed to the lack of similar studies, in other areas of knowledge,
who were concerned with making a detailed assessment of the complex methodology adopted
in such assessments. In the final remarks of the text, the authors indicated the need for similar
studies to be developed in other areas of Brazilian Postgraduate Studies, thus providing new
perspectives on the evaluation system, more recent data and updated reflections on this topic
little explored in Brazil (CASTANHA; GRÁCIO, 2012, p. 95).
Even with this caveat, such a task seen as necessary to understand where and how the
performance assessments of Postgraduate Programs in Brazil (CASTANHA; GRÁCIO, 2012)
are progressing , in the area of Education, still needs to be implemented. This is, therefore, the
reason for the proposal of this text: to contribute to an area of research that has been little
explored.
In this sense, a key interpretation for studies such as the one proposed here is the notion
of Scientific Field:
The notion of field is there to designate this relatively autonomous space, this
microcosm endowed with its own laws. If, like the macrocosm, it is subject to
social laws, these are not the same. If it never escapes the impositions of the
macrocosm, it has, in relation to it, a more or less accentuated partial
autonomy. [...] In other words, it is necessary to escape the alternative of 'pure
science', totally free from any social need, and 'slave science', subject to all
political-economic demands. The scientific field is a social world and, as such,
makes impositions, requests, etc., which are, however, relatively independent
of the pressures of the global social world that surrounds it. In fact, external
pressures, whatever their nature, are only exerted through the field, they are
mediated by the logic of the field (BOURDIEU, 2004, p. 21, our
translation).
What Pierre Bourdieu shows us is how much the scientific field has become a space of
conflict and dispute, for authority and scientific capital. Hence Bourdieu's defense that science
is not neutral. Within the scope of universities and also Postgraduate Programs, it is the holders
of scientific capital who will define what is important for researchers, as well as what they
should focus their efforts on (BOURDIEU, 2004). “In other words, agents make scientific facts
and even the scientific field itself based on their position in this field, a position that determines
their possibilities and impossibilities” (SCARTEZINI, 2011, p. 34, our translation). Therefore,
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 5
to think about evaluation, it is also necessary to understand how social actors move within this
scientific field, as well as the rules of this game.
João Silvério Baia Horta then representative of the Education Area at CAPES (1999-
2001) , when reporting the processes that mark the Postgraduate evaluation, based on CAPES
data analysis, highlights, among others, three aspects to reveal that, in this process/game, there
is another side of the coin, namely: a) the programs that achieved higher concepts in the CAPES
evaluation are those that, in general, have had a result below average in the indicators linked to
guidance. That is, they graduate fewer students; b) these same programs have a higher average
time to degree than programs with lower concepts, in addition to a below-average number of
graduates, taking longer to graduate; c) contrary to what is believed, a high average time to
degree and a low number of students per teacher have very little impact on the concept of
programs with lower grades. However, they are fatal when distributing CAPES grants
(HORTA, 2002; HORTA; MORAES, 2005).
Now, the revelations above confirm that, in this game (BOURDIEU, 2004), the rules
although they are the same for everyone lead to final results with a clear disproportion of
criteria between Programs with high concepts and Programs with lower concepts. Like this,
[...] professors from high-concept programs dedicate more time to scientific
production, thus ensuring the maintenance of these concepts and funding from
bodies that consider the concept fundamental when distributing funds.
However, they graduate fewer students, take longer to graduate them and lose
more students through abandonment or dismissal. However, professors of
low- concept programs desperately seek for all their students to graduate as
quickly as possible, so that their programs do not lose CAPES scholarships;
they achieve this, but they publish less, their programs maintain low ratings
and, consequently, they become less competitive when competing for funding
from other agencies (HORTA; MORAES, 2005, p. 101, our translation).
Corroborating this idea which is expressed through competitiveness or the metaphor
of the Olympics , Renato Janine Ribeiro, former director of evaluation at CAPES and former
Minister of Education, clarifies that:
Postgraduate studies and their evaluation by CAPES have always been
understood from a more competitive rather than cooperative perspective.
There is a metaphor that some use, that of the Olympics, in which each edition
demands more from the competitors: the bar, in the jumping event, is always
rising. As the same applies to scientific production, it is natural that demands
constantly increase and that a course that would be well placed in its grade,
be it 3 or 7, if it is not careful to update itself, to increase its quality, to produce
Furthermore, it runs the risk of losing the concept in one or two three years.
Furthermore, as the evaluation is necessarily comparative, the timing of the
Triennale causes a certain nervousness, whereby the areas and within them
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 6
the programs compare and confront each other. Therefore, the competitive
element exists and is part of the system, which seeks to generate a hierarchical
classification that has several positive effects: 1) it stimulates better
performance, through external evaluation; 2) attributes greater autonomy in
management and obtaining resources to programs that are performing better;
3) guides candidates to look for the best courses (RIBEIRO, 2012, p. 88, our
translation).
Hence the need, due to the scientific field (BOURDIEU, 2004) also being a space for
dispute, problematizing assessment forms in a comparative perspective (CATANI; AZEVEDO,
2013), becomes an imperative task. In the meantime, a caveat is important: this is not about
publicizing internal problems of a Postgraduate Program (PPG), but, rather, encouraging
Programs that are in a similar situation to the Program analyzed here to look at the files
evaluation of Programs that are in higher strata and, if they wish, take them, respecting their
specific specificities, as a compass for their daily practices. Otherwise, the very movement of
internal disputes in this scientific field (BOURDIEU, 2004) will leave those who are not aware
of how those who hold scientific capital (Programs grades 6 and 7) and the rules of the game
are moving to the margins and which direction they are heading. Furthermore, it would make
no sense to criticize us for publicizing the internal problems of a PPG because,
For several years now, evaluation forms which summarize CAPES'
assessment of a program and conclude by assigning it a concept (or grade)
have been available on the Internet, each one at the entrance of the respective
course. We introduced some innovations. The first is the strong
recommendation that they be very clear and didactic. A course, especially
when it can improve (and it always can), has everything to gain from receiving
clear advice and comments. Courses will trust the assessment results more if
they see that the forms were very objective and straightforward. And students,
who are the main beneficiaries of the evaluation, will be able to better choose
the course in which they wish to enroll or demand the necessary
improvements from the course they are in. The second important change was
the inclusion, on the page of each new course, of the respective
recommendation form. The “evaluation form” is completed in the Triennial
Assessment and examines a course in operation. The “recommendation form”
expresses the approval, or not, of a new course proposal (RIBEIRO, 2012, p.
09, emphasis added, our translation).
It was verified, therefore, that the reality illustrated above, leads to the understanding
that the current evaluation model has led Postgraduate Programs to a true field of dispute and
conflicts for spaces and scientific capital that is increasingly necessary to investigate.
Research, such as the one proposed here, justifies its execution in view of the lack of
studies of this nature both within the scope of the PPGE and other Programs in the area of
Education. It is, therefore, a path that still needs to be explored, given its reflective potential on
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 7
the challenges posed by the area, the potential of PPGE/UNIOESTE, as well as the aspects that
require special attention with a view to adopting improvement policies (CASTANHA;
GRÁCIO, 2012). The data presented here will allow both PPGE/UNIOESTE and other
Postgraduate Programs, based on their idiosyncrasies, to evaluate their respective daily
practices, in addition to reflecting on future actions. Added to this is the fact that this research
has the potential to allow those interested in the topic an opportunity to learn about the
intricacies of assessment beyond their own PPGE. In summary, offering a better understanding
of the methodologies adopted by CAPES evaluations (RIBEIRO, 2012) and, consequently, the
positive impact that this can generate on the Programs justifies the execution of this research.
Therefore, it is on this scenario that the research is built, as we consider that the
systematization of these data, followed by a reflective analysis, brings contributions to those
interested in understanding how the process of evaluating programs in the area of education by
CAPES takes place.
Methodology
To understand the indicators used by CAPES in the evaluation of PPGE/UNIOESTE,
this research triangulates Content Analysis and descriptive case study (YIN, 2001; GOODE;
HATT, 1979). It is, therefore, research that combines the use of different methodologies. In this
regard, according to Mirian Goldenberg (2002, p. 63, our translation), “the combination of
different methodologies in the study of the same phenomenon, known as triangulation, aims to
cover the maximum breadth in the description, explanation and understanding of the object of
study”.
Martin Bauer (2002, p. 192, our translation), when discussing the potential of the
Content Analysis methodology, states that:
[...] through the reconstruction of representations, content analysts infer the
expressions of contexts, and the appeal through these contexts. If we focus on
the source, the text is a means of expression. Source and audience are the
context and focus of inference. A text corpus is the representation and
expression of a writing community. [...] CA allows us to reconstruct indicators
and worldviews, values, attitudes, opinions, prejudices and stereotypes and
compare them between communities. In other words, CA is public opinion
research with other means.
The case study, as defined by Goode and Hatt (1979, p. 421-422, our translation), is not
a specific research technique. But rather, a means of organizing social data while preserving
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 8
the unitary character of the social object studied”. Therefore, the case study in this article is
configured as a research strategy that aims to bring to the fore elements of the evaluation process
of a specific Postgraduate Program, but which, we can safely say, also apply to others.
According to Yin (2001, p. 39), “the case study is an empirical investigation that
investigates a contemporary phenomenon in depth and in its real-life context”.
Thus, through the case study, we gathered data about a PPG to, from there, reflect on
broader issues.
In this sense, the case study, like the experiment, does not represent a
sampling, and the researcher's objective is to expand and generalize theories
(analytical generalization) and not to enumerate frequencies (statistical
generalization). Or, as three notable social scientists describe in their single
case study, the objective is to make a generalizing and not a particularizing
analysis (YIN, 2001, p. 29, our translation).
In this sense, the case study perspective becomes useful as it allows us to broaden the
“microscope lens” to observe PPGE's performance in the face of CAPES evaluations, while it
also allows us to relate to similar situations experienced by other Programs of Postgraduate
Studies in Brazil.
In summary, the research was developed in two stages: firstly, the PPGE evaluation
forms were collected, prepared by consultants appointed by the education area. The 2010
evaluation forms, which cover the three-year period from 2007 to 2009; the 2013 evaluation
form, which covers the three-year period from 2010 to 2012 and; the 2017 evaluation form,
which covers the four-year period from 2013 to 2016. This document records “the weight of
each item in addition to the description of how the evaluation was carried out, presenting in
detail what was analyzed (CAPES, 2017, p. 03).
Secondly, a Content Analysis (BAUER, 2002) of such sheets was carried out, together
with the Area Document and related literature.
[...] knowing the area document (each area has its own document and
guidelines) is the first and fundamental task for those who intend to propose a
new master's and/or doctorate course, and essential for teachers who intend to
work and become remain accredited in order to qualify their PPG. Knowing
the demands, requirements, differences and expectations of evaluators
becomes vital (RÔÇAS; ANJOS; PEREIRA, 2017, p. 48, our translation).
With this information, the data was crossed to, in a comparative perspective, analyze
the different variants presented in such documents, in order to present the trends in the area, the
challenges and the aspects to be overcome by the PPGE.
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 9
It is worth mentioning that the Program Proposal item is the first item of the Evaluation
Form and is divided into four topics, as we will see below. In the first topic, entitled “Coherence,
consistency, scope, and updating of areas of concentration, lines of research, ongoing projects
and curricular proposal” qualitatively, among other elements, the evaluators assess whether
there is coherence between the lines of research, the area concentration of the program and the
projects developed; whether the course syllabuses and bibliographies are up to date; whether
the program encourages its faculty to improve through postdoctoral studies, research
internships, etc.; if there is encouragement from the program so that its students can participate
in events, seminars, among others. It is worth noting that this item corresponds to 50% (fifty
percent) of the weight of the evaluation of this item (CAPES, 2017e).
Representing 30% (thirty percent) of the weight of the evaluation, there is the item
“Program Planning with a view to its future development, considering the international
challenges of the Area in the production of knowledge, its purposes of improving training, goals
regarding the social and academic insertion of its graduates”. In this item, it is verified to what
extent the Program demonstrates its commitment to local, national and international needs;
what are the strategies listed to face future challenges; if the course bibliography contains
foreign literature, participation of foreign teachers, as well as subject offerings in another
language; whether there is a policy for accreditation and re-accreditation of teachers; whether
teachers are encouraged to continue training, be it in the form of participation in events,
undertaking a post-doctorate, research internship abroad and whether there is a policy for
monitoring graduates (CAPES, 2017e).
In the item “Infrastructure for teaching, research and university administration”, which,
in turn, occupies 10% (ten percent) of the evaluation, where two items are analyzed:
a) whether there is adequate infrastructure (classrooms, library, laboratories, etc.) for
teaching and research;
b) infrastructure for administering the Program (CAPES, 2017e).
Finally, also corresponding to 10% of the weight of the evaluation, the item “Clear
definition of the Program's proposal as Academic, aimed at the development of research and
training of researchers and teachers for higher education”. This topic serves to check three
aspects: a) whether the Program suits what is expected from an Academic Program; b) if there
are research groups that support the Program and; c) if there are agreements and partnerships
with other institutions (national and international), aiming to carry out research and exchanges
(CAPES, 2017e).
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 10
Considering that these four questions are evaluated with instruments of a qualitative
nature, they receive the following possible concepts: Very Good; Good; Regular, Weak or
Insufficient.
PPGE/UNIOESTE proposal and CAPES evaluations
The Postgraduate Program in Education at Unioeste was created in 2006. However,
activities effectively began in 2007. Its focus area was Society, State, and Education until the
beginning of 2019, when was changed to Education.
Initially, the Program had just one line of research: Education, Social Policies and the
State. Then, after the first three-year evaluation, (2010) 02 (two) more lines were created:
History of Education; Teacher Training and Teaching and Learning Processes. Finally, in 2013,
the line of research in Science and Mathematics Teaching was created.
In this way, it now has 04 (four) lines of research, namely: a) Education, Social Policies
and State; b) History of Education; c) Teacher Training and Teaching and Learning Processes;
and d) Teaching Science and Mathematics. Subsequently, it was reduced to 3 (three) lines due
to the extinction of the Science and Mathematics Teaching line.
The members of the extinct line, for some time now, had been working hard on
consolidating a new Postgraduate Program in Education, but with an identity focused on
teaching Science and Mathematics. The result of this effort was the simultaneous approval, in
2017, of the master's and doctorate in Science Education and Mathematics Education. It is worth
noting that this was something rare for the first submission of a new course, as the arduous
process is obtaining approval for the master's degree to operate and, after its due consolidation,
applying for authorization for a doctorate.
With the approval of the Master's and Doctorate in Science Education and Mathematics
Education, the majority of teachers who were part of the research line in Science and
Mathematics Teaching at PPGE/UNIOESTE, as permanent teachers, due to being permanent
teachers in the other course, they chose to remain as collaborating professors at
PPGE/UNIOESTE, until the ongoing guidance was completed, which evidently led to the
extinction of the Science and Mathematics Teaching line of research.
As we said above, the Program Proposal is the only item in the CAPES evaluation form
that is not given weight, although it is subject to evaluation. According to the evaluation form
(CAPES, 2010), this item is made up of three evaluation aspects, which stand out: a) the
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 11
coherence and updating of the areas of concentration, lines of research, research projects and
the curricular proposal; b) future planning, internationalization actions and monitoring of
graduates; c) infrastructure for the development of teaching, research and extension.
In the case of PPGE/UNIOESTE, in its first evaluation (CAPES, 2010), some items
were seen as positive by the evaluators, including: the curricular structure; the themes of the
dissertations; updating bibliographies and keeping in line with the teaching staff; the existence
of projects to face future challenges; the existence of a teacher accreditation and re-accreditation
policy; support from the institution for teaching qualifications (post-doctorate and participation
in events); and adequate infrastructure.
However, at the time it was noted (CAPES, 2010) that the following aspects deserved
attention from the Program, in order to make efforts to improve: inconsistency of some research
projects; lack of organicity in research lines; subjects that were offered that involved all teachers
and the need for investment aimed at expanding the bibliographic collection.
In short, this was the opinion of the first evaluation (CAPES, 2010) regarding the PPGE
Proposal. Let's now see how the performance in the second assessment was performed, as well
as how it differs from the first.
To a large extent, in the second evaluation (CAPES, 2013), most of the positive aspects
identified in the first evaluation (2010) were maintained, therefore, there were no substantial
changes. Although the evaluators recognized that, at that time (2010 to 2012), it was already
possible to observe an organicity between the lines of research and the research projects.
Something that, in the evaluation of the first three years (2007 to 2009), was the subject of
recommended attention. The themes of the dissertations and the program's approach to basic
education were also praised by the evaluators.
However, the fact that, in the Program Proposal, projects linked to the newly created
line of research “Science and Mathematics Teaching” were not highlighted was something that
weighed unfavorably. In this context, the lack of information about a policy for monitoring
graduates was added as an item that deserved attention from the Program.
In the 2017 evaluation, the consultants highlighted that the lines of research and ongoing
projects were comprehensive. On the other hand, they highlighted: “however, not very
consistent and articulated, given the diversity of objectives, approaches and themes of the
projects. Therefore, the relationship between projects and the lines of research in which they
are inserted is not very consistent” (CAPES, 2017a, p. 4, our translation).
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 12
It was in this evaluation that a new element appeared, which until then had not been the
subject of attention from the Program, quite the contrary, in 2010, it had even been the subject
of praise, namely: bibliographies of the disciplines. If in 2010, in this regard, it was noted that
the bibliography, at the time, was current and in line with the teaching staff, in 2017 it was
highlighted that both the bibliographies of mandatory subjects and optional subjects, “although
they contain classics and are in line with the theoretical-methodological perspectives of
teachers, do not contribute to new debates in the area, that is, they are not up to date” (CAPES,
2017, p. 4, our translation).
Regarding the adherence of research projects to the lines of research, the evaluators
warned about the lack of consistency and articulation between them. In this sense, it is assumed
that the criticism is of the professors' projects, considering that, while this criticism is carried
out, the opinion emphasizes that the themes of the dissertations, in turn, were appropriate to the
lines of research. In this context, according to the evaluators, it is the diversity of objectives,
approaches and themes of the projects that make them less consistent and articulated (CAPES,
2017a).
Strategies for facing the challenges highlighted by CAPES
In an attempt to bring some alternatives to face the challenges imposed by the CAPES
assessment, this research verified how some already consolidated Programs are articulated in
those points that for the PPGE still constitute a challenge.
Regarding the articulation between lines of research, research projects and research
groups, it is clear that the PPGE is going against the grain of programs of international
excellence. While at Unioeste there is a considerable number of research groups, in the
Postgraduate Program in Education at the University of Vale do Rio dos Sinos (UNISINOS),
for example (concept 7), there are lines of research that are structured, only based on of (02)
two research groups. It is clear, therefore, that CAPES has not seen the mere increase in research
groups as something positive. But, before that, it has valued research groups that have: a)
research networks with other institutions, preferably foreign ones; b) that both students and
alumni participate in group activities; c) that is interinstitutionally structured (CAPES, 2017b).
It was in this context that the evaluators (CAPES, 2017b) praised the UNISINOS PPGE
proposal, which has interinstitutionality as the main characteristic of the Interinstitutional
Research Group on Teaching, Pedagogy and Differences, for example. This group, formed in
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 13
2015, has as partner institutions: Federal University of Rio Grande do Sul, University of Santa
Cruz do Sul, Federal University of Pampa, Federal University of Pelotas, National University
of La Patagonia Austral and University of Porto.
At the Federal University of Paraná, the cooperation network was also recognized in the
evaluation.
The Project “Studies on Interculturality at the University” approved and
financed by Notice 01/2014 CAPES and SECADI/MEC is worth highlighting,
which involves cooperation in research and academic mobility of doctoral
students from universities: UFPR (postgraduate programs in Education, in
Sociology and Psychology); UEM (Master’s in Sociology); Tiradentes
University; Texas University _ at Austin (USA); Universitat Autónoma
Metropolitana (Mexico); Université de Yaoundé I (Cameroon). It is also worth
highlighting the CAPES/FORTALECIMENTO MERCOSUR PROGRAM
UFPR/UTALCA (Chile), which
establishes a collaborative relationship that has lasted 6 years with
postgraduate programs in countries in the Southern Cone in the development
of research and exchange of experiences between teachers and students
(CAPES, 2017c, p. 7, our translation).
At the Federal University of Santa Catarina, a similar experience was recognized in the
evaluation.
The Program Proposal is presented in a manner appropriate to the purposes of
an academic program, highlighting the existence of research groups and
partnership initiatives to carry out agreements, research and integration of
teachers and researchers from different institutions, such as, the
“Interinstitutional project with the Federal University of Minas Gerais, in the
project: Modern, Modernity and Modernization: education in Brazil’s projects
19th and 10th centuries”, the project “Human development and learning in
the first years of schooling in Latin American countries Brazil, Cuba and
Mexico” and the project “History Teaching: The study of teaching practices
using judicial documents, printed periodicals and oral narratives”, with the
participation of several Brazilian and foreign universities (CAPES, 2017d, p.
2, our translation).
Therefore, the idea of research groups closed in on themselves”, and with actions
limited to the scope of the home institution itself, is something that, currently, needs to be
overcome. It is not enough to just include undergraduate and graduate students in group
activities. We need to go further. At the moment, the challenge that arises is to work with
network research, articulating it through interinstitutional actions.
In this sense, given the praise from the CAPES evaluators, it is worth reading the PPGE
evaluation forms from UNISINOS (CAPES, 2017b) and the Federal University of Paraná
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 14
(UFPR) (CAPES, 2017c), taking into account the way in which lines of research, research
projects, etc. are organized.
In the case of PPGE/UNIOESTE, regarding the challenge of bibliographies that were
considered outdated, as they did not contribute to new debates in the area, an alternative would
be to think about collegial actions in order to suggest that each teacher could propose a syllabus
that contained a bibliography that met certain criteria, such as: classics in the field, authors with
updated productions in recent years, dossiers from specialized magazines and that this literature
was transmitted in both Portuguese and foreign languages. In this way, the update indicated by
CAPES would be present.
Although the systematic accreditation and re-accreditation of teachers has not been a
problem for PPGE/UNIOESTE, knowing the experience of the CPA (Permanent Evaluation
Committee) of the PPGE at UFPR is beneficial, considering that, according to the reviewers,
with regard to the PPGE /UFPR:
The Proposal presented a policy for accreditation and re-accreditation of
teachers, with a permanent evaluation committee (CPA) that monitors
teaching and student production annually, with well-defined criteria for new
accreditations, possible de-accreditations and offering vacancies in selection
processes. The regular work of the CPA has ensured the smooth and mature
functioning of the teaching accreditation and de-accreditation processes.
Based on the work of the CPA, the removal of professors for internships and
post-doctoral studies at other institutions is also encouraged. During the four-
year period, PPGE expanded its international insertion in 2016, around 30%
of permanent faculty members participated in activities in collaboration with
institutions from other countries advancing in terms of contact with groups
and research centers from other countries, which has contributed to the quality
of the subjects offered and the research carried out (CAPES, 2017c, p. 2, our
translation).
Monitoring graduates is a challenge that affects most programs in the country. However,
an initial action could be to monitor, systematize and encourage the bibliographic production
not only of students, but also of graduates, as well as monitoring their professional insertion, in
order to verify the impact of stricto sensu training on their professional career, in addition to
promote periodic alumni events with enrolled students, with the aim of allowing an effective
exchange of experiences.
The Programs are constantly asked for the strategies adopted to face future challenges.
In this sense, two important actions come from the Federal University of Santa Catarina
(CAPES, 2017d) that can be replicated, namely: hiring a visiting professor to work in the
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 15
Program; financing the translation and review of articles with a view to publication in journals
in a foreign language.
Final remarks
Our focus was on the positive and negative comments, as well as the respective
suggestions made by the evaluators. With this information, it was possible to cross-reference
the data to, in a comparative perspective, analyze the different variants presented in such
documents, in order to present the trends, challenges and aspects to be overcome by
PPGE/UNIOESTE.
This work, in addition to the analyzes carried out on a specific and specific basis with
the PPGE at UNIOESTE, made it possible to affirm that postgraduate studies in Brazil, although
it does have reputable programs that are at the forefront of cutting-edge research in different
areas of knowledge, still presents difficulties and lack of programs that seek to adapt to the
regulatory standards established by CAPES.
Evidence of this is the volatility of its normative/evaluative precepts for programs and
their adaptation capabilities. An example of this is: if until recently the incentive was for
programs to expand, as much as possible, their interrelations with other programs at their own
institutions, involving undergraduate and postgraduate students in group activities, today, this
practice is evaluated as if these programs were “closed in on themselves”, therefore, they will
need to expand their communication network with other institutions and, to achieve greater
appreciation, internationalization is the desired goal.
Evidently, this is something positive to be thought about, articulated and worked on by
programs aiming at their improvement, however, geographically peripheral institutions, that is,
those that are further away from large centers, and with few resources it is worth highlighting
that it is understood, that the scarce resources mentioned here are not just difficulties faced by
peripheral institutions they tend to encounter greater difficulties in effectively adapting to this
demand.
What is positive about this work is that this research approach, comparative research,
provided the opportunity to learn about programs that already have expertise in relation to the
evaluative markers that CAPES has valued and used, which can, and is expected with this
article, is that it can be considered not only by the coordination, but by the entire
PPGE/UNIOESTE board, as a reason for reflection that involves the successful experiences of
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 16
other institutions, some highlighted here, to the adjustments of their activities, aiming at much
more than their score by CAPES, and yes, a qualitative improvement in the work they offer in
the postgraduate scenario. Evidently, it is hoped that these reflections can also provide other
interested parties with a better understanding of how the process of evaluating programs in the
area of education by CAPES takes place.
What is also expected at the end of this work is that, in fact, the metaphor of the
Olympics, cited in the text and commented by one of the former CAPES evaluation directors,
will no longer be the keynote of postgraduate programs in our country, and, mainly, its
evaluation mechanism. May we move forward, each with our own potential and limitations, but
may we do so in a cooperative way, both in our institutional programs and in the important and
necessary interrelationship with other institutions that produce systematized knowledge.
REFERENCES
BAUER, M.; GASKELL, G. Pesquisa qualitativa com texto, imagem e som: um manual
prático. Petrópolis, RJ: Vozes, 2002.
BOURDIEU, P. Os usos sociais da ciência: por uma sociologia clínica do campo científico.
São Paulo: Edunesp, 2004.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2010.
Available at: http://trienal.capes.gov.br/wp-
content/uploads/2010/12/fichas/40015017008P1.pdf. Access: 25 Feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2013.
Available at:
http://conteudoweb.capes.gov.br/conteudoweb/VisualizadorServlet?nome=40015017/038/201
3_038_40015017008P1_Ficha.pdf&aplicacao=avaliacaotrienal&idEtapa=2&ano=2013&tipo
=divulga. Access: 25 Feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Documento de
Área: Educação. 2017. Available at: https://www.gov.br/capes/pt-br/centrais-de-
conteudo/Educao.pdf. Access: 25 Feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado em Educação, Unioeste Campus Cascavel. 2017a.
Available at:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/viewPreenchimentoFicha.jsf
?idFicha=4219&popup=true, Access: 25 Feb. 2020.
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 17
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade do Vale
do Rio dos Sinos. 2017b. Available at:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4369&idTipoAvaliacao=1&publico=true&popup=true. Access: 25 Feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade Federal
do Paraná. 2017c. Available at:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4143&idTipoAvaliacao=1&publico=true&popup=true. Access: 25 Feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Ficha de Avaliação
dos Programas Acadêmicos, Mestrado e Doutorado em Educação, Universidade Federal
de Santa Catarina. 2017d. Available at:
https://sucupira.capes.gov.br/sucupira/public/consultas/avaliacao/gerarRelatorioView.jsf?idFi
cha=4493&idTipoAvaliacao=1&publico=true&popup=true. Access: 25 Feb. 2020.
CAPES. Coordenação de Aperfeiçoamento de Pessoal de Nível Superior. Relatório da
Avaliação Quadrienal - Educação. 2017e. Available at:
http://capes.gov.br/images/documentos/Relatorios_quadrienal_2017/20122017-
Educacao_relatorio-de-avaliacao-quadrienal-2017_final.pdf. Access: 25 Feb. 2020.
CASTANHA, R. C. G.; GRÁCIO, M. C. C. Indicadores de avaliação de Programas de Pós-
Graduação: um estudo comparativo na área da Matemática. Em Questão, Porto Alegre, v. 18,
Edição Especial, p. 81-97, dez. 2012. Available at:
https://seer.ufrgs.br/EmQuestao/article/view/33192. Access: 25 Feb. 2020.
CATANI, A. M.; AZEVEDO, M. L. N. Estudos de políticas de educação em uma perspectiva
comparada: uma antecipação crítica de Bourdieu e Passeron. Jornal de Políticas
Educacionais, n. 14, jul./dez. 2013. Available at:
https://revistas.ufpr.br/jpe/article/view/38224. Access: 25 Feb. 2020.
GOLDENBERG, M. A arte de pesquisar: como fazer pesquisa qualitativa em Ciências
Sociais. Rio de Janeiro: Record, 2002.
GOODE, W.; HATT, P. Métodos em Pesquisa Social. São Paulo: Cia Editora Nacional,
1969.
HORTA, J. S. B.; MORAES, M. C. M. O sistema Capes de avaliação da Pós-Graduação: da
área de Educação à grande área de humanas. Revista Brasileira de Educação, n. 30, p. 95-
116, set./dez. 2005. Available at:
http://www.scielo.br/scielo.php?script=sci_arttext&pid=S1413-24782005000300008. Access:
25 Feb. 2020.
HORTA, J. S. B. Prefácio. In: BIANCHETTI, L.; MACHADO, A. M. N. A bússola do
escrever: desafios e estratégias na orientação de teses e dissertações. Florianópolis, SC:
EdUfsc, 2002.
The proposal for a Graduate Program in Education and CAPES' evaluations: A case study from the State University of West Paraná
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 18
RIBEIRO, R. J. Para que serve a avaliação da pós-graduação. A visão da CAPES. Revista
Argentina de Educación Superior (RAES), n. 4, p. 63-104, 2012. Available at:
http://www.untref.edu.ar/raes/documentos/raes_5_ribeiro.pdf. Access: 25 Feb. 2020.
RÔÇAS, G.; ANJOS, M. B.; PEREIRA, M. V. Quanto vale ou é por quilo: o peso da
produção acadêmica na área de ensino. Ensino e Tecnologia em Revista, Londrina, v. 1, n. 1,
p. 46-66, 2017. Available at: https://periodicos.utfpr.edu.br/etr/article/view/5949/4414.
Access: 4 Feb. 2020.
SCARTEZINI, N. Introdução ao método de Pierre Bourdieu. Cadernos de Campo,
Araraquara, n. 14-15, p. 25-37, 2011. Available at:
https://periodicos.fclar.unesp.br/cadernos/article/view/5159. Access: 25 Feb. 2020.
YIN, R. Estudo de caso: planejamento e métodos. Tradução: Daniel Grassi. Porto Alegre:
Bookman, 2001.
Fábio Lopes ALVES; Yuliia FELENCHAK and Andrii HOLOD
RIAEE – Revista Ibero-Americana de Estudos em Educação, Araraquara, v. 18, n. 00, e023134, 2023. e-ISSN: 1982-5587
DOI: https://doi.org/10.21723/riaee.v18i00.17773 19
CRediT Author Statement
Acknowledgments: Not applicable.
Funding: Araucária Foundation.
Conflicts of interest: Not applicable.
Ethical approval: Not applicable.
Availability of data and material: Not applicable.
Author contributions: Fábio Lopes Alves research development and preparation of the
first version. Yuliia Felenchak and Andrii Holod in-depth analysis.
Processing and editing: Editora Ibero-Americana de Educação.
Review, formatting, standardization, and translation.