image/svg+xml
Regulamentação da atividade educacional como fator de garantia da qualidade do ensino superior sob restrições (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3293
REGULAMENTAÇÃO DA ATIVIDADE EDUCACIONAL COMO FATOR DE
GARANTIA DA QUALIDADE DO ENSINO SUPERIOR SOB RESTRIÇÕES
(COVID-19)
REGULACIÓN DE LA ACTIVIDAD EDUCATIVA COMO FACTOR PARA ASEGURAR
LA CALIDAD DE LA EDUCACIÓN SUPERIOR BAJO RESTRICCIONES (COVID-19)
REGULATION OF EDUCATIONAL ACTIVITIES AS A FACTOR IN ENSURING THE
QUALITY OF HIGHER EDUCATION UNDER RESTRICTIONS (COVID-19)
Sergey Sergeevich ZENIN
1
Elena Vasilievna KAIMAKOVA
2
Oleg Nikolayevich MAKAROV
3
Yulia Lenarovna VYSOCHINA
4
Sergey Anatolyevich MAKUSHKIN
5
Irina Sergeevna ZUNTOVA
6
RESUMO
: O artigo apresenta os resultados do estudo das atividades de definição de padrões
das instituições de ensino superior (alguns aspectos dessas atividades nas condições da
pandemia). Os autores concluem que as condições da pandemia e da transição para o trabalho
a distância determinaram a necessidade de correções na legislação que rege a atividade das
instituições de ensino para manter o nível de qualidade do ensino superior. Em particular,
devido à transição em massa dos alunos para o ensino a distância, há uma necessidade de criar
padrões de qualidade para o ensino a distância e o procedimento de certificação para
universidades que usam ensino híbrido e a distância.
PALAVRAS-CHAVE
: Ensino a distância. Atividades educacionais. Qualidade do ensino
superior. Normas.
1
Universidade Estadual de Direito de Kutafin Moscou, Moscou
–
Rússia; Universidade Estadual dos Urais do Sul,
Chelyabinsk
–
Rússia. Professor Associado. ORCID: https://orcid.org/0000-0002-4520-757X. E-mail:
zeninsergei@mail.ru
2
Universidade Estadual do Sudoeste, Kursk
–
Rússia. Professora Associada. ORCID: https://orcid.org/0000-0002-
4665-5067. E-mail: elena.v.kaimakova@yandex.ru
3
Universidade Estadual de Engenharia Ferroviária de Moscou (MIIT),
Moscou
–
Rússia. Professor
Associado. ORCID: https://orcid.org/0000-0003-2106-2027. E-mail: mr.russkiy@gmail.com
4
“Universidade Médica do Estado dos Urais do Sul” Ministério da Saúde da Federação Russa
, Moscou
–
Rússia. Professora Associada. ORCID: https://orcid.org/0000-0002-3484-8777, E-mail: uvysochin@mail.ru
5
Universidade Social Estatal Russa
, Moscou
–
Rússia. Professor Associado. ORCID: https://orcid.org/0000-
0002-8427-3991. E-mail: s_makin2009@mail.ru
6
Universidade Tecnológica do Estado de Belgorod em homenagem a V.G. Shukhov, Belgorod
–
Rússia.
Professora Associada. ORCID: https://orcid.org/0000-0002-5852-2296. E-mail: irina.zuntova@gmail.com
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN e Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3294
RESUMEN
: El artículo presenta los resultados del estudio de las actividades normativas de
las instituciones de educación superior (ciertos aspectos de dichas actividades en las
condiciones de la pandemia). Los autores concluyen que las condiciones de la pandemia y la
transición al trabajo a distancia determinaron la necesidad de correcciones en la legislación
que rige las actividades de las instituciones educativas para mantener el nivel de calidad de la
educación superior. En particular, debido a la transición masiva de los estudiantes al
aprendizaje a distancia, existe la necesidad de crear estándares de calidad para la educación
a distancia y el procedimiento de certificación para las universidades que utilizan el
aprendizaje combinado y a distancia.
PALABRAS CLAVE
:
Aprendizaje a distancia. Actividades educativas. Calidad de la
educación superior. Estándares.
ABSTRACT
: The article presents the results of the study of standard-setting activities of higher
education institutions (certain aspects of said activities under the conditions of the pandemic).
The authors conclude that the conditions of the pandemic and the transition to remote work
determined the need for corrections in the legislation governing the activities of educational
institutions to maintain the level of quality of higher education. In particular, due to students’
mass transition to distance learning, there is a need to create quality standards for distance
education and the attestation procedure for universities using blended and distance learning.
KEYWORDS
:
Distance learning. Educational activities. Quality of higher education.
Standards.
Introdução
A introdução de restrições associadas à pandemia de COVID-19 em março de 2020
afetou profundamente todas as esferas da vida dos indivíduos e da sociedade. Tais modificações
adquirem um significado especial no sistema de administração pública. As referidas restrições
também influenciaram fortemente o sistema de ensino superior, pois refletiram nas
características específicas do estatuto jurídico das organizações educativas que fazem parte do
sistema de administração pública. O presente estudo centra-se em apresentar algumas
perspectivas de regulação das atividades das instituições de ensino superior no contexto das
restrições introduzidas devido à propagação do COVID-19 (VARTANOVA, 2020).
Até os dias atuais, a pandemia do COVID-19 já atingiu em certa medida todos os países
do mundo e penetrou praticamente em todas as esferas da vida pública (ALEJANDRO, 2020).
O sistema de ensino também não é exceção. A pandemia forçou a transição abrupta para o
ensino a distância e o ensino que muitos esperavam que fosse temporário. No entanto, a
realidade do presente demonstra que a crise mundial mais grave de nossas vidas, seguida de
dramáticas consequências econômicas, ainda não passou. Como resultado, mais de 1,5 bilhão
image/svg+xml
Regulamentação da atividade educacional como fator de garantia da qualidade do ensino superior sob restrições (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3295
de estudantes em todo o mundo (91,3% da população total de estudantes) (ZENKOV, 2020)
são excluídos de suas escolas e universidades. Nas circunstâncias atuais, autoridades estatais,
responsáveis de instituições de ensino, professores, bem como os próprios alunos, estão se
adaptando às novas condições de aprendizagem às pressas. A transformação do ensino superior
atingiu uma escala sem precedentes e afetou mais de 4 milhões de estudantes e 235 mil
professores na Rússia no ano letivo 2019-2020 (SHTYKHNO
et al.
, 2020).
A adaptação de várias esferas da vida pública, incluindo a educação, às condições de
restrições de quarentena associadas à pandemia de COVID-19 está, sem dúvida, despertando
um interesse crescente entre os pesquisadores (MATRAEVA
et al.
, 2020; DUDIN
et al.
, 2019;
2020). Esta área de investigação já apresentou bastantes estudos analisando a influência da
pandemia em curso em vários aspetos da atividade educativa. É digno de nota os estudos de D.
A. Shtykhno (2020), S. E. Kaplina (2020) e N. V. Nikulcheva (2020) propondo várias opções
de mudanças organizacionais e legais nas atividades educacionais determinadas pela pandemia.
No entanto, atualmente falta uma solução clara para essas questões e novos estudos semelhantes
ao presente, focados na análise das tendências no desenvolvimento da regulação educacional
na crise atual, parecem altamente relevantes.
A hipótese de pesquisa sugere que, no contexto da disseminação da infecção pelo novo
coronavírus na primavera de 2020, surgiu uma necessidade urgente de abordar as questões
regulatórias de organização e implementação das atividades educacionais e de gestão das
universidades em termos de garantir a qualidade do ensino superior.
Métodos
A consecução da meta e objetivos de estudo estabelecidos envolve os seguintes grupos
de métodos de pesquisa:
–
métodos teóricos
–
análise de literatura jurídica, pedagógica,
metodológica e de documentos normativos sobre o problema em estudo; modelagem do
processo de ensino a distância em organizações educacionais, sistematização de dados teóricos
e experimentais; classificação de componentes e características selecionadas;
–
métodos
empíricos: observação
–
direta e indireta, de longo e curto prazo;
–
estatística
–
acúmulo de
dados empíricos (coleta de material estatístico); identificação e processamento dos parâmetros
quantitativos e qualitativos do experimento. O acúmulo de dados empíricos envolveu o uso de
documentos oficiais de fontes abertas, como sites oficiais de várias universidades e do
Ministério da Educação e Ciência da Federação Russa.
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN e Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3296
Resultados
A esfera da educação foi uma das primeiras a vivenciar o efeito da pandemia do
coronavírus e respondeu às restrições introduzidas transferindo todas as atividades educativas
para o formato a distância. A rápida transição para o ensino totalmente a distância exigiu uma
resposta rápida por parte das autoridades públicas, ministérios relevantes e universidades e foi
possível devido ao acúmulo de experiência na concepção e implementação de tecnologias de
educação a distância em universidades russas que começaram em meados da década de 1990
(ANDREEV, 2013) com a aprovação do Conceito de Educação a Distância e o início das
experiências nesta área de estudo. O Ministério da Ciência e Ensino Superior da Federação
Russa prontamente assumiu o controle da situação e estabeleceu sua gestão. A transição forçada
para o uso de tecnologias de
e-learning
(ensino digital) e ensino a distância em todas as
instituições de ensino superior da Federação Russa começou com o lançamento da ordem n.
398 do Ministério da Educação e Ciência
da Federação Russa de 14 de março de 2020 “Sobre
as atividades de organizações sob jurisdição do Ministério da Ciência e Ensino Superior no
contexto da prevenção da propagação da nova infecção por coronavírus no território da
Federação Russa” (RUSSIA, 202
0). Desde os primeiros dias em que as restrições de quarentena
foram introduzidas, o Ministério lançou uma “linha direta” abordando a transição para formatos
de ensino misto e à distância. Nos dias 15 e 16 de março de 2020, o Ministro da Ciência e
Ensino Superior da Federação Russa Valery Falkov realizou reuniões do Grupo de Trabalho
sobre a preparação de propostas para organizar o processo educacional nas universidades no
contexto da prevenção da propagação do COVID-19 na Federação Russa (foram realizadas oito
reuniões dos grupos de trabalho) (SHTYKHNO
et al.
, 2020). O trabalho envolveu toda a
comunidade de reitores, bem como o Centro de Situação especialmente criado do Ministério da
Educação e Ciência, no qual o Ministério acompanhou constantemente o desenvolvimento do
ambiente online no contexto da infecção por coronavírus em conjunto com as principais
universidades do país. Para garantir a regulamentação legislativa do ensino a distância em caso
de estado de emergência, alerta máximo ou emergência introduzida na Federação Russa ou em
certas regiões do país, o estado de Duma da Federação Russa considerou e adotou várias
alterações ao artigo 108 da a Lei Federal “Sobre Educação na Federação Russa” (29 de
dezembro de 2012) de forma acelerada. Além disso, o pr
ojeto de lei “Alterando o Artigo 16 da
Lei Federal “Sobre Educação na Federação Russa” em termos de definição dos poderes para
estabelecer o procedimento para o uso de tecnologias de
e-learning
e ensino a distância na
image/svg+xml
Regulamentação da atividade educacional como fator de garantia da qualidade do ensino superior sob restrições (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3297
implementação de programas educacionai
s” foi prontamente desenvolvido e submetido ao
estado de Duma.
Uma transição tão extrema do ensino superior para o ensino a distância em meio a uma
pandemia deu origem a muitos problemas.
Para relatar com sucesso a implementação de programas na grande maioria das
organizações nos níveis de universidades, faculdades e escolas, o processo de mudança para o
ensino a distância foi reduzido a um nível elementar: 1) decidiu-
se “transferir” o processo do
formato presencial para o a distância com a mesma programação de aulas realizadas na forma
de videoconferências; 2) decidiu-se fornecer aos alunos de escolas e universidades uma ampla
gama de links para vários recursos da Internet, plataformas com tarefas e tutoriais em vídeo
para que eles naveguem e entendam o que fazer e como fazer; 3) optou-se por organizar o
controle do trabalho dos alunos na forma de registro dos arquivos enviados por eles ao professor
–
especificamente, fotografias de trabalhos concluídos (para classificação) (NIKULICHEVA
et al.
, 2020). No entanto, em sua grande maioria, a administração das organizações educacionais
deixou de considerar realidades simples
–
um computador pessoal não está incluído no conjunto
obrigatório de suprimentos para alunos da escola (ou universitários) juntamente com cadernos,
canetas e outros materiais adquiridos pelos pais e financiado por pagamentos para famílias
numerosas e outras categorias preferenciais alocadas por órgãos públicos (NIKULICHEVA
et
al.
, 2020). Portanto, o problema da falta de computadores para todos os membros da família
que estudam e trabalham remotamente se tornou muito agudo. Enquanto isso, o acesso a portais
educacionais a partir de smartphones limitou significativamente o uso de determinadas funções
desses recursos. O problema dos equipamentos com computadores e acesso à Internet era
impossível de resolver em pouco tempo. Considerando que o nível de penetração da Internet na
Rússia atinge apenas 76% e apenas 72,4% dos domicílios tinham um computador pessoal em
2018 (FEDERAL STATE STATISTIC SERVICE, 2019), enquanto nas áreas rurais havia
apenas 43 PCs, 54 laptops ou tablets, e 107 smartphones por 100 domicílios e no grupo
populacional mais pobre, o grau de equipamento atingiu apenas 41 PCs, 47 laptops ou tablets e
107 smartphones por 100 domicílios, a transição para o formato remoto nem sempre foi bem-
sucedida. No entanto, isso não levou à suspensão do processo educacional ou ao fechamento de
universidades individuais, como ocorreu em alguns países, por exemplo, no Brasil
(MARINONI; VAN'T LAND, 2020) onde o acesso dos alunos à Internet era tão limitado que
algumas universidades foram forçadas a parar temporariamente de funcionar.
A desigualdade nas capacidades técnicas na esfera digital é acompanhada pela lacuna
na competência digital presente tanto no corpo docente quanto nos alunos. A transição urgente
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN e Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3298
para o ensino a distância tem demonstrado o despreparo de alguns participantes do processo
educacional para a introdução e percepção de métodos de ensino digital não tradicionais. Esse
achado pode ser
explicado tanto pela falta das competências “digitais” necessárias quanto pela
ausência ou inadequação de equipamentos técnicos dos novos “locais de trabalho”
(SHTYKHNO
et al.
, 2020). A maior parte dos professores das escolas, assim como muitos
professores de faculdades e universidades, não sabem como trabalhar no novo ambiente a
distância.
Uma pesquisa sociológica com quase 35 mil professores realizada pela Academia
Presidencial Russa de Economia Nacional e Administração Pública em abril de 2020
demonstrou, entre outras coisas, que
a atual transição radical para a educação a distância é enfrentada pela rejeição
(ou insatisfação) entre os professores que está associada não tanto ao nível de
qualificação quanto à ruptura do estilo de vida habitual e à necessidade de
perceber o local de trabalho de forma diferente e buscar abordagens
individuais para ensino. O índice de aceitação da educação a distância
demonstra que atualmente não há uma direção única de formação cujos
representantes apoiem e promovam a educação a distância entre os professores
(ROGOZIN, 2020).
As peculiaridades dessa transição estão sendo ativamente discutidas e cobertas por
diversos trabalhos analíticos e opiniões de especialistas. O trabalho mais abrangente que
permite resumir a experiência de inúmeras instituições de ensino é um relatório analítico
“Lições do “teste de estresse”: universidades durante a pandemia e depois dela” apresentado
em junho de 2020 (ANISIMOV
et al.
, 2020) que foi elaborado com base sobre estudos
realizados em
várias universidades russas importantes e analisa “a prontidão do sistema de
ensino superior para uma situação de pandemia, as ações das universidades e do regulador
visando melhorar o funcionamento do sistema, a atitude dos alunos e professores em relação
aos formatos de aprendizagem online, e medidas de apoio a eles” (tradução nossa).
Com base neste relatório, pode-se concluir que, em geral, o sistema russo de ensino
superior permaneceu funcional nas condições da pandemia. Além disso, a pandemia promoveu
a implementação acelerada das tecnologias digitais no processo educacional. Pode-se afirmar
que um avanço digital ocorreu no ensino superior. No início, os especialistas até expressavam
uma forte opinião de que o mundo do ensino superior não será o mesmo após o fim da pandemia.
Surgiu uma suposição de que a Universidade 3.0 será superada pela desolada Universidade
digital 4.0 (SAVITSKAIA, 2020). No entanto, apesar de o sistema educacional russo e seus
principais participantes (estudantes e professores) terem lidado com sucesso com os problemas
image/svg+xml
Regulamentação da atividade educacional como fator de garantia da qualidade do ensino superior sob restrições (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3299
que enfrentaram no contexto da pandemia, uma série de perigos de digitalização total da
educação que pode levar a riscos significativos nesta área tornou-se mais aparente.
Acreditamos que um dos riscos mais significativos se apresenta pelo risco de diminuição
da qualidade dos serviços educativos e, neste sentido, coloca-se a questão da necessidade de
criar um procedimento de atestação da qualidade dos recursos educativos a distância de todo o
sistema de ensino superior.
Discussão
Atualmente, os procedimentos para a padronização da qualidade da educação a distância
na Rússia são estritamente hierárquicos e incluem leis federais, atos do governo da Federação
Russa, ordens do Ministério da Educação e Ciência da Federação Russa, ordens departamentais
(ministérios associados à educação básica programas educacionais) e, finalmente, as
regulamentações locais que têm o maior peso. A Lei Federal "Sobre Alterações à Lei da
Federação Russa "Sobre Educação" sobre o uso de
e-learning
, tecnologias de ensino a
distância", datada de 28 de fevereiro de 2012, n. 11-FZ, permitiu o uso de tecnologias de
e-
learning
e ensino a distância (EaD) na implementação de programas educacionais
independentemente das formas de ensino (DYGANOVA; YAVGILDINA, 2020;
BONDARENKO, 2020). Na interpretação da lei, entende-se por
e-learning
“a organização do
processo educativo utilizando a informação contida em bases de dados e utilizada na
implementação de programas educativos, tecnologias de informação e dispositivos técnicos que
permitam o tratamento dessa informação, e informação e redes de telecomunicação garantindo
a transmissão de informações por meio de linhas de comunicação e interação dos participantes
do processo educativo”. Esta disposição abriu perspe
ctivas para uma modernização radical da
forma extramuros de educação e a introdução de
e-learning
e EAD na forma de tempo integral.
Ressalta-se que a lei trouxe alguma clareza à terminologia sobre os conceitos de
e-learning
e
ensino a distância, mas não forneceu critérios para a qualidade dos
e-cursos
(cursos digitais).
A Lei Federal da Federação Russa “Sobre Educação na Federação Russa” de 29 de dezembro
de 2012, n. 273-FZ consolidou as formulações acima mencionadas de
e-learning
e EAD e
apresentou uma nova metodologia para a implementação de programas educacionais indicando
a conveniência de uma forma de educação em rede (artigo 15). Esta forma permite atrair os
recursos de diversas organizações que realizam atividades educativas e outras (científicas,
industriais, culturais, educativas, médicas, de educação física e desportivas), incluindo
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN e Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3300
estrangeiras. A educação em rede só é possível com o uso ativo das modernas tecnologias da
informação, das quais o
e-learning
faz parte.
Assim, o quadro regulamentar atualmente presente na Federação Russa abrange apenas
as disposições mais gerais sobre o uso da educação a distância na formação de especialistas que
recebem ensino superior. No entanto, o conteúdo insuficiente e pouco claro e a lenta melhoria
dos regulamentos dificultam a plena realização do potencial da educação a distância. Melhorar
a formação de especialistas requer o desenvolvimento de padrões de qualidade para recursos de
educação a distância e padrões de credenciamento universitários que considerem o uso desses
recursos (BONDAREVA
et al.
, 2020; GLADILINA
et al.
, 2020; MATRAEVA
et al.
, 2020).
Como exemplo da utilização de tais padrões, podemos rever a experiência do Canadá
como país que ocupa um dos lugares mais altos na classificação da qualidade do ensino superior
(7º lugar) (HUMANITARIAN PORTAL, 2020).
A coleção nacional de padrões “Diretrizes canadenses recomendadas de aprendizagem
eletrônica” (CanREGS, sigla em inglês) desenvolvida em 2002 compreende critérios de
qualidade para os resultados de
e-learning
, para ensino e apoio no processo de
e-learning
na
universidade e para
e-learning
recursos
–
questões de conteúdo dos cursos, corpo docente,
métodos de ensino, qualidade e expertise orçamentária (BARKER, 2002). Em 2004, o manual
Open eQuality Learning Standards foi desenvolvido com base no CanREGS e posteriormente
entregue ao Instituto Europeu de Aprendizagem Eletrônica (EIfEL, sigla em inglês) para uso
não comercial “aberto” por universidades e organizações públicas. Além disso, no iní
cio dos
anos 2000, havia outras coleções de padrões de implementação de
e-learning
, incluindo
diretrizes para o design, desenvolvimento e uso de e-cursos, padrões para a qualidade da
educação fornecida a estudantes em países estrangeiros, coleções de melhores práticas em
ensino a distância e educação profissional contínua, padrões de alfabetização em informática
etc. Neste contexto, sob os auspícios da
QualitE-learning Assurance Inc
. em conjunto com a
QualitE-learning Assurances Services
(UK), foi criada a marca de qualidade
eQcheck e-
learning
que garante o cumprimento dos padrões internacionais de qualidade de
e-learning
.
Provedores de
e-learning
em todo o mundo usam essa marca desde 2002.
O credenciamento de universidades canadenses é realizado usando o documento
“Princípios de garantia de qualidade institucional no ensino superior canadense” desenvolvido
pela Associação de Universidades e Faculdades do Canadá (AUCC) e aplicado aos formatos de
ensino presencial e eletrônico e a distância. Existem organizações provinciais de acreditação e
comunitárias envolvidas na regulação e planeamento do sistema educativo, incluindo o
e-
learning
. A definição dos princípios, ordem e frequência de acreditação das universidades, bem
image/svg+xml
Regulamentação da atividade educacional como fator de garantia da qualidade do ensino superior sob restrições (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3301
como a revisão e avaliação da qualidade dos programas educacionais individuais são realizadas
neste nível. As universidades canadenses credenciadas têm total autonomia na escolha dos
programas de estudo e na determinação dos padrões de qualidade do
e-learning
e da estrutura
regulatória. Guias e livros de referência relevantes estão disponíveis publicamente e podem ser
usados por educadores e administradores no desenvolvimento, ensino e avaliação da eficácia
de qualquer curso que envolva
e-learning
.
Até o momento, existem sete universidades que oferecem exclusivamente ensino a
distância e são unidas pela Associação Canadense de Universidades Virtuais (Canadian Virtual
University, CVU). A Associação é composta por universidades cujos programas se alinham
com os padrões nacionais de
e-learning
(CANADIAN VIRTUAL UNIVERSITY, 2021), o que
proporciona aos potenciais alunos a confiança na qualidade da educação ali ministrada. Além
disso, cada universidade tem um departamento de ensino a distância e eletrônico. A avaliação
da qualidade e eficácia da educação realizada pelos departamentos correspondentes de ensino
a distância e eletrônico é geralmente composta pelos seguintes elementos: - auditorias internas
obrigatórias de todos os novos programas e cursos, bem como cursos que foram
significativamente alterados; - avaliação da eficácia do cronograma e sequência de cursos do
programa; -revisões internas dos cursos pelos próprios professores; - entrevistas aos alunos; -
revisão dos programas por peritos externos. O procedimento e os resultados dessas auditorias
estão disponíveis ao público. A avaliação da eficácia dos cursos eletrônicos e semipresenciais
é realizada seguindo os mesmos padrões de qualidade dos cursos que não envolvem novas
tecnologias e está inserida no marco regulatório geral. A melhoria contínua da qualidade do
ensino é assegurada não só através de acreditação externa, mas também como resultado de
testes internos de e-cursos para conformidade com os padrões apropriados. As universidades
publicam coleções de checklists utilizados por professores e administração durante o
desenvolvimento e implementação de cursos eletrônicos, bem como no aprendizado online
(CAMPUS ALBERTA, 2021). O Centro de Formação Tecnológica atualmente em
funcionamento e os Serviços de
E-learning
da AICT fornecem suporte técnico de alta qualidade
no desenvolvimento, ensino e padronização de e-cursos (UNIVERSITY OF ALBERTA, 2021).
Assim, os traços característicos da padronização e regulação da qualidade da educação
eletrônica e a distância canadense incluem a presença de uma ampla base metodológica (normas
e guias de usuário); livre acesso aos resultados da avaliação de auditoria de currículos; a falta
de regulação estatal com elevado protagonismo das estruturas regionais e universitárias; o
grande papel dos especialistas e da comunidade profissional na regulação da base normativa da
educação a distância e na avaliação dos resultados da aprendizagem.
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN e Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3302
Tabela 1
–
Características comparativas de padrões de qualidade para educação a distância na
Rússia e no Canadá
Critérios
Rússia
Canadá
Modelos para avaliação da
qualidade e expertise do ensino a
distância
A base legal regulatória é criada em
nível federal
Sistema não estatal de regulação
normativa da educação a distância
(especialistas, comunidade
profissional)
Sistema de padronização de
qualidade, disponibilidade de
manual do usuário
Incorporado ao sistema geral de
gestão da qualidade; hierárquico;
realizado pelo estado
Funciona eficazmente ao nível dos
manuais de utilizador, sistema de
acreditação de recursos eletrônicos
Sistema de credenciamento de
recursos eletrônicos
Praticamente ausente e apresentado
no nível individual
Desenvolvido e implementado a
nível de províncias e universidades
individuais
Forma mista de aprendizagem
(método híbrido, método misto)
Em fase de implementação; falta
uma definição de “pedagogia
digital”
Difundido e obrigatório no ensino
de pós-graduação
Fonte: Elaborado pelos autores
Assim, uma característica comum da implementação do ensino a distância no Canadá e
na Rússia é sua base normativa para as universidades, no entanto, o sistema de padrões de
qualidade e certificação de programas de educação a distância ainda não foi introduzido na
educação russa.
Conclusão
O uso em massa de métodos de ensino a distância durante as restrições de quarentena
devido à pandemia de COVID-19 deu origem à necessidade de abordar vários problemas
organizacionais e legais das universidades russas. Parece que os problemas emergentes no
processo de transição para as formas de ensino a distância podem afetar negativamente a
qualidade da educação russa. Portanto, sua resolução deve ser realizada juntamente com a
introdução de padrões de qualidade para o ensino a distância e a certificação de programas de
image/svg+xml
Regulamentação da atividade educacional como fator de garantia da qualidade do ensino superior sob restrições (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3303
educação a distância que tenham se comprovado na prática mundial. Assim, confirma-se a
hipótese do presente estudo.
REFERENCES
ALEJANDRO, S. S. COVID-19 y su relación con la ciencia jurídica desde la perspectiva de
México.
Utopía y Praxis Latinoamericana
, v. 25, n. Extra 11, p. 48-64. 2020.
ANDREEV, A. A. Distantsionnoe obuchenie i distantsionnye obrazovatelnye tekhnologii
[Distance learning and distance educational tecknologies].
Otkrytoe obrazovanie
, v. 5, n.
100, p. 40
–
46.
ANISIMOV, N. Y. U.
et al
.
Analiticheskii doklad “Uroki “Stress
-testa
”: vuzy v usloviiakh
pandemii i posle nee” [Analytical report “Lessons of the “Stress test”: universities during the
pandemic and after it”]. Ministry of Scienc
e and Higher Education of the Russian Federation,
2020. Disponível em:
https://www.hse.ru/data/2020/07/06/1595281277/003_%D0%94%D0%BE%D0%BA%D0%
BB%D0%B0%D0%B4.pdf. Acesso em: 10 set. 2021.
BARKER, K.
С
.
Canadian Recommended E-learning Guidelines (CanREGs)
. FuturEd.
2002. Disponível em: https://futured.com/pdf/CanREGs%20Eng.pdf. Acesso em: 10 set.
2021.
BONDARENKO, T. G. Comparative Analysis of Implementation Targets of National
Projects in Developed Countries Managing Socio-Economic Indicators in Russia.
Utopía y
Praxis Latinoamericana
, v. 25, n. Extra 5, p. 370-378, 2020.
BONDAREVA, V.; CHISTYAKOV, A.; SEMANINA, A.; ZETKINA, A. Adaptation of
Foreign Pre-Graduate Students in the University Multicultural Educational Environment.
Utopía y Praxis Latinoamericana
, v. 25, n. Extra 5, p. 196-205, 2020.
CAMPUS ALBERTA.
Course Standards, Support Standards, and
Administrative/Institutional Standards
. 2021. Disponível em:
http://docplayer.net/13654444-Course-standards-support-standards-institutional-and-
administrative-standards.html. Acesso em: 10 set. 2021.
CANADIAN VIRTUAL UNIVERSITY.
Official website
. 2021. Disponível em:
https://www3.laurentian.ca/cvuuvc/. Acesso em: 10 set. 2021.
DUDIN, M. N.
et al
. Situation and problems of digitation of university management in Russia
and in three Latin-American countries (Argentina, Chile, and Brazil).
Formación
Universitaria
, v. 13, n. 6, p. 61-76, 2020.
DUDIN, M. N.
et al
. Modern religious education as the basis for the development of new
confessional relations.
European Journal of Science and Theology
, v. 15, n. 5, p. 133-146,
2019.
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN e Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3304
DYGANOVA, E. A.; YAVGILDINA, Z. M. Development of Student Musician's
Methodological Competence in Practice-Oriented University Environment.
Utopía y Praxis
Latinoamericana
, v. 25, n. Extra 5, p. 113-2-125, 2020.
FEDERAL STATE STATISTIC SERVICE.
Regiony Rossii. Sotsialno-ekonomicheskie
pokazateli
–
2019
[Regions of Russia. Socio-economic indicators - 2019]. Moscow: Rosstat,
2019.
GLADILINA, I.
et al
. Learning management system: Integration models of conventional and
distance education of students.
EurAsian Journal of BioSciences
, v. 14, p. 6153-6159, 2020.
HUMANITARIAN PORTAL.
Universitas 21
: Ranking of National Higher Education
Systems. 2020. Disponível em: https://gtmarket.ru/ratings/u21-ranking-of-national-higher-
education-systems. Acesso em: 10 set. 2021.
KAPLINA, S. E. Obrazovanie v usloviiakh pandemii COVID
–
19.
In
: SUKIASYAN, A. A.
(ed.),
Novaia nauka
: istoriia stanovleniia, sovremennoe sostoianie, perspektivy razvitiia. Ufa,
Russia: Omega Sayns, 2020. p. 241-244.
MARINONI, G.;
VAN’T LAND, H. Impact of COVID
-19 on world higher education.
International higher education
, v. 102, p. 8-9, 2020. DOI:
https://doi.org/10.36197/IHE.2020.102.03
MATRAEVA, A. D.
et al
. Development of Creativity of Students in Higher Educational
Institutions: Assessment of Students and Experts.
Universal Journal of Educational
Research
, v. 8, n. 1, p. 8-16. 2020.
NIKULICHEVA, N. V.; DIAKOVA, O. I.; GLUKHOVSKAIA, O. S. Organizatsiia
distantsionnogo obucheniia v shkole, kolledzhe, vuze [Organization of distance learning at
school, college, university].
Otkrytoe obrazovanie
, v. 24, n. 5, p. 4-17. 2020, DOI:
10.21686/1818-4243-2020-5-4-17
ROGOZIN, D. M. Prepodavateli rossiiskikh vuzov o razvitii onlain-sredy v usloviiakh
pandemii [Russian university teachers on the development of the online environment in a
pandemic].
Monitoring the economic situation in Russia: trends and challenges of socio-
economic development
, v. 14, n. 116, p. 36-44, 2020. Disponível em:
https://www.ranepa.ru/documents/2020_14-116_May.pdf. Acesso em: 10 set. 2021.
RUSSIA. Federal law of the Russian Federation no. 273-
FZ of December 29, 2012. “On
Education in the Russian Federation” (as amended on June 8, 2020, entered into force on July
1, 2020).
Rossiiskaia Gazeta
, n. 303, 31 dez. 2012.
RUSSIA. O
rder of the ministry of science and higher education of the Russian
Federation no. 398 of March 14, 2020
. “On the activities of organizations under the
jurisdiction of the Ministry of Science and Higher Education of the Russian Federation in the
context of preventing the spread of a new coronavirus infection on the territory of the Russian
Federation”.
2020. Disponível em: https://minobrnauki.gov.ru/ru/documents/id_4=1065.
Acesso em: 10 set. 2021.
image/svg+xml
Regulamentação da atividade educacional como fator de garantia da qualidade do ensino superior sob restrições (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3305
SAVITSKAIA, N.
Posle pandemii vysshee obrazovanie uzhe ne budet prezhnim
[After
the pandemic, higher education will no longer be the same]. 2020. Disponível em:
https://www.ng.ru/education/2020-03-25/8_7826_education1.html. Acesso em: 10 set. 2021.
SHTYKHNO, D. A.; KONSTANTINOVA, L. V.; GAGIEV, N. N. Perekhod vuzov v
distantsionnyi rezhim v period pandemii: Problemy i vozmozhnye riski [Transition of
universities to a distance mode during the pandemic: Problems and possible risks].
Otkrytoe
obrazovanie
, v. 24, n. 5, p. 72-81, 2020.
UNIVERSITY OF ALBERTA.
E-learning
. 2021. Disponível em:
https://www.ualberta.ca/media-technology-studies/programs/mact/student-resources/
e-
learning
.html. Acesso em: 10 set. 2021.
VARTANOVA, M. L. Food supply of the population in the conditions of the global response
to the COVID-19 pandemic.
Revista Inclusiones
, v. 7, n. esp., p. 122-134, 2020.
ZENKOV, A. R.
Obrazovanie v usloviiakh pandemii: chto pokazyvaet krizis?
[Education
in the conditions of a pandemic: what does the crisis demonstrate?]. 2020. Disponível em:
https://www.imemo.ru/news/events/text/obrazovanie-v-usloviyah-pandemii-chto-pokazivaet-
krizis. Acesso em: 10 set. 2021.
Como referenciar este artigo
ZENIN, S. S.; KAIMAKOVA, E. V.; MAKAROV, O. N.; VYSOCHINA, Y. L.;
MAKUSHKIN, S. A.; ZUNTOVA, I. S. Regulamentação da atividade educacional como fator
de garantia da qualidade do ensino superior sob restrições (COVID-19).
Revista on line de
Política e Gestão Educacional
, Araraquara, v. 25, n. esp. 5, p. 3293-3305, dez. 2021. e-
ISSN:1519-9029. DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
Submetido em
: 13/03/2021
Revisões requeridas em
: 23/07/2021
Aprovado em
: 19/11/2021
Publicado em
: 30/12/2021
Processamento e edição: Editoria Ibero-Americana de Educação.
Revisão, formatação, padronização e tradução.
image/svg+xml
Regulation of educational activities as a factor in ensuring the quality of higher education under restrictions (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3287
REGULATION OF EDUCATIONAL ACTIVITIES AS A FACTOR IN ENSURING
THE QUALITY OF HIGHER EDUCATION UNDER RESTRICTIONS (COVID-19)
REGULAMENTAÇÃO DA ATIVIDADE EDUCACIONAL COMO FATOR DE
GARANTIA DA QUALIDADE DO ENSINO SUPERIOR SOB RESTRIÇÕES (COVID-
19)
REGULACIÓN DE LA ACTIVIDAD EDUCATIVA COMO FACTOR PARA ASEGURAR
LA CALIDAD DE LA EDUCACIÓN SUPERIOR BAJO RESTRICCIONES (COVID-19)
Sergey Sergeevich ZENIN
1
Elena Vasilievna KAIMAKOVA
2
Oleg Nikolayevich MAKAROV
3
Yulia Lenarovna VYSOCHINA
4
Sergey Anatolyevich MAKUSHKIN
5
Irina Sergeevna ZUNTOVA
6
ABSTRACT
: The article presents the results of the study of standard-setting activities of higher
education institutions (certain aspects of said activities under the conditions of the pandemic).
The authors conclude that the conditions of the pandemic and the transition to remote work
determined the need for corrections in the legislation governing the activities of educational
institutions to maintain the level of quality of higher education. In particular, due to students’
mass transition to distance learning, there is a need to create quality standards for distance
education and the attestation procedure for universities using blended and distance learning.
KEYWORDS
: Distance learning. Educational activities. Quality of higher education.
Standards.
1
Kutafin Moscow State Law University, Moscow
–
Russia; South Ural State University, Chelyabinsk
–
Russia.
Associate Professor. ORCID: https://orcid.org/0000-0002-4520-757X. E-mail: zeninsergei@mail.ru
2
Southwest State University, Kursk
–
Russia. Associate Professor. ORCID: https://orcid.org/0000-0002-4665-
5067. E-mail: elena.v.kaimakova@yandex.ru
3
Moscow State University of Railway Engineering (MIIT),
Moscow
–
Russia. Associate Professor. ORCID:
https://orcid.org/0000-0003-2106-2027. E-mail: mr.russkiy@gmail.com
4
“South Ural State Medical University” The Ministry of health of the Russian Federation
, Moscow
–
Russia.
Associate Professor. ORCID: https://orcid.org/0000-0002-3484-8777, E-mail: uvysochin@mail.ru
5
Russian State Social University
, Moscow
–
Russia. Associate Professor. ORCID: https://orcid.org/0000-0002-
8427-3991. E-mail: s_makin2009@mail.ru
6
Belgorod State Technological University named after V.G. Shukhov, Belgorod
–
Russia. Associate
Professor. ORCID: https://orcid.org/0000-0002-5852-2296. E-mail: irina.zuntova@gmail.com
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN and Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3288
RESUMO
: O artigo apresenta os resultados do estudo das atividades de definição de padrões
das instituições de ensino superior (alguns aspectos dessas atividades nas condições da
pandemia). Os autores concluem que as condições da pandemia e da transição para o trabalho
a distância determinaram a necessidade de correções na legislação que rege a atividade das
instituições de ensino para manter o nível de qualidade do ensino superior. Em particular,
devido à transição em massa dos alunos para o ensino a distância, há uma necessidade de
criar padrões de qualidade para o ensino a distância e o procedimento de certificação para
universidades que usam ensino híbrido e a distância.
PALAVRAS-CHAVE
: Ensino a distância. Atividades educacionais. Qualidade do ensino
superior. Normas.
RESUMEN
: El artículo presenta los resultados del estudio de las actividades normativas de
las instituciones de educación superior (ciertos aspectos de dichas actividades en las
condiciones de la pandemia). Los autores concluyen que las condiciones de la pandemia y la
transición al trabajo a distancia determinaron la necesidad de correcciones en la legislación
que rige las actividades de las instituciones educativas para mantener el nivel de calidad de la
educación superior. En particular, debido a la transición masiva de los estudiantes al
aprendizaje a distancia, existe la necesidad de crear estándares de calidad para la educación
a distancia y el procedimiento de certificación para las universidades que utilizan el
aprendizaje combinado y a distancia.
PALABRAS CLAVE
:
Aprendizaje a distancia. Actividades educativas. Calidad de la
educación superior. Estándares.
Introduction
The introduction of restrictions associated with the COVID-19 pandemic in March 2020
has deeply affected all spheres of life of individuals and society. Such modifications acquire a
special significance in the system of public administration. The aforementioned restrictions also
strongly influenced the system of higher education as they have reflected on the specific
characteristics of the legal status of educational organizations being a part of the public
administration system. The present study focuses on presenting certain perspectives of
regulating the activities of higher education institutions in the context of restrictions introduced
due to the spread of COVID-19 (VARTANOVA, 2020).
By the present day, the COVID-19 pandemic has to a certain degree covered all
countries of the world and has penetrated virtually all spheres of public life (ALEJANDRO,
2020). The education system is also no exception. The pandemic forced the abrupt transition to
distance learning and teaching upon us which many hoped would be temporary. However, the
reality of the present demonstrates that the most severe world crisis of our lives followed by
dramatic economic consequences has not yet passed. As a result, over 1.5 billion students
image/svg+xml
Regulation of educational activities as a factor in ensuring the quality of higher education under restrictions (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3289
worldwide (91.3% of the total student population) (ZENKOV, 2020) are cut off from their
schools and universities. In the current circumstances, state authorities, heads of educational
institutions, teachers, as well as students themselves, are hastily adapting to new learning
conditions. The transformation of higher education has reached an unprecedented scale and
affected over 4 million students and 235 thousand teachers in Russia in the 2019-2020 academic
year (SHTYKHNO
et al.
, 2020).
The adaptation of various spheres of public life including education to the conditions of
quarantine restrictions associated with the COVID-19 pandemic is undoubtedly arousing
increased interest among researchers (MATRAEVA
et al.
, 2020; DUDIN
et al.
, 2019; 2020).
This area of research has already presented quite a lot of studies analyzing the influence of the
ongoing pandemic on various aspects of educational activity. It is worthy to note studies by D.
A. Shtykhno (2020), S. E. Kaplina (2020), and N. V. Nikulcheva (2020) proposing various
options of organizational and legal changes in educational activities determined by the
pandemic. However, a clear solution for these issues is currently lacking and new studies similar
to the present one focusing on the analysis of trends in the development of education regulation
in the current crisis appear highly relevant.
Research hypothesis suggests that in the context of the spread of the new coronavirus
infection in the spring of 2020, an urgent need to address the regulatory issues of organizing
and implementing universities’ educational and management activities in terms of ensuring the
quality of higher education has arisen.
Methods
Achieving the established study goal and objectives involves the following groups of
research methods:
–
theoretical methods
–
analysis of legal, pedagogical, and methodological
literature and regulatory documents concerning the problem under study; modeling the process
of distance learning in educational organizations, systematization of theoretical and
experimental data; classification of selected components and characteristics;
–
empirical
methods: observation
–
direct and indirect, long-term and short-term;
–
statistical
–
accumulation of empirical data (statistical material collection); identification and processing of
quantitative and qualitative parameters of the experiment. The accumulation of empirical data
involved using official documents from open sources such as official websites of various
universities and the Ministry of Education and Science of the Russian Federation.
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN and Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3290
Results
The sphere of education was one of the first to experience the effect of the coronavirus
pandemic and responded to the introduced restrictions by transferring all educational activities
to distance format. The rapid transition to fully distance learning called for a quick response on
the part of public authorities, relevant ministries, and universities and was itself made possible
due to the accumulation of experience in the design and implementation of distance education
technologies in Russian universities which had started in the middle of 1990s (ANDREEV,
2013) with the approval of the Concept of Distance Learning and the beginning of experiments
in this area of study. The Ministry of Science and Higher Education of the Russian Federation
promptly took control of the situation and established its management. The forced transition to
using e-learning and distance learning technologies in all educational institutions of higher
education of the Russian Federation started with the release of the order of the Ministry of
Education and Science of the Russian Federation dated March 14, 2020 No. 398 “On the
activities of organizations under the jurisdiction of the Ministry of Science and Higher
Education in the context of preventing the spread of the new coronavirus infection on the
territory of the Russian Federation” (
RUSSIA, 2020). From the first days the quarantine
restrictions were introduced, the Ministry has launched a “hotline” addres
sing the transition to
mixed and distance learning formats. On March 15 and 16, 2020, the Minister of Science and
Higher Education of the Russian Federation Valery Falkov held meetings of the Working Group
on the preparation of proposals for organizing the educational process in universities in the
context of preventing the spread of COVID-19 in the Russian Federation (a total of eight
meetings of the working groups were held) (SHTYKHNO
et al.
, 2020). The work involved the
entire community of rectors, as well as the specially created Situation Center of the Ministry of
Education and Science in which the Ministry constantly monitored the development of the
online environment in the context of the coronavirus infection together with the country’s
leading universities. To ensure legislative regulation of distance learning in the event of a state
of emergency, high alert, or an emergency introduced in the Russian Federation or certain
regions of the country, the State Duma of the Russian Federation considered and adopted
several amendments to Article 108 of the Federal Law “On Education in the Russian
Federation” (December 29, 2012) in an accelerated mode. Besides, the draft law “On Amending
Article 16 of the Federal Law “On Education in the Russian Federation” in
terms of defining
the powers to establish the procedure for using e-learning and distance learning technologies in
image/svg+xml
Regulation of educational activities as a factor in ensuring the quality of higher education under restrictions (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3291
the implementation of educational programs” was promptly developed and submitted to the
State Duma.
Such an extreme transition of higher education to distance learning amid a pandemic
gave a rise to many problems.
To successfully report on the implementation of programs in the vast majority of
organizations at the levels of universities, colleges, and schools, the process of switching to
dista
nce learning was reduced to an elementary level: 1) it was decided to “transfer” the
educational process from in-person to distance format with the same schedule of lessons
conducted in the form of video conferences; 2) it was decided to provide school and university
students with a wide array of links to various Internet resources, platforms with tasks, and video
tutorials for them to browse through and understand what to do and how they should be doing
it themselves; 3) it was decided to organize the cont
rol of students’ work in the form of
recording the files sent by them to the teacher
–
specifically, photographs of completed
assignments (for grading) (NIKULICHEVA
et al.
, 2020). However, in its vast majority, the
administration of educational organizations failed to consider simple realities
–
a personal
computer is not included in the compulsory set of supplies for school students (or university
student) along with notebooks, pens, and other supplies purchased by parents and funded by
payments for large families and other preferential categories allocated by public organizations
(NIKULICHEVA
et al.
, 2020). Therefore, the problem of the lack of computers for all family
members studying and working remotely has become very acute. Meanwhile, accessing
educational portals from smartphones significantly limited the use of certain functions of these
resources. The problem of equipment with computers and access to the Internet was impossible
to resolve in a short period. Considering the facts that the level of Internet penetration in Russia
only reaches 76% and only 72.4% of households had a personal computer in 2018 (FEDERAL
STATE STATISTIC SERVISE, 2019) while in rural areas, there were only 43 PCs, 54 laptops
or tablets, and 107 smartphones per 100 households and in the poorest population group, the
degree of equipment reached only 41 PCs, 47 laptops or tablets, and 107 smartphones per 100
households, the transition to the remote format was not always successful. However, this did
not lead to the educational process being suspended or individual universities being closed
down, as was the case in some countries, for example, in Brazil (
MARINONI; VAN’T LAND,
2020) where students’ access to the Internet was so limited that some universities were forced
to temporarily stop working.
The inequality in technical capacities in the digital sphere is accompanied by the gap in
digital competence present both in teaching staff and students. The urgent transition to distance
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN and Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3292
learning has demonstrated the unpreparedness of some educational process participants for the
introduction and perception of non-traditional digital teaching methods. This finding can be
explained both by the lack of the necessary “digital” competencies and by the absence or
inadequacy of technical equipment of new “workplaces” (
SHTYKHNO
et al.
, 2020). Most of
school teachers, as well as many college and university teachers, do not know how to work in
the new distance environment.
A sociological survey of almost 35 thousand teachers conducted by the Russian
Presidential Academy of National Economy and Public Administration in April 2020
demonstrated among other things that
the current radical transition to distance education is met by rejection (or
dissatisfaction) among teachers which is associated not as much with the level
of qualifications as with the disruption of the usual lifestyle and the need to
perceive one’s workplace differently and look for individual approaches to
teaching. The distance education acceptance index demonstrates that there is
currently not a single direction of training the representatives of which would
support and promote distance education among teachers (ROGOZIN, 2020).
The peculiarities of this transition are being actively discussed and covered by various
analytical works and expert opinions. The most comprehensive work allowing to summarize
the experience of numerous e
ducational institutions is an analytical report “Lessons of the
“Stress test”: universities during the pandemic and after it” presented in June 2020 (
ANISIMOV
et al.
, 2020) which was prepared based on studies conducted in several leading Russian
universiti
es and analyses “the readiness of the higher education system for a pandemic situation,
the actions of universities and the regulator aimed at improving the work of the system,
students’ and teachers’ attitude towards online learning formats, and support m
easures for
them”.
Based on this report, it can be concluded that overall, the Russian system of higher
education remained functional under the conditions of the pandemic. Moreover, the pandemic
promoted the accelerated implementation of digital technologies in the educational process. It
can be stated that a digital breakthrough has taken place in higher education. At first, experts
were even voicing a strong opinion that the world of higher education will not be the same after
the pandemic is over. There emerged an assumption that University 3.0 will be outplaced by
the desolate digital University 4.0 (SAVITSKAIA, 2020). However, despite that the Russian
education system and its main participants (students and teaching staff) have overall
successfully coped with the problems they faced in the context of the pandemic, a range of
image/svg+xml
Regulation of educational activities as a factor in ensuring the quality of higher education under restrictions (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3293
dangers of total digitalization of education which can lead to significant risks in this area has
become more apparent.
We believe that one of the most significant risks is presented by the risk of a decrease
in the quality of educational services, and in this regard, there arises the question of the need to
create a procedure for attestation of the quality of distance educational resources of the entire
higher education system.
Discussion
At present time, the procedures for distance education quality standardization in Russia
are strictly hierarchical and include federal laws, acts of the Government of the Russian
Federation, orders of the Ministry of Education and Science of the Russian Federation,
departmental orders (ministries associated with basic educational programs) and, finally, local
regulations which have the greatest weight. The Federal Law “On Amendments to the Law of
the Russian Federation “On Education” regarding t
he use of e-learning, distance learning
technologies” dated February 28, 2012, No. 11
-FZ allowed using e-learning and distance
learning technologies (DLT) in the implementation of educational programs regardless of the
forms of education (DYGANOVA; YAVGILDINA, 2020; BONDARENKO, 2020). In the
interpretation of the law, e-
learning is understood as “the organization of the educational
process using the information contained in databases and used in the implementation of
educational programs, information technologies and technical devices allowing to process said
information, and information and telecommunication networks ensuring the transmission of
information through communication lines and interaction of the educational process
participants”. This provision
opened up prospects for a radical modernization of the extramural
form of education and the introduction of e-learning and DLT in the full-time form. It should
be noted that the law brought some clarity to the terminology regarding the concepts of e-
learning and distance learning but did not provide criteria for the quality of e-courses. The
Federal Law of the Russian Federation “On Education in the Russian Federation” dated
December 29, 2012, No. 273-FZ consolidated the abovementioned formulations of e-learning
and DLT and presented a new methodology for the implementation of educational programs
indicating the expediency of a network form of education (Article 15). This form allows
attracting the resources of several organizations carrying out educational and other (scientific,
industrial, cultural, educational, medical, physical education, and sports) activities including
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN and Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3294
foreign ones. Networked education is possible only with the active use of modern information
technologies of which e-learning is a part.
Thus, the regulatory framework currently present in the Russian Federation only covers
the most general provisions on the use of distance education in training specialists receiving
higher education. However, the insufficient and unclear content and slow improvement of
regulations hinder the full realization of the potential of distance education. Improving
specialists’ training requires developing quality standards for distance education resources and
university accreditation standards accounting for the use of these resources (BONDAREVA
et
al.
, 2020; GLADILINA
et al.
, 2020; MATRAEVA
et al.
, 2020).
As an example of the use of such standards, we can review the experience of Canada as
a country that occupies one of the highest places in the rating of the quality of higher education
(7th place) (HUMANITARIAN PORTAL, 2020).
The national collection of standards “Canadian Recommended E
-
learning Guidelines”
(CanREGS) developed in 2002 comprises quality criteria for the results of e-learning, for
teaching and support in the process of e-learning at the university, and for e-learning resources
–
issues of the content of courses, teaching staff, teaching methods, and quality and budget
expertise (BARKER, 2002). In 2004, Open eQuality Learning Standards manual was developed
based on CanREGS and later handed over to the European Institute for Electronic Learning
(EIfEL) for “open” non
-commercial use by both universities and public organizations.
Moreover, at the beginning of the 2000s, there were other collections of e-learning
implementation standards including guidelines for the design, development, and use of e-
courses, standards for the quality of education provided to students in foreign countries,
collections of best practices in distance learning and continuous professional education,
computer literacy standards, etc. In this context, under the auspices of QualitE-Learning
Assurance Inc. together with the QualitE-Learning Assurances Services (UK), the eQcheck e-
learning quality mark guaranteeing compliance with the international e-learning quality
standards was created. E-learning providers all over the world have been using this mark since
2002.
Accreditation of Canadian universities is carried out using the “Principles of
institutional quality assurance in Can
adian higher education” document developed by the
Association of Universities and Colleges of Canada, (AUCC) and applied to both in-person and
electronic and distance learning formats. There are accreditation and community provincial
organizations involved in regulation and planning regarding the education system including e-
learning. Definition of the principles, order, and frequency of accreditation of universities, as
image/svg+xml
Regulation of educational activities as a factor in ensuring the quality of higher education under restrictions (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3295
well the revision and evaluation of the quality of individual educational programs are carried
out at this level. Accredited Canadian universities have complete autonomy in choosing the
study programs and determining e-learning quality standards and regulatory framework.
Relevant guides and reference books are publicly available and can be used by educators and
administrators in developing, teaching, and evaluating the effectiveness of any course involving
e-learning.
To date, there exist seven universities that offer exclusively distance learning and are
united by the Canadian Virtual University Association (Canadian Virtual University, CVU).
The Association comprises universities the programs of which align with national standards for
e-learning (CANADIAN VIRTUAL UNIVERSITY, 2021) which provides potential students
with confidence in the quality of education provided there. Moreover, each university has a
distance and electronic learning department. Evaluation of education quality and effectiveness
conducted by the corresponding departments of distance and electronic learning is generally
composed of the following elements: -mandatory internal audits of all new programs and
courses, as well as courses that have been significantly changed; -evaluation of the effectiveness
of the schedule and sequence of courses in the program; -internal revisions of courses by the
teachers themselves; - student surveys; - revision of programs by external experts. The
procedure and results of these audits are publicly available. Evaluation of the effectiveness of
electronic and blended courses is conducted following the same quality standards used for
courses not involving new technologies and is included in the general regulatory framework.
Continuous improvement of the quality of education is ensured not only through external
accreditation but also as a result of internal testing of e-courses for compliance with the
appropriate standards. Universities publish collections of checklists used by teachers and
administration during the development and implementation of electronic courses, as well as in
online learning (CAMPUS ALBERTA, 2021). The currently functioning Technology Training
Centre and the AICT E-Learning Services provide high-quality technical support in developing,
teaching, and standardization of e-courses (UNIVERSITY OF ALBERTA, 2021). Thus,
characteristic features of standardization and regulation of the quality of Canadian electronic
and distance education include the presence of a broad methodological base (standards and user
guides); free access to the results of the curricula audit assessment; the lack of state regulation
with a high role of regional and university structures; the great role of experts and the
professional community in the regulation of the normative base for distance learning and the
assessment of learning outcomes.
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN and Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3296
Table 1
–
Comparative characteristics of quality standards for distance education in Russia
and Canada
Criteria
Russia
Canada
Models for quality assessment and
expertise of distance learning
The regulatory legal base is created
at the federal level
Non-state system of normative
regulation of distance education
(experts, professional community)
Quality standardization system,
availability of user manual
Incorporated into the general
quality management system;
hierarchical; carried out by the
state
Functions effectively at the level of
user manuals, electronic resources
accreditation system
Electronic resources accreditation
system
Practically absent and presented at
the individual level
Developed and implemented at the
level of provinces and individual
universities
Blended form of learning (hybrid
method, blended method)
At the stage of implementation; a
definition of “digital pedagogics”
is lacking
Widespread and compulsory in
postgraduate education
Source: Devised by the authors
Thus, a common feature of the implementation of distance learning in Canada and
Russia is its normative basis for universities, however, the system of quality standards and
certification of distance education programs is yet to be introduced in Russian education.
Conclusion
The mass use of distance learning methods during quarantine restrictions due to the
COVID-19 pandemic has given rise to the need to address several organizational and legal
problems of Russian universities. It appears that problems emerging in the process of transition
to distance forms of learning can affect the quality of Russian education negatively. Therefore,
their resolution has to be carried out along with the introduction of quality standards for distance
learning and certification of distance education programs that have proven themselves in world
practice. Thus, the hypothesis of the present study is confirmed.
image/svg+xml
Regulation of educational activities as a factor in ensuring the quality of higher education under restrictions (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3297
REFERENCES
ALEJANDRO, S. S. COVID-19 y su relación con la ciencia jurídica desde la perspectiva de
México.
Utopía y Praxis Latinoamericana
, v. 25, n. Extra 11, p. 48-64. 2020.
ANDREEV, A. A. Distantsionnoe obuchenie i distantsionnye obrazovatelnye tekhnologii
[Distance learning and distance educational tecknologies].
Otkrytoe obrazovanie
, v. 5, n.
100, p. 40
–
46.
ANISIMOV, N. Y. U.
et al
.
Analiticheskii doklad “Uroki “Stress
-testa
”: vuzy v usloviiakh
pandemii i posle nee” [Analytical report “Lessons of the “Stress test”: universities during the
pandemic and after it”]. Ministry of Science and Higher Educati
on of the Russian Federation,
2020. Available:
https://www.hse.ru/data/2020/07/06/1595281277/003_%D0%94%D0%BE%D0%BA%D0%
BB%D0%B0%D0%B4.pdf. Access: 10 Sept. 2021.
BARKER, K.
С
.
Canadian Recommended E-learning Guidelines (CanREGs)
. FuturEd.
2002. Available: https://futured.com/pdf/CanREGs%20Eng.pdf. Access: 10 Sept. 2021.
BONDARENKO, T. G. Comparative Analysis of Implementation Targets of National
Projects in Developed Countries Managing Socio-Economic Indicators in Russia.
Utopía y
Praxis Latinoamericana
, v. 25, n. Extra 5, p. 370-378, 2020.
BONDAREVA, V.; CHISTYAKOV, A.; SEMANINA, A.; ZETKINA, A. Adaptation of
Foreign Pre-Graduate Students in the University Multicultural Educational Environment.
Utopía y Praxis Latinoamericana
, v. 25, n. Extra 5, p. 196-205, 2020.
CAMPUS ALBERTA.
Course Standards, Support Standards, and
Administrative/Institutional Standards
. 2021. Available: http://docplayer.net/13654444-
Course-standards-support-standards-institutional-and-administrative-standards.html. Access:
10 Sept. 2021.
CANADIAN VIRTUAL UNIVERSITY.
Official website
. 2021. Available:
https://www3.laurentian.ca/cvuuvc/. Access: 10 Sept. 2021.
DUDIN, M. N.
et al
. Situation and problems of digitation of university management in Russia
and in three Latin-American countries (Argentina, Chile, and Brazil).
Formación
Universitaria
, v. 13, n. 6, p. 61-76, 2020.
DUDIN, M. N.
et al
. Modern religious education as the basis for the development of new
confessional relations.
European Journal of Science and Theology
, v. 15, n. 5, p. 133-146,
2019.
DYGANOVA, E. A.; YAVGILDINA, Z. M. Development of Student Musician's
Methodological Competence in Practice-Oriented University Environment.
Utopía y Praxis
Latinoamericana
, v. 25, n. Extra 5, p. 113-2-125, 2020.
FEDERAL STATE STATISTIC SERVICE.
Regiony Rossii. Sotsialno-ekonomicheskie
pokazateli
–
2019
[Regions of Russia. Socio-economic indicators - 2019]. Moscow: Rosstat,
2019.
image/svg+xml
Sergey Sergeevich ZENIN; Elena Vasilievna KAIMAKOVA; Oleg Nikolayevich MAKAROV; Yulia Lenarovna VYSOCHINA; Sergey
Anatolyevich MAKUSHKIN and Irina Sergeevna ZUNTOVA
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3298
GLADILINA, I.
et al
. Learning management system: Integration models of conventional and
distance education of students.
EurAsian Journal of BioSciences
, v. 14, p. 6153-6159, 2020.
HUMANITARIAN PORTAL.
Universitas 21
: Ranking of National Higher Education
Systems. 2020. Available: https://gtmarket.ru/ratings/u21-ranking-of-national-higher-
education-systems. Access: 10 Sept. 2021.
KAPLINA, S. E. Obrazovanie v usloviiakh pandemii COVID
–
19.
In
: SUKIASYAN, A. A.
(ed.),
Novaia nauka
: istoriia stanovleniia, sovremennoe sostoianie, perspektivy razvitiia. Ufa,
Russia: Omega Sayns, 2020. p. 241-244.
MARINONI, G.; VAN’T LAND, H. Impact of COVID
-19 on world higher education.
International higher education
, v. 102, p. 8-9, 2020. DOI:
https://doi.org/10.36197/IHE.2020.102.03
MATRAEVA, A. D.
et al
. Development of Creativity of Students in Higher Educational
Institutions: Assessment of Students and Experts.
Universal Journal of Educational
Research
, v. 8, n. 1, p. 8-16. 2020.
NIKULICHEVA, N. V.; DIAKOVA, O. I.; GLUKHOVSKAIA, O. S. Organizatsiia
distantsionnogo obucheniia v shkole, kolledzhe, vuze [Organization of distance learning at
school, college, university].
Otkrytoe obrazovanie
, v. 24, n. 5, p. 4-17. 2020, DOI:
10.21686/1818-4243-2020-5-4-17
ROGOZIN, D. M. Prepodavateli rossiiskikh vuzov o razvitii onlain-sredy v usloviiakh
pandemii [Russian university teachers on the development of the online environment in a
pandemic].
Monitoring the economic situation in Russia: trends and challenges of socio-
economic development
, v. 14, n. 116, p. 36-44, 2020. Available:
https://www.ranepa.ru/documents/2020_14-116_May.pdf. Access: 10 Sept. 2021.
RUSSIA. Federal law of the Russian Federation no. 273-
FZ of December 29, 2012. “On
Education in the Russian Federation” (as amended on June 8, 2020, entered into force on July
1, 2020).
Rossiiskaia Gazeta
, n. 303, 31 dez. 2012.
RUSSIA. O
rder of the ministry of science and higher education of the Russian
Federation no. 398 of March 14, 2020
. “On the activities of organizations under the
jurisdiction of the Ministry of Science and Higher Education of the Russian Federation in the
context of preventing the spread of a new coronavirus infection on the territory of the Russian
Federation”.
2020. Available: https://minobrnauki.gov.ru/ru/documents/id_4=1065. Access:
10 Sept. 2021.
SAVITSKAIA, N.
Posle pandemii vysshee obrazovanie uzhe ne budet prezhnim
[After
the pandemic, higher education will no longer be the same]. 2020. Available:
https://www.ng.ru/education/2020-03-25/8_7826_education1.html. Access: 10 Sept. 2021.
SHTYKHNO, D. A.; KONSTANTINOVA, L. V.; GAGIEV, N. N. Perekhod vuzov v
distantsionnyi rezhim v period pandemii: Problemy i vozmozhnye riski [Transition of
universities to a distance mode during the pandemic: Problems and possible risks].
Otkrytoe
obrazovanie
, v. 24, n. 5, p. 72-81, 2020.
image/svg+xml
Regulation of educational activities as a factor in ensuring the quality of higher education under restrictions (COVID-19)
RPGE
–
Revista on line de Política e Gestão Educacional, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-ISSN: 1519-9029
DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
3299
UNIVERSITY OF ALBERTA.
E-learning
. 2021. Available: https://www.ualberta.ca/media-
technology-studies/programs/mact/student-resources/
e-learning
.html. Access: 10 Sept. 2021.
VARTANOVA, M. L. Food supply of the population in the conditions of the global response
to the COVID-19 pandemic.
Revista Inclusiones
, v. 7, n. esp., p. 122-134, 2020.
ZENKOV, A. R.
Obrazovanie v usloviiakh pandemii: chto pokazyvaet krizis?
[Education
in the conditions of a pandemic: what does the crisis demonstrate?]. 2020. Available:
https://www.imemo.ru/news/events/text/obrazovanie-v-usloviyah-pandemii-chto-pokazivaet-
krizis. Access: 10 Sept. 2021.
How to reference this article
ZENIN, S. S.; KAIMAKOVA, E. V.; MAKAROV, O. N.; VYSOCHINA, Y. L.;
MAKUSHKIN, S. A.; ZUNTOVA, I. S. Regulation of educational activities as a factor in
ensuring the quality of higher education under restrictions (COVID-19).
Revista on line de
Política e Gestão Educacional
, Araraquara, v. 25, n. esp. 5, p. 3287-3299, Dec. 2021. e-
ISSN:1519-9029. DOI: https://doi.org/10.22633/rpge.v25iesp.5.16017
Submitted
: 13/03/2021
Required revisions
: 23/07/2021
Approved
: 19/11/2021
Published
: 30/12/2021
Processing and editing by Editora Ibero-Americana de Educação - EIAE.
Correction, formating, standardization and translation.