SOCIALIZANDO UM INSTRUMENTO DE AUTOAVALIAÇÃO DE AULAS REMOTAS NA PÓS-GRADUAÇÃO
SOCIALIZACIÓN DE UN CUESTIONÁRIO DE AUTOEVALUACIÓN PARA ENSEÑANZA REMOTA EN LA POSTGRADUACIÓN
Maria do Carmo Meirelles Toledo CRUZ1
Vanda Mendes RIBEIRO2 Rafael Lima Medeiros FERREIRA3 Simone da Silva RODRIGUES4
RESUMO: Este artigo visa compartilhar um questionário utilizado para avaliar, por meio das percepções dos discentes, o ensino remoto ofertado no primeiro semestre da pandemia COVID-19, em dois de Programas de Pós-Graduação da área da educação. O questionário foi elaborado com os alunos, para a instituição de um clima favorável à avaliação. Sua versão final, foi disponibilizada por meio do Google Forms, com questões abertas e fechadas,
1 City University of São Paulo (UNICID), São Paulo – SP – Brazil. Professor of the Academic Master's Degree in Education, Professor of the Professional Master's Degree in Training of Educational Managers and Public Administrator. Doctorate in Public Administration and Government (FGV). ORCID: https://orcid.org/0000- 0003-4375-5270. E-mail: carminhameirelles@gmail.com
2 City University of São Paulo (UNICID), São Paulo – SP – Brazil. Professor of the Postgraduate Program in Education and of the Postgraduate Program in Training of Educational Managers. Member of the Network of Studies on Implementation of Public Educational Policies (REIPPE). Doctorate in Education (USP). ORCID: https://orcid.org/0000-0002-2275-7122. E-mail: vandaribeiro2@gmail.com
3 City University of São Paulo (UNICID), São Paulo – SP – Brazil. Doctorate student in the Postgraduate Program in Education. CAPES Scholar. ORCID: https://orcid.org/0000-0002-6689-0689. E-mail: faelmedeiros.br@gmail.com
4 City University of São Paulo (UNICID), São Paulo – SP – Brazil. Master's student in the Postgraduate Program in Education. CAPES Scholar. ORCID: https://orcid.org/0000-0003-1726-3547. E-mail: simonett8173@hotmail.com
tratando de: (a) caracterização do discente; (b) adesão ao isolamento; (c) infraestrutura da residência; (d) problemas e dificuldades; (e) situações enfrentadas, destacando as de saúde mental e/ou emocionais; e (f) aspectos positivos e a serem aprimorados. O questionário, enviado a 86 alunos, de 26/06/2020 a 12/07/2020, teve adesão de 65% deles. Os resultados permitiram à universidade a tomada de decisões visando favorecer o ensino e apoiar os alunos.
PALAVRAS-CHAVE: Coronavírus. Pós-graduação. Ensino remoto. Percepção discente. COVID-19.
RESUMEN: Este artículo pretende compartir un cuestionario utilizado para evaluar, a través de las percepciones de los discentes, la enseñanza remota impartida en el primer semestre de la pandemia COVID-19, en dos programas de posgrado del área de educación. El cuestionario se elaboró con los alumnos, para la institución de un clima favorable a la evaluación. Su versión final, se puso a disposición a través de Google Forms, con preguntas abiertas y cerradas, que tratan de: (a) caracterización del estudiante; (b) adhesión al aislamiento; (c) infraestructura de la residencia; (d) problemas y dificultades; (e) situaciones enfrentadas, destacando las de salud mental y/o emocional; y (f) aspectos positivos y a mejorar. El cuestionario, enviado a 86 estudiantes del 26/06/2020 al 12/07/2020, fue respondido por el 65% de ellos. Los resultados permitieron a la universidad tomar decisiones encaminadas a favorecer la enseñanza y el apoyo a los estudiantes.
PALABRAS CLAVE: Coronavirus. Posgraduación. Enseñanza remota. Percepción del estudiante. COVID-19.
This article aims to share a questionnaire used to evaluate, through the perceptions of the students, the remote teaching offered in the first semester of the COVID-19 pandemic, in two of the Postgraduate Programs in education. Due to the pandemic of the new coronavirus, many organizations needed to review and adapt to this moment of danger of contagion and people's health care. In the field of education, the teaching institutions, at all levels and stages, had to adapt to the impossibility of face-to-face teaching (COLEMARX, 2020; LÖWY, 2020). New challenges have been posed to higher education institutions (GOMES et al., 2020; PIMENTEL et al., 2020).
Some universities have chosen, as early as the first semester of 2020, to organize and adopt Emergency Remote Teaching in their courses, as stated by Arruda (2020). For the author, this medium differs from distance education (EAD) because the classes are transmitted “in instantaneous time”, facilitating interactions between students and teachers and allowing an organization of time that is closer to the face-to-face modality (ARRUDA, 2020, p. 262, our translation).
Arruda (2020) also states that information and communication technologies (ICTs) have provided resources to remote education, thus allowing the continuity of classes, preventing the removal of students from school units from compromising the quality of education. Moreover, ICTs were, according to the author, primordial to preserve the relationship between students, teachers, and other education professionals. However, this situation was not without costs:
Better-known European countries such as France, Spain, Portugal and England have adopted school bonding strategies through the mediation of digital information and communication technologies. In the great majority, the reports also present difficulties regarding the management and implementation of remote learning due to several factors, such as difficulties for students and teachers to follow the classes, lack of access of part of the population to information and communication technologies. The reports also show that the governments of these countries have established public policies to maximize technical access to equipment in order to increase equity in the teaching and learning process (ARRUDA, 2020, p. 260, our translation).
The instrument in question is embodied in this context. A search in the Scielo database, in August 2020, with the keywords “covid” and “postgraduate” and “Covid” and “higher education” did not identify any articles. Using the words “education” and “Covid”, 28 papers were identified, concentrated in studies from the health area. From education, two addressed basic education in times of pandemic and two others, the issue of funding relating COVID-19 and education. With the keywords “Covid” and “education”, 31 papers were identified, three of them dealing with basic education and one, with the challenge of funding federal universities in times of Covid. The others addressed issues related to the health area. At that moment, it was not identified, in Scielo, works on the evaluation of remote education through the perceptions of graduate students.
To broaden the search, a survey was conducted in Google Scholar and more than 90 articles were identified using the keywords “covid” and “postgraduate”; “student perception” and “covid”; and “covid” and “higher education”. Of 90 studies analyzed, three papers form were considered pertinent to this research, focusing on graduate students' perception of remote teaching in covid: Vercelli (2020); Manhães, Musial, and Guindani (2020); and Durso and Russo (2020).
Vercelli (2020) studies the perception of students in a professional master's degree in education and highlights learnings obtained and challenges to be faced. The use of technologies by students is one of the major difficulties identified. Students highlight as positive the learning to use different platforms; the optimization of time, since they do not
have to commute to the university; good interaction between professors and students, and the quality of the classes offered. For the author, the pandemic period brought challenges and new looks that need to be researched to identify the weaknesses of the use of remote teaching, but also what was learned from it.
Manhães, Musial, and Guindani (2020) highlight the perception of lato sensu postgraduate about less academic justice facing the use of ICTs in pandemic than in face-to- face teaching.
Durso and Russo (2020) conducted a quantitative research and identified the level of satisfaction of students in masters and doctoral programs in the business area. To measure the level of satisfaction about course adjustments in pandemic, the index of satisfaction with the changes was created. The data showed a “moderate” level of satisfaction. Personal characteristics and previous contact with long distance education courses are significant factors in the differentiations of motivation.
At that time of the beginning of the pandemic, it was observed a low number of articles in the Scielo database, which dealt with evaluation through the perceptions of Brazilian graduate students, about the introduction of remote teaching due to the pandemic, understanding it according to the definitions of Arruda (2020). None of them provided the research instrument used. This article aims to offer as a contribution a questionnaire tested in two Post-Graduation Programs considering that it was also useful for decision making in the face of problems detected.
The evaluative action presented by this article sought, through the perceptions of students about the remote teaching adopted during the first semester of the COVID-19 pandemic, to face the challenges of the field of educational evaluation. According to the literature, it is important to involve the subjects; to achieve simplicity; to be able to improve the life of institutions and people; to lead to negotiation and consensus building; and to have the evaluative process legitimized by decision makers (FERNANDES, 2007; FITZPATRICK; CHRISTIE; MARK, 2009).
Considering these principles, we sought to involve the students through the collective construction of the questionnaire, with the support of a research group of the institution. The first draft of the instrument, prepared by professors of the Postgraduate Programs, was based on the research of the Federal University of São Carlos (2020) about the limits and
potentialities of remote school activities in basic education. The instrument was discussed with the students and two pre-tests with students were carried out, in order to contribute to the improvement of the questions, to make them simple and easy to understand.
This procedure also aimed to build a favorable climate for the evaluative process (SOUZA; GATTI, 2015). The form was made available through Google forms. Seeking the legitimacy of the evaluation process, it was also discussed about the evaluation with the Program coordinators and professors. Moreover, the disclosure was carried out by the coordinators of the Postgraduate Programs. Students systematized the data, helped with the analysis, and disseminated the results of the research. The initiative was also presented to the Dean of Research of the University.
The questionnaire contained 32 questions, 29 of which were closed. The questions involved: a) characterization of the student (age, gender, race/color, income, scholarships, disability or reduced mobility, working hours, work in education, professional relationship);
b) adherence to isolation in the pandemic; c) infrastructure at home for the remote class (location, equipment, etc.); d) problems and difficulties (software used, carrying out the activities, etc.); e) situations faced (general, mental health and/or emotional, and family members with Covid); and f) positive aspects and those to be improved in the remote classes.
The final version of the questionnaire, evaluated and approved by the coordinators of the two Postgraduate Programs, has an Informed Consent Form (ICF) that presents the objectives of the study and offers the participant a field to opt or not to answer the questions.
The questionnaire was made available electronically, via Google Forms, between 06/26/2020 and 07/12/2020, to 86 post-graduates, distributed as follows: 52 students from the Master's in Education course; 12 from the Doctorate in Education and 22 from the Master's in Training of Educational Managers. From this universe of 86 investigated, the survey was adhered to by 56 respondents, which accounted for a total of 65% return of the instrument.
According to Chaer, Diniz, and Ribeiro (2011, p. 261), “one must pay special attention to the construction of the questions that will compose [a] questionnaire, because it is from them that one will be able, or not, to obtain the correct data”. Hill and Hill (1998) highlight the challenge of designing a good questionnaire. That is why it is relevant to share a tested instrument.
Gil (1999) presents some of the advantages of using this type of research instrument, among them, he cites the lower cost in relation to other means, the guarantee of anonymity of people, the fact that, in this modality, the person being researched chooses the best time to participate in the research.
The following are the questions formulated for the study, so that other institutions can use this instrument and its elaboration method to, if necessary, adapt and replicate the research in their units.
This instrument refers to a survey conducted by the Coordination of the Postgraduate Program in Education (PPGE) and Postgraduate Program for the Training of Educational Managers (PPGP-GE) with the aim of identifying how students are dealing with academic activities during the pandemic. Therefore, we request your contribution by filling out this questionnaire.
We also inform you that this questionnaire may be adapted and published, by means of research works, as long as the source and the way of elaboration are acknowledged. Therefore, please choose the option that best represents your interest in participating in this study:
( ) I am aware of the objective and wish to participate in this research. ( ) I do not wish to participate in this research.
( ) Professional Master in Training of Educational Managers ( ) Academic Master in Education
( ) Academic Doctorate in Education
( ) Yes
( ) No
( ) Man
( ) Woman
( ) Black ( ) Brown ( ) White
( ) Yellow
( ) Indigenous
( ) From 20 to 30 years
( ) From 31 to 40 years old ( ) 41 to 50 years old
( ) 51 to 60 years old
( ) More than 60 years old
( ) Yes. If “yes”, specify:
( ) No
( ) Less than 20 hours per week
( ) From 20 hours to 29 hours per week ( ) From 30 to 39 hours per week
( ) 40 hours weekly
( ) More than 40 hours per week ( ) Does not work
( ) Up to R$ 1,045.00
( ) Between R$ 1,046.00 and R$ 2,000.00 ( ) Between R$ 2,001.00 and R$ 5,000.00 ( ) Between R$ 5,001.00 and R$ 8,000.00 ( ) More than R$ 8,000
( ) Formal (education within the educational systems)
( ) Non-formal (learning initiatives that take place outside the school systems) ( ) I do not work in Education
( ) Yes, from the municipal public network ( ) Yes, from the state public network
( ) Yes, from the federal public network ( ) Yes, from private network
( ) I am a teacher, but I am not exercising the function/position ( ) I am not a teacher
( ) Early childhood education (daycare or preschool) ( ) Elementary school (initial or final years)
( ) High School
( ) Higher education
( ) Technological education and vocational training ( ) Distance education and educational technologies ( ) Youth and adult education
( ) Special Education
( ) Indigenous education ( ) Non formal education
( ) I do not work in Education
( ) Yes
( ) No
( ) Partially
( ) 1 person ( ) 2 people ( ) 3 people ( ) 4 people ( ) 5 people
( ) More than 5 people
( ) Yes, without symptoms
( ) Yes, with mild symptoms
( ) Yes, with strong symptoms ( ) Yes, with death
( ) No or I don't know
( ) 1 equipment ( ) 2 equipments ( ) 3 equipments ( ) 4 equipments ( ) 5 equipments
( ) More than 5 equipments
( ) 1 equipment ( ) 2 equipments ( ) 3 equipments ( ) 4 equipments ( ) 5 equipments
( ) More than 5 equipments
( ) Desktop
( ) Notebook or Laptop
( ) Tablet
( ) Cell Phone ( ) TV
( ) Yes
( ) No
( ) Broadband ( ) Radio
( ) Cable ( ) Phone
( ) I use the cell phone to access the internet ( ) Pen Modem
( ) Box
( ) Other. If you marked “Other”, specify:
( ) Single room ( ) Shared room ( ) Office
( ) Room or other space for collective use ( ) Non-residential space
( ) Other. If you marked “Other”, specify:
( ) Yes
( ) No
( ) Yes
( ) No
( ) Jitsi
( ) Blackboard ( ) Google meet ( ) Zoom
( ) Cisco webex
( ) Skype
( ) Hangouts
( ) I had no problem
( ) I had no difficulty ( ) Concentration
( ) Organization of studies
( ) Lack of support from teachers ( ) Overload with teleworking
( ) Overload with domestic chores
( ) Overload with schoolwork and children's classes ( ) Overload due to child care
( ) Other. If you marked “Other”, specify:
( ) I had no problems attending classes
( ) I don't have adequate equipment to be used in the classes ( ) I have limited internet access
( ) I share the equipment with other residents of the residence
( ) In the region where I live the internet is restricted and/or presents constant failures ( ) Other. If you marked “Other”, specify?
( ) I had no problems with the internet ( ) In a few classes
( ) In approximately half of the classes ( ) In more than half of the classes
( ) In all classes
( ) I had no problems
( ) Domestic chores overload
( ) Overload of professional tasks
( ) Need to help children with their school work and classes ( ) Extended childcare
( ) Other. If you marked “Other”, specify:
( ) Sadness
( ) Happiness ( ) Loneliness
( ) Feeling of abandonment
( ) Feeling of helplessness or powerlessness ( ) Anger
( ) Insomnia
( ) Anxiety and/or distress ( ) Fear of losing the job
( ) Fear of contracting the coronavirus ( ) Fear of losing family members
( ) Fear of dying
( ) Fear of facing an economic crisis ( ) Grief
( ) Panic crisis ( ) Depression
( ) Suicidal ideation ( ) Stress
( ) Other. If you marked “Other”, specify:
( ) Socialization among students ( ) Information sharing
( ) Performing joint works
( ) Reception by the teachers
( ) Other. If you marked “Other”, specify:
This article aims to share a questionnaire used to evaluate, through the perceptions of students, the remote teaching offered in the first semester of the COVID-19 pandemic, in two Postgraduation Programs in the area of education. The results of the evaluation allowed the
University, in which the two Postgraduate Programs are inserted, to replicate the questionnaire among the students of all its Postgraduate Programs, to obtain information that would subsidize support actions for its students and, in this way, contribute to circumvent, in the best possible way, the disruption caused by the social isolation measures that prevented face-to-face teaching.
Here are some of the decisions taken by the university with this purpose: a university partnership to make the internet available at an affordable price to students who have difficulty accessing the net; articulation of the Postgraduation with the Psychology Course with the consequent creation of a Psychotherapeutic Group to attend master's and doctoral students; communication through WhatsApp groups, by discipline and by program; expansion of the provision of remote support to students by the library.
The questionnaire was also used as the basis for a survey conducted by a Technical School of the Paula Souza Center of the São Paulo state government located in the Municipality of São Paulo.
Thus, with the disclosure of the research instrument and the methodological procedures adopted, it is expected that other Postgraduate Programs can use, criticize, improve, and disseminate the instrument presented here.
ARRUDA, E. P. Educação remota emergencial: elementos para políticas públicas na educação brasileira em tempos de Covid-19. Revista de Educação a Distância, Minas Gerais, v. 7, n. 1, 2020.
CHAER, G.; DINIZ, R. R. P.; RIBEIRO, E. A. A técnica do questionário na pesquisa educacional. Evidência, Araxá, v. 7, n. 7, p. 251-266, 2011.
COLEMARX. COLETIVO DE ESTUDOS EM MARXISMO E EDUCAÇÃO. Em defesa
DURSO, S. O.; RUSSO, P. T. Impactos da Covid- 19 em programas stricto sensu da área de negócios: possibilidades para o ensino à distância? In: USP INTERNACIONAL CONFERENCE IN ACCOUNTING: ACCOUNTING AS A GOVERNANCE MECHANISM, 20., 2020, São Paulo. Anais […]. São Paulo, SP: USP,2020. p. 1-5.
FERNANDES, D. Limitações e potencialidades da avaliação educacional. Lisboa, 2007.
FITZPATRICK, J.; CHRISTIE, C.; MARK, M. M. Evaluation in action: Interviews with expert evaluators. London: Sage, 2009.
GIL, A. C. Métodos e técnicas de pesquisa social. 5. ed. São Paulo: Atlas, 1999.
GOMES, V. T. S. et al. A pandemia da covid-19: repercussões do ensino remoto na formação médica. Rev. bras. educ. med., Brasília, v. 44, n. 4, e114, 2020.
HILL, M. M.; HILL, A. B. A construção de um questionário. Lisboa: Dinâmica, 1998.
JOYE, C. R.; MOREIRA, M. M.; ROCHA, S. S. D. Distance Education or Emergency Remote Educational Activity: in search of the missing link of school education in times of COVID-19. Research, Society and Development, v. 9, n. 7, p. 1-29, e521974299, 2020.
LÖWY, M. “Gripezinha” o neofascista Bolsonaro diante da epidemia. In: Quarentena: reflexões sobre a pandemia e depois. 1. ed. Bauru: Canal 6,2020. p. 147-151.
MANHÃES, F.; MUSIAL, N. T. K.; GUINDANI, R. A. Do ensino presencial ao EAD: Um estudo sobre percepção de justiça acadêmica durante a pandemia do COVID-19. In: CONGRESSO UFSC DE CONTROLADORIA E FINANÇAS, 10., 2020, Florianópolis.
PIMENTEL, F. S. C. et al. Atividades na pós-graduação utilizando as ferramentas digitais no contexto da crise da covid 19: análise qualitativa descritiva. Em Rede, Porto Alegre, v. 7, n. 1, p. 276-293, 2020.
SOUZA, C.; GATTI, B. Avaliação de instituição de ensino superior e autoavaliação educacional. Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Brasil). In: SEMINÁRIOS REGIONAIS SOBRE AUTOAVALIAÇÃO INSTITUCIONAL E COMISSÕES PRÓPRIAS DE AVALIAÇÃO (CPA), 2015, Brasília. Anais [...]. Organizado
por Claudia Maffini Griboski e Stela Maria Meneghel. Brasília, DF: Inep, 2015. p. 30-37.
UNIVERSIDADE FEDERAL DE SÃO CARLOS (UFSCAR). Programa de Pós-Graduação em Educação (campus Sorocaba). Relatório técnico-científico de pesquisa: Condições e dinâmica cotidiana e educativa na RMS (Região Metropolitana de Sorocaba/SP) durante o afastamento social provocado pelo coronavírus. Sorocaba, maio 2020.
VERCELLI, L. C. A. Aulas remotas em tempos de Covid-19: a percepção de discentes de um programa de mestrado profissional em educação. Revista @mbienteeducação, São Paulo, v. 13, n. 2, p. 47-60, maio/ago. 2020.
CRUZ, M. C. M. T.; RIBEIRO, V. M.; FERREIRA, R. L. M.; RODRIGUES, S. S.
Socializing a self-evaluation tool for remote classes in postgraduate courses. Temas em Educ. e Saúde, Araraquara, v. 17, n. 00, 021019, 2021. e-ISSN 2526-3471. DOI: https://doi.org/10.26673/tes.v17i00.15548
Responsible for the translation: Editora Ibero-Americana de Educação.
Translated by: Alexander Vinicius Leite da Silva - ORCID: https://orcid.org/0000-0002- 4672-8799.
SOCIALIZACIÓN DE UN CUESTIONÁRIO DE AUTOEVALUACIÓN PARA ENSEÑANZA REMOTA EN LA POSTGRADUACIÓN
SOCIALIZING A SELF-EVALUATION TOOL FOR REMOTE CLASSES IN POSTGRADUATE COURSES
Maria do Carmo Meirelles Toledo CRUZ1
Vanda Mendes RIBEIRO2 Rafael Lima Medeiros FERREIRA3 Simone da Silva RODRIGUES4
RESUMEN: Este artículo pretende compartir un cuestionario utilizado para evaluar, a través de las percepciones de los discentes, la enseñanza remota impartida en el primer semestre de la pandemia COVID-19, en dos programas de posgrado del área de educación. El cuestionario se elaboró con los alumnos, para la institución de un clima favorable a la
1 Universidade Cidade de São Paulo (UNICID), São Paulo – SP – Brasil. Professora do Mestrado Acadêmico em Educação, Professora do Mestrado Profissional em Formação de Gestores Educacionais e Administradora Pública. Doutorado em Administração Pública e Governo (FGV). ORCID: https://orcid.org/0000-0003-4375- 5270. E-mail: carminhameirelles@gmail.com
2 Universidade Cidade de São Paulo (UNICID), São Paulo – SP – Brasil. Professora do Programa de Pós- Graduação em Educação e do Programa de Pós-Graduação Formação de Gestores Educacionais. Membro da Rede de Estudos sobre Implementação de Políticas Públicas Educacionais (REIPPE). Doutorado em Educação (USP). ORCID: https://orcid.org/0000-0002-2275-7122. E-mail: vandaribeiro2@gmail.com
3 Universidade Cidade de São Paulo (UNICID), São Paulo – SP – Brasil. Doutorando no Programa de Pós- Graduação em Educação. Bolsista CAPES. ORCID: https://orcid.org/0000-0002-6689-0689. E-mail: faelmedeiros.br@gmail.com
4 Universidade Cidade de São Paulo (UNICID), São Paulo – SP – Brasil. Mestranda no Programa de Pós- Graduação em Educação. Bolsista CAPES. ORCID: https://orcid.org/0000-0003-1726-3547. E-mail: simonett8173@hotmail.com
evaluación. Su versión final, se puso a disposición a través de Google Forms, con preguntas abiertas y cerradas, que tratan de: (a) caracterización del estudiante; (b) adhesión al aislamiento; (c) infraestructura de la residencia; (d) problemas y dificultades; (e) situaciones enfrentadas, destacando las de salud mental y/o emocional; y (f) aspectos positivos y a mejorar. El cuestionario, enviado a 86 estudiantes del 26/06/2020 al 12/07/2020, fue respondido por el 65% de ellos. Los resultados permitieron a la universidad tomar decisiones encaminadas a favorecer la enseñanza y el apoyo a los estudiantes.
PALABRAS CLAVE: Coronavirus. Posgraduación. Enseñanza remota. Percepción del estudiante. COVID-19.
ABSTRACT: This article aims to share a questionnaire used to evaluate, through the perceptions of the students, the remote teaching offered in the first semester of the COVID-19 pandemic, in two of the Postgraduate Programs in the area of education. The questionnaire was prepared with the students, for the institution of a favorable climate for evaluation. Its final version was made available through Google Forms, with open and closed questions, dealing with (a) characterization of the student; (b) adherence to isolation; (c) infrastructure of the residence; (d) problems and difficulties; (e) situations faced, highlighting those of mental health and/or emotional; and (f) positive aspects and to be improved. The questionnaire, sent to 86 students from 06/26/2020 to 07/12/2020, was answered by 65% of them. The results allowed the university to make decisions aimed at favoring teaching and supporting students.
KEYWORDS: Coronavirus. Postgraduate studies. Remote teaching. Student perception. COVID-19.
Este artigo visa compartilhar um questionário utilizado para avaliar, por meio das percepções dos discentes, o ensino remoto ofertado no primeiro semestre da pandemia COVID-19, em dois de Programas de Pós-Graduação da área da educação. Devido à pandemia do novo coronavírus, muitas organizações precisaram rever e adequar-se a este momento de perigo de contágio e de cuidados com a saúde das pessoas. No âmbito da educação, as instituições de ensino, em todos os seus níveis e etapas, tiveram que se adequar frente à impossibilidade de realizar o ensino presencial (COLEMARX, 2020; LÖWY, 2020). Novos desafios foram colocados às instituições de educação superior (GOMES et al., 2020; PIMENTEL et al., 2020).
Algumas universidades optaram, logo no primeiro semestre de 2020, por se organizarem e adotaram o Ensino Remoto Síncrono Emergencial em seus cursos, conforme afirma Arruda (2020). Para o autor, esse meio se diferencia da educação a distância (EAD)
porque as aulas são transmitidas “em tempo instantâneo”, facilitando as interações entre alunos e professores e permitindo uma organização do tempo que se aproxima mais da modalidade presencial (ARRUDA, 2020, p. 262).
Arruda (2020) afirma, ainda, que as tecnologias de informação e comunicação (TIC) proporcionaram recursos à educação remota permitindo, assim, a continuidade das aulas, evitando que o afastamento dos estudantes das unidades escolares comprometesse a qualidade da educação. Além disso, as TICs foram, segundo o autor, primordiais para preservar a relação entre estudantes, professores e demais profissionais da educação. Entretanto, tal situação não foi sem custos:
Países europeus mais conhecidos, como França, Espanha, Portugal e Inglaterra adotaram estratégias de vínculo escolar por meio da mediação de tecnologias digitais de informação e comunicação. Na grande maioria, os relatos apresentam também dificuldades quanto à gestão e implementação da aprendizagem remota devido a fatores diversos, como dificuldades de alunos e professores acompanharem as aulas, falta de acesso de parcela da população às tecnologias de informação e comunicação. Os relatos demonstram ainda que os governos destes países estabeleceram políticas públicas para maximizar o acesso técnico a equipamentos, de maneira a ampliar a equidade no processo de ensino e aprendizagem (ARRUDA, 2020, p. 260).
O instrumental em tela se consubstancia nesse contexto. Pesquisa na base Scielo, em agosto de 2020, com as palavras-chave “covid” e “pós-graduação” e “Covid” e “educação superior” não identificou artigos. Por meio das palavras “educação” e “Covid” foram identificados 28 trabalhos, concentrados em estudos da área da saúde. Da educação, dois abordavam a educação básica em tempos de pandemia e outros dois, a questão do financiamento relacionando COVID-19 e educação. Com as palavras-chave “Covid” e “education”, apareceram 31 trabalhos, três deles tratavam da educação básica e um, do desafio do financiamento das universidades federais em tempos de Covid. Os demais abordavam questões referentes à área da saúde. Não foi identificado, naquele momento, trabalhos no Scielo sobre avaliação do ensino remoto por meio das percepções dos discentes de pós-graduação.
De forma a ampliar a pesquisa, foi realizado levantamento no Google Acadêmico e identificou-se mais de 90 artigos utilizando as palavras-chave “covid” e “pós-graduação”; “percepção discente” e “covid”; e “covid” e “ensino superior”. De 90 textos analisados, três trabalhos formam tidos como pertinentes à esta pesquisa, com foco na percepção dos discentes de Pós-graduação sobre o ensino remoto na pandemia: Vercelli (2020); Manhães, Musial e Guindani (2020); e Durso e Russo (2020).
Vercelli (2020) estuda a percepção dos alunos de um mestrado profissional de educação e destaca aprendizagens obtidas e desafios a serem enfrentados. O uso de tecnologias pelos alunos é uma das maiores dificuldades identificadas. Os alunos destacam como positivo a aprendizagem do uso de diferentes plataformas; a otimização do tempo, em função de não precisarem se deslocar de casa à universidade; boa interação entre professores e alunos e a qualidade das aulas oferecidas. Para a autora, o período de pandemia trouxe desafios e novos olhares que precisam ser pesquisados, para que se identifique as fragilidades do uso do ensino remoto, mas também o que se aprendeu com ele.
Manhães, Musial e Guindani (2020) destacam a percepção dos pós-graduados lato sensu sobre menos justiça acadêmica frente ao uso das TICs na pandemia do que diante do ensino presencial.
Durso e Russo (2020) realizaram uma pesquisa quantitativa e identificaram o nível de satisfação dos discentes em programas de mestrado e doutorado da área de negócios. Para medir o nível de satisfação sobre as adequações dos cursos na pandemia, foi criado o índice de satisfação com as mudanças. Os dados mostraram um nível “moderado” de satisfação. As características pessoais e o contato prévio com cursos de longa duração em educação a distância são fatores significativos nas diferenciações de motivação.
Naquele momento de início da pandemia observou-se um baixo número ainda de artigos na base Scielo, que tratavam de avaliação por meio das percepções dos discentes da pós-graduação brasileira, sobre a introdução do ensino remoto devido à pandemia, compreendendo-o segundo as definições de Arruda (2020). Nenhum deles aportava o instrumento de pesquisa utilizado. Esse artigo visa, oferecer como contribuição um questionário testado em dois Programas de Pós-Graduação considerando ainda que foi útil para a tomada de decisões frente a problemas detectados.
A ação avaliativa apresentada por este artigo buscou, por meio das percepções dos discentes sobre o ensino remoto adotado durante o primeiro semestre da pandemia COVID- 19, enfrentar os desafios do campo da avaliação educacional. Segundo a literatura é importante envolver os sujeitos; alcançar simplicidade; conseguir melhorar a vida das instituições e pessoas; levar à negociação e ao estabelecimento de consensos; e ter o processo
avaliativo legitimado pelos responsáveis pelas decisões (FERNANDES, 2007; FITZPATRICK; CHRISTIE; MARK, 2009).
Considerando os referidos princípios, buscou-se envolver os alunos por meio da construção coletiva do questionário em tela, com o apoio de um grupo de pesquisa da instituição. O primeiro esboço do instrumento, elaborado por professores dos Programas de Pós-Graduação, baseou-se na pesquisa da Universidade Federal de São Carlos (2020) sobre os limites e potencialidades do exercício das atividades escolares remotas na educação básica. O instrumental foi discutido com os alunos e dois pré-testes com discentes foram realizados, de forma a contribuir para o aprimoramento das questões, para se tornassem simples e de fácil entendimento.
Esse procedimento visou ainda a construção de um clima favorável ao processo avaliativo (SOUZA; GATTI, 2015). O formulário foi disponibilizado por meio do Google forms. Buscando a legitimidade do processo avaliativo, discutiu-se também, sobre a avaliação com os coordenadores dos Programas e professores. Ademais a divulgação foi realizada pelas coordenações dos Programas de Pós-Graduação. Alunos sistematizaram os dados; auxiliaram na análise; e na divulgação dos resultados da pesquisa. A iniciativa foi também apresentada à Pró-Reitoria de Pesquisa da Universidade.
O questionário continha 32 perguntas, das quais 29 fechadas. As questões envolviam:
a) caracterização do discente (idade, sexo, raça/cor, renda, bolsistas, deficiência ou mobilidade reduzida, jornada de trabalho, atuação na educação, vínculo profissional); b) adesão ao isolamento na pandemia; c) infraestrutura na residência para a aula remota (local, equipamento, etc.); d) problemas e dificuldades (softwares usados, realização das atividades, etc.); e) situações enfrentadas (gerais, de saúde mental e/ou emocionais, e de familiares com Covid); e f) aspectos positivos e aqueles a serem aprimorados nas aulas remotas.
A versão final do questionário, avaliada e aprovada pelas Coordenações dos dois Programas de Pós-Graduação, dispõe de um Termo de Consentimento Livre e Esclarecido (TCLE) que apresenta os objetivos do estudo e oferece ao participante um campo para optar ou não por responder às perguntas.
O questionário foi disponibilizado de forma eletrônica, via Google Forms, no período de 26/06/2020 a 12/07/2020, a 86 pós-graduandos, assim distribuídos: 52 alunos do curso de Mestrado em Educação; 12 de Doutorado em Educação e 22 de Mestrado em Formação de Gestores Educacionais. Desse universo de 86 investigados, a pesquisa teve adesão de 56 respondentes, o que contabilizou um total de 65% de retorno do instrumento.
De acordo com Chaer, Diniz e Ribeiro (2011, p. 261), “deve-se voltar especial atenção à construção das perguntas que comporão [um] questionário, pois é delas que se conseguirá, ou não, obter os corretos dados”. Hill e Hill (1998) destacam o desafio de elaborar um bom questionário. Razão pela qual faz-se relevante compartilhar um instrumento já testado.
Gil (1999) apresenta algumas das vantagens de se utilizar esse tipo de instrumento de pesquisa, dentre elas, cita o menor custo em relação a outros meios, a garantia do anonimato das pessoas, o fato de que, nessa modalidade, o pesquisado escolhe o melhor momento para participar da pesquisa.
Seguem, na íntegra, as questões formuladas para o estudo, de forma que outras instituições possam apropriar-se desse instrumento e da sua forma de elaboração para, em caso de necessidade, adequar e replicar a pesquisa em suas unidades.
Este instrumento se reporta a uma pesquisa realizada pela Coordenação do Programa de Pós-Graduação em Educação (PPGE) e Programa de Pós-Graduação Formação de Gestores Educacionais (PPGP-GE) com o objetivo de identificar como os discentes estão lidando com as atividades acadêmicas durante a pandemia. Dessa forma, solicitamos sua contribuição por meio do preenchimento deste questionário.
Informamos ainda que este questionário poderá ser adaptado e publicizado, por meio de trabalhos de pesquisa, desde que seja reconhecida a fonte e a forma de elaboração. Assim sendo, escolha a opção que melhor representa seu interesse em participar deste estudo:
( ) Conheço o objetivo e desejo participar desta pesquisa. ( ) Não desejo participar desta pesquisa.
( ) Mestrado Profissional em Formação de Gestores Educacionais ( ) Mestrado Acadêmico em Educação
( ) Doutorado Acadêmico em Educação
( ) Sim
( ) Não
( ) Homem
( ) Mulher
( ) Preta ( ) Parda
( ) Branca
( ) Amarela ( ) Indígena
( ) De 20 a 30 anos ( ) De 31 a 40 anos ( ) De 41 a 50 anos ( ) De 51 a 60 anos ( ) Mais de 60 anos
( ) Sim. Se “sim”, qual:
( ) Não
( ) Menos de 20h semanais ( ) De 20h a 29h semanais ( ) De 30 a 39h semanais
( ) 40h semanais
( ) Mais de 40h semanais ( ) Não trabalha
( ) Até R$ 1.045,00
( ) Entre R$ 1.046,00 a R$ 2.000,00 ( ) Entre R$ 2.001,00 a R$ 5.000,00 ( ) Entre R$ 5.001,00 a R$ 8.000,00
( ) Mais de R$ 8.000
( ) Formal (educação no âmbito dos sistemas de ensino)
( ) Não formal (iniciativas de aprendizagem que acontecem fora dos sistemas de ensino) ( ) Não atuo na área da Educação
( ) Sim, da rede pública municipal ( ) Sim, da rede pública estadual
( ) Sim, da rede pública federal
( ) Sim, da rede privada
( ) Sou professor, mas não estou exercendo a função/cargo ( ) Não sou professor
( ) Educação infantil (creche ou pré-escola)
( ) Ensino fundamental I ou II (anos iniciais ou finais ( ) Ensino médio
( ) Educação superior
( ) Educação tecnológica e formação profissional
( ) Educação a distância e tecnologias educacionais ( ) Educação de jovens e adultos
( ) Educação especial ( ) Educação indígena
( ) Educação não formal
( ) Não atuo na área da Educação
( ) Sim
( ) Não
( ) Parcialmente
( ) 1 pessoa ( ) 2 pessoas ( ) 3 pessoas ( ) 4 pessoas ( ) 5 pessoas
( ) Mais de 5 pessoas
( ) Sim, sem sintomas
( ) Sim, com sintomas leves ( ) Sim, com sintomas fortes ( ) Sim, com óbito
( ) Não ou não sei
( ) 1 equipamento ( ) 2 equipamentos ( ) 3 equipamentos ( ) 4 equipamentos ( ) 5 equipamentos
( ) Mais de 5 equipamentos
( ) 1 equipamento ( ) 2 equipamentos ( ) 3 equipamentos ( ) 4 equipamentos ( ) 5 equipamentos
( ) Mais de 5 equipamentos
( ) Desktop
( ) Notebook ou Laptop
( ) Tablet ( ) Celular ( ) TV
( ) Sim
( ) Não
( ) Banda larga ( ) Rádio
( ) Cabo
( ) Telefone
( ) Uso o celular para acessar a internet ( ) Pen Modem
( ) Box
( ) Outra. Se assinalou "Outra", qual:
( ) Quarto individual ( ) Quarto coletivo
( ) Escritório
( ) Sala ou outro espaço de uso coletivo ( ) Espaço não residencial
( ) Outro. Se assinalou "Outro", qual:
( ) Sim
( ) Não
( ) Sim
( ) Não
( ) Jitsi
( ) Blackboard ( ) Google meet ( ) Zoom
( ) Cisco webex
( ) Skype
( ) Hangouts
( ) Não tive problema
( ) Não tive dificuldade ( ) Concentração
( ) Organização dos estudos
( ) Falta de apoio dos professores ( ) Sobrecarga com o teletrabalho
( ) Sobrecarga com as tarefas domésticas
( ) Sobrecarga com trabalhos escolares e aulas dos filhos ( ) Sobrecarga devido aos cuidados com os filhos
( ) Outra. Se assinalou "Outra", qual:
( ) Não tive problemas para assistir às aulas
( ) Não tenho equipamento adequado para ser utilizado nas aulas ( ) Possuo acesso limitado à internet
( ) Compartilho o equipamento com outros moradores da residência
( ) Na região onde resido a internet é restrita e/ou apresenta falhas constantes ( ) Outro. Se assinalou "Outro", qual?
( ) Não tive problemas com a internet ( ) Em poucas aulas
( ) Em aproximadamente metade das aulas ( ) Em mais da metade das aulas
( ) Em todas as aulas
( ) Não tive problemas
( ) Sobrecarga de tarefas domésticas
( ) Sobrecarga de tarefas profissionais
( ) Necessidade de auxiliar nos trabalhos escolares e aulas dos filhos ( ) Ampliação dos cuidados com os filhos
( ) Outra. Se assinalou "Outra", qual:
( ) Tristeza
( ) Felicidade ( ) Solidão
( ) Sensação de abandono
( ) Sensação de incapacidade ou impotência ( ) Raiva
( ) Insônia
( ) Ansiedade e/ou angústia
( ) Medo de perder o emprego
( ) Medo de contrair o coronavírus ( ) Medo de perder entes familiares ( ) Medo de morrer
( ) Medo de enfrentar uma crise econômica ( ) Luto
( ) Crise de pânico ( ) Depressão
( ) Ideação suicida ( ) Estresse
( ) Outra. Se assinalou "Outra", qual:
( ) Socialização entre os alunos
( ) Compartilhamento de informações ( ) Realização de trabalhos conjuntos
( ) Acolhimento por parte dos(as) professores(as) ( ) Outra. Se assinalou "Outra", qual:
Este artigo visa compartilhar um questionário utilizado para avaliar, por meio das percepções dos discentes, o ensino remoto ofertado no primeiro semestre da pandemia COVID-19, em dois de Programas de Pós-Graduação da área da educação. Os resultados da avaliação permitiram à Universidade, na qual estão inseridos os dois Programas de Pós- Graduação, replicar o questionário entre os estudantes de todos os seus Programas de Pós- Graduação, visando obter informações que subsidiassem ações de suporte e apoio aos seus discentes e, desse modo, contribuísse para contornar, da melhor maneira possível, os transtornos causados pelas medidas de isolamento social que impediu o ensino presencial.
Seguem algumas decisões tomadas pela universidade com essa finalidade: parceria da universidade para disponibilizar a internet a um preço acessível aos discentes com dificuldade de acesso à rede; articulação da Pós-graduação com o Curso de Psicologia com consequente criação de um Grupo Psicoterapêutico para atendimento dos mestrandos e doutorandos; comunicação por grupos de WhatsApp, por disciplina e por programa; ampliação da prestação de apoio remoto aos estudantes pela biblioteca.
O questionário foi, ainda, utilizado como base para uma pesquisa realizada por uma Escola Técnica do Centro Paula Souza do governo do estado de São Paulo localizada no Município de São Paulo.
Desta forma, com a divulgação do instrumento de pesquisa e dos procedimentos metodológicos adotados, espera-se que outros Programas de Pós-graduação possam utilizar, criticar, aprimorar e disseminar o instrumental aqui apresentado.
ARRUDA, E. P. Educação remota emergencial: elementos para políticas públicas na educação brasileira em tempos de Covid-19. Revista de Educação a Distância, Minas Gerais, v. 7, n. 1, 2020.
CHAER, G.; DINIZ, R. R. P.; RIBEIRO, E. A. A técnica do questionário na pesquisa educacional. Evidência, Araxá, v. 7, n. 7, p. 251-266, 2011.
COLEMARX. COLETIVO DE ESTUDOS EM MARXISMO E EDUCAÇÃO. Em defesa
DURSO, S. O.; RUSSO, P. T. Impactos da Covid- 19 em programas stricto sensu da área de negócios: possibilidades para o ensino à distância? In: USP INTERNACIONAL CONFERENCE IN ACCOUNTING: ACCOUNTING AS A GOVERNANCE MECHANISM, 20., 2020, São Paulo. Anais […]. São Paulo, SP: USP,2020. p. 1-5.
FERNANDES, D. Limitações e potencialidades da avaliação educacional. Lisboa, 2007.
FITZPATRICK, J.; CHRISTIE, C.; MARK, M. M. Evaluation in action: Interviews with expert evaluators. London: Sage, 2009.
GIL, A. C. Métodos e técnicas de pesquisa social. 5. ed. São Paulo: Atlas, 1999.
GOMES, V. T. S. et al. A pandemia da covid-19: repercussões do ensino remoto na formação médica. Rev. bras. educ. med., Brasília, v. 44, n. 4, e114, 2020.
HILL, M. M.; HILL, A. B. A construção de um questionário. Lisboa: Dinâmica, 1998.
JOYE, C. R.; MOREIRA, M. M.; ROCHA, S. S. D. Distance Education or Emergency Remote Educational Activity: in search of the missing link of school education in times of COVID-19. Research, Society and Development, v. 9, n. 7, p. 1-29, e521974299, 2020.
LÖWY, M. “Gripezinha” o neofascista Bolsonaro diante da epidemia. In: Quarentena: reflexões sobre a pandemia e depois. 1. ed. Bauru: Canal 6,2020. p. 147-151.
MANHÃES, F.; MUSIAL, N. T. K.; GUINDANI, R. A. Do ensino presencial ao EAD: Um estudo sobre percepção de justiça acadêmica durante a pandemia do COVID-19. In: CONGRESSO UFSC DE CONTROLADORIA E FINANÇAS, 10., 2020, Florianópolis.
PIMENTEL, F. S. C. et al. Atividades na pós-graduação utilizando as ferramentas digitais no contexto da crise da covid 19: análise qualitativa descritiva. Em Rede, Porto Alegre, v. 7, n. 1, p. 276-293, 2020.
SOUZA, C.; GATTI, B. Avaliação de instituição de ensino superior e autoavaliação educacional. Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira (Brasil).
In: SEMINÁRIOS REGIONAIS SOBRE AUTOAVALIAÇÃO INSTITUCIONAL E COMISSÕES PRÓPRIAS DE AVALIAÇÃO (CPA), 2015, Brasília. Anais [...]. Organizado
por Claudia Maffini Griboski e Stela Maria Meneghel. Brasília, DF: Inep, 2015. p. 30-37.
UNIVERSIDADE FEDERAL DE SÃO CARLOS (UFSCAR). Programa de Pós-Graduação em Educação (campus Sorocaba). Relatório técnico-científico de pesquisa: Condições e dinâmica cotidiana e educativa na RMS (Região Metropolitana de Sorocaba/SP) durante o afastamento social provocado pelo coronavírus. Sorocaba, maio 2020.
VERCELLI, L. C. A. Aulas remotas em tempos de Covid-19: a percepção de discentes de um programa de mestrado profissional em educação. Revista @mbienteeducação, São Paulo, v. 13, n. 2, p. 47-60, maio/ago. 2020.
CRUZ, M. C. M. T.; RIBEIRO, V. M.; FERREIRA, R. L. M.; RODRIGUES, S. S.
Socializando um instrumento de autoavaliação de aulas remotas na pós-graduação. Temas em Educ. e Saúde, Araraquara, v. 17, n. 00, 021019, 2021. e-ISSN 2526-3471. DOI: https://doi.org/10.26673/tes.v17i00.15548