O aplicativo WhatsApp, lançado em 2019, é um recurso de troca de mensagens instantâneas largamente utilizado no mundo, contando com mais de 2 bilhões de assinantes (Loubak, 2020). No Brasil, cerca de 99% dos smartphones tinham o app instalado em fevereiro de 2022 (Mobile Time/Opinion Box, 2022). Esses dados permitem entender que a maioria da população é capaz de operá-lo. O app possibilita o uso de emojis e stickers (imagens que simbolizam emoções e outros elementos) e também de vídeos curtos do TikTok que é uma rede social muito popular de distribuição de vídeos curtos, cuja plataforma oferece um grande número de recursos de edição de vídeo, como filtros, legendas, trilha sonora e gifs (Felix, 2020). Foi o app mais baixado do mundo em 2022, com 175 milhões de downloads (“TikTok lidera como…”, 2022).

O modelo Community of Inquiry-COI (Garrison et al., 1999) descreve o comportamento e funções dos participantes de comunidades digitais em contextos educacionais de educação superior. Traz significativa contribuição a este estudo pela caracterização das atividades nesses ambientes. O modelo compreende três dimensões de atuação dos agentes: (i) presença cognitiva; (ii) presença letiva e (iii) presença social (Tabela 1).

O modelo utilizado é compatível com os objetivos deste estudo por mapear a feição das interações ocorridas no ambiente e, com isso, permitir sua aplicação no caso em estudo, além de servir de base a um modelo derivado que incorpora as particularidades da plataforma estudada. As três dimensões das interações no ambiente dão suporte à análise, interpretação e quantificação das manifestações dos participantes.

O estudo foi realizado em uma IES pública, com mais de 50 mil alunos e 137 cursos (Diretoria de Avaliação e Informações Gerenciais, e Decanato de Planejamento, Orçamento e Avaliação Institucional, 2020) durante a pandemia. A equipe docente da disciplina Treinamento, Desenvolvimento e Educação-TD&E, do curso de Psicologia, foi composta por uma professora doutora, um aluno de doutorado em Psicologia em estágio de prática docente e duas graduandas em Psicologia, que exerceram o papel de monitoras.

Essa equipe foi responsável pelas adequações no desenho instrucional e pela condução da disciplina, ministrada de forma online, em virtude dos protocolos de isolamento social. A equipe adequou previamente parte dos elementos integrantes do desenho instrucional, enquanto outros ajustes foram sendo providenciados e implantados no decorrer do semestre.

Os ajustes mantiveram a estrutura geral da disciplina — conteúdo, ordenação das atividades e parâmetros de avaliação — enquanto cronograma, carga horária, avaliação e recursos instrucionais foram adaptados, dada a sua maior flexibilidade e variedade de modelos disponíveis. As avaliações da disciplina foram feitas por meio de 18 trabalhos formativos e uma apresentação final prática, somativa, contemplando todo o conteúdo do curso. A carga horária foi redistribuída para uma aula expositiva e um encontro de supervisão, ambos de 50 minutos, pois as duas aulas expositivas síncronas semanais de 100 minutos mostraram-se menos engajadoras em modo online.

O objeto principal em estudo é a Turma 2, ministrada online. A Turma 1 e a Turma 3 foram ministradas presencialmente e foram utilizadas como parâmetros comparativos em termos de volumes de expressões e dos perfis dos indivíduos, criando parâmetros para as comparações realizadas. A Turma 2 era composta por 24 participantes, sendo 20 alunos e 4 docentes. As características dos integrantes estão descritas na Tabela 2. As turmas estão em ordem sequencial cronológica de realização: Turma 1 (T1), Turma 2 (T2) e Turma 3 (T3). A ordem sequencial atendeu à função de destacar as diferenças de resultados e comportamento em três pontos temporais consecutivos.

O único parâmetro de destaque é a predominância significativa do gênero feminino nas turmas, com média geral de participação de 68,68% (DP = 6,24), contudo esses dados criam boas condições de comparação entre os três conjuntos. As turmas da disciplina são únicas por semestre e possuem características semelhantes de indivíduos. O desenho instrucional é, em essência (objetivos, conteúdo, método e recursos), comum às três turmas, à exceção da T2 (objeto do estudo), na qual alguns elementos foram adaptados ao novo contexto, principalmente a modalidade de ensino.

O estudo levantou dados por meio de quatro fontes: duas primárias (corpus do grupo de WhatsApp e entrevistas) e duas secundárias (escores de desempenhos e dados sociográficos). O conjunto de dados relativos ao conteúdo do grupo no aplicativo foi obtido pelo download de 2,62 mil mensagens registradas pelos integrantes da T2 no grupo de WhatsApp. As mensagens e arquivos foram gravados no computador pessoal do pesquisador. A coleta de dados foi realizada na semana de conclusão do semestre, após a divulgação dos resultados da avaliação final dos alunos.

O download do conteúdo do chat (conversa) é uma função disponível no aplicativo e registra todas as expressões e dados correlatos: data e hora do registro, usuário, texto e também todos os anexos, além de algumas mensagens automáticas do aplicativo, como a saída de algum usuário, por exemplo. Todas as expressões, salvo as automáticas do sistema, foram consideradas válidas e compuseram o corpus de análise. O download grava automaticamente o conteúdo em formato texto (“*.txt”) e pode ser lido em aplicativo de edição de texto e ser convertido para outros formatos para outros propósitos, como o PDF.

Utilizamos o editor de texto para a localização, tipificação e quantificação dos anexos, tendo como código as extensões dos arquivos (opus, jpg, xlsx, docx, mp4 e pdf). Esse aplicativo também se prestou à operação de anonimização dos usuários, substituindo todas as identificações por códigos arbitrários a fim de preservar os dados dos usuários. O conjunto resultante das operações foi convertido para o formato “*.pdf”, servindo de base para as categorizações e contagens de registros codificados, realizadas em aplicativo de análise de conteúdo. Ao final, o corpus somou 172 páginas contendo 2.618 mensagens.

Todos os participantes da disciplina eram membros integrantes do grupo no aplicativo. As mensagens do aplicativo possuem expressões típicas do sistema, aproveitadas para outros levantamentos. Por exemplo, a expressão “[16/02/23 16:35:35] +55 NN 00000-0000: Agora entendi”, contém data, hora, a identificação do participante (telefone celular) e mensagem. O código que substituiu o número do celular serviu para a localização e contabilização de intervenções dos participantes. O conjunto de dados também contém os anexos registrados de modo integral — estes arquivos ficam gravados no ambiente do grupo do WhatsApp. O app permite a expressão de variados conteúdos, diferentes em forma, conteúdo e função. Alertas, instruções de tarefas, resolução de dúvidas, mensagens de estímulo, além de arquivos anexos (arquivos de texto, áudio e instruções) são bons exemplos. Observa-se, adicionalmente, o uso significativo de emojis para reforço e destaque de ideias. A Tabela 3 apresenta uma subamostra dessas mensagens selecionadas por conveniência, retiradas do conteúdo.

A entrevista semiestrututrada com os egressos da T2 sobre a disciplina foi realizada por meio de questionário em formato de texto aberto e consolidado em planilha eletrônica para análises. A técnica avalia o evento em nível de reação (Hamblin, 1978). Os convites para a participação dos egressos na entrevista foram encaminhados em correio eletrônico em três ondas consecutivas, com intervalos de sete dias, com a finalidade de aumentar o volume de respostas. O questionário foi composto por cinco perguntas abertas: 1) “Qual foi, de modo geral, a sua percepção sobre o desenvolvimento da disciplina?”; 2) “Quais os benefícios percebidos na adoção do modelo totalmente online?”; 3) “Quais as dificuldades percebidas e como você as enfrentou?”; 4) “Como você avalia a utilização das plataformas usadas na disciplina?” e 5) “Quais sugestões você teria para a disciplina?” O questionário foi distribuído após o fim do semestre da T3, perfazendo um período próximo de 12 meses após a realização da turma em estudo.

Os dois últimos conjuntos de dados levantados foram: escores de desempenho acadêmico proveniente das avaliações de aprendizagem, levantados nos diários digitais de classe e dados sociográficos levantados nos sistemas do Programa de Pós-graduação em Psicologia Social do Trabalho e das Organizações-PPG-PSTO.

A equipe de pesquisa combinou diferentes técnicas de análises, a fim de conferir maior confiabilidade aos dados e à validade dos achados, conforme a Tabela 4.

Os quatro conjuntos de dados foram analisados como segue: (i) os conteúdos extraídos das mensagens de grupos do app (texto e emojis) que foram objeto de análise com base no modelo COI, adaptado aos objetivos deste trabalho, categorizando e mensurando as interações entre os participantes; (ii) as entrevistas foram examinadas por meio da análise de conteúdo conforme as diretrizes de Laurence Bardin (1977/2011), identificando e categorizando ideias expressas pelos egressos sobre a experiência na disciplina como um todo, mostrando a percepção dos egressos sobre estratégias e recursos; (iii) os resultados de desempenho acadêmico por meio do cálculo de médias das notas dos trabalhos formativos e do trabalho final e, por fim, (iv) dados sociográficos (idade e gênero) com o objetivo de caracterizar o universo dos participantes e dar sentido às comparações de perfis entre as turmas em estudo. Como descrito, a pluralidade de usos pode trazer muitas pistas de como o aplicativo é utilizado em contexto de ensino e das contribuições que podem surgir.

Na aplicação do modelo COI, adaptamos as classificações das interações no ambiente face às características do contexto e os objetivos do estudo. Os elementos foram interpretados como categorias e foram criadas 7 subcategorias para detalhar os papéis dos agentes do grupo na disciplina (Tabela 5). As definições das categorias (terceira coluna na Tabela 1) como descrição das ações permanecem na nova proposta, mas foram omitidas para efeito de praticidade. Os indicadores foram usados como em sua função original com ligeiras diferenças, como no caso dos emojis, que operaram com funções além de expressões sociais. Duas categorias foram criadas para o exame dos emojis.

A presença letiva docente tem a mesma natureza da definição original, com a inclusão da função motivadora. A presença letiva discente identifica a atuação dos estudantes nas funções típicas dos docentes. Algumas expressões não encontraram abrigo nas definições e foram classificadas apenas como presença letiva discente. As subcategorias referentes aos emojis buscam trazer à luz o papel desse recurso de linguagem no apoio às atividades típicas de comunicação no ambiente educativo, pois produzem maior participação educativa no app (Reeves et al., 2022). Essas expressões são típicas do aplicativo e sua categorização tem um perfil peculiar. A Tabela 6 apresenta uma subamostra das intervenções no app selecionada por conveniência a fim de clarificar a categorização dessas expressões.

Os avaliadores da categorização do corpus do aplicativo utilizaram planilha fornecida pela equipe de pesquisa, por meio eletrônico, contendo instruções e amostras do corpus com as mensagens categorizadas para a avaliação da clareza e pertinência das categorias propostas e também para o registro de considerações, que serviram de insumo para ajustes nas categorias e melhor interpretação do corpus. Havia espaço para o registro dos escores que avaliaram o quanto as categorias representavam as ideias expressas pelos participantes por meio de uma escala de 1 a 5, onde 1 quer dizer não representa; 2, representa pouco; 3, representa; 4, representa muito e 5, representa completamente. Foi disponibilizado um recorte de 126 expressões a fim de viabilizar as contribuições, dada a extensão do texto. A seleção, por conveniência, definiu expressões contendo ocorrências de todas as categorias. A consolidação mostrou uma média de 3,39 (DP: 1,20) para os 9 itens da escala adaptada, configurando bom índice de concordância entre os avaliadores.

O conjunto de emojis foi objeto de análise de conteúdo (Bardin, 1977/2011) em separado, a fim de explicitar sua natureza e função no ambiente. Foram identificadas 8 categorias na subamostra da Tabela 7, selecionada por conveniência: 1) afeto, indicando emoções positivas (gostar, amar); 2) estímulo e aprovação, como feedbacks; 3) celebração, usado em comemorações; 4) indicação de ações, como orientações de atividades; 5) sinalizadores/indicadores, como definição de prazos e datas; 6) identificação pessoal, reconhecimento dos indivíduos por seus traços fenotípicos; 7) estado de espírito, indicando o estado emocional do indivíduo e 8) expressões independentes, expressões que não apresentaram um significado consistente o suficiente para constituir uma categoria. Os trechos mostram o papel de caracterização e reforço de alguma situação presente no grupo. A repetição dos símbolos, traduzindo a intensidade da expressão, é relevante na compreensão do comportamento dos participantes.

A análise de conteúdo desse conjunto não atendeu a um dos princípios da técnica usada, que é a exclusão mútua, pelo qual dois conteúdos não poderiam estar na mesma categoria, contudo alguns emojis estão presentes em alguma expressão de natureza diversa. No caso: “E o que vcs precisam fazer? 😅 […] Leiam as instruções do Exercício Prático 1ª; […]”. A mensagem é de orientação, mas o emoji representa o esforço de forma jocosa, o que o coloca em outra categoria sem a ruptura da mensagem integral.

Categorizamos o conteúdo das entrevistas de acordo com a diferenciação e reagrupamento semântico das ideias dos participantes, guardando os princípios essenciais de exclusão mútua, homogeneidade, pertinência, objetividade, fidelidade e produtividade da técnica (Bardin, 1977/2011). A análise produziu 4 categorias: 1. Domínio e Operação dos Sistemas: refere-se à experiência de acesso e utilização dos recursos digitais; 2. Condução da Disciplina: refere-se à percepção dos participantes quanto à competência docente nos processos de alcance dos objetivos instrucionais da disciplina; 3. Estratégias de Planejamento: refere-se à percepção dos estudantes quanto à estrutura, técnicas e recursos do evento instrucional — esta categoria foi desmembrada em três subcategorias com o propósito de destacar as contribuições para a avaliação da disciplina —, 3ª. Pontos Positivos, 3b. Pontos Negativos e 3c. Uso dos aplicativos WhatsApp e TikTok e 4. Aspectos da Mobilidade: referente a percepções sobre a experiência de aprendizagem remota. A Tabela 8 organiza o tema.

As categorizações em ambas análises de conteúdo (entrevistas e expressões no ambiente do aplicativo) foram avaliadas por sete pesquisadores integrantes de um grupo de pesquisa da IES, com experiência na técnica de análise de conteúdo: três avaliaram o corpus do grupo do aplicativo e os emojis (um doutor e dois mestres), enquanto quatro avaliaram as entrevistas (dois mestres e dois graduados). No caso da entrevista, não se fez proveitosa uma validação com parte da amostra, dadas as circunstâncias e o pequeno número de participantes.

Os escores das avaliações de aprendizagem dos estudantes tiveram a função de comparar o desempenho acadêmico entre as turmas com o objetivo de se detectar e examinar possíveis diferenças associadas à modalidade aplicada (presencial e online). As comparações foram feitas por médias. Os dados sociográficos atenderam ao objetivo de permitir as comparações entre as turmas pela similaridade entre os participantes.

Os procedimentos éticos atendem aos princípios enunciados no Ofício Circular No 2/2021, do Ministério da Saúde Secretaria-Executiva do Conselho Nacional de Saúde Comissão Nacional de Ética em Pesquisa, quando cabível, dado que o ambiente possui características sui generis e particularidades típicas de cada estudo (Resolução 466/12, artigo XII.3). Para efeitos deste estudo, o correio eletrônico é também considerado como um ambiente digital.

O ambiente virtual (item 0.1 do Ofício, retro) da coleta é aberto a todos os participantes e dedicado exclusivamente à prática letiva, com baixa propensão de expressões de caráter sensível ou indesejável, ou a presença de dados que possam acarretar riscos maiores ao indivíduo. A coleta não registrou quaisquer dados sensíveis (item 0.4), bem como os dados pessoais (item 0.3) foram substituídos por códigos DiNN (Di: discente, NN: número codificado do aprendiz); DoNN, (idem para docentes); NiNN (não identificados); “XXXXXXXXX” para as matrículas. Os dados, gravados no computador do pesquisador, foram tratados com sigilo e compromisso de uso exclusivo para os fins da presente pesquisa sob condições seguras (item 3).

Os pesquisadores informaram os propósitos e procedimentos aos participantes por meio do próprio app e correio eletrônico, distribuindo também o Termo de Consentimento Livre Esclarecido-TCLE a todos os participantes aprendizes da Turma 2. Os envios de emails de convite à participação continham lista oculta dos destinatários sem qualquer identificação dos participantes (item 2.2.1, idem). A equipe assumiu formalmente o compromisso de utilizar os dados somente para os fins da pesquisa, manter os dados sob custódia do pesquisador e enviar os resultados a todos os participantes.

Em primeiro lugar, são apresentados os resultados numéricos que descrevem a quantidade e a natureza das interações no aplicativo. A Tabela 9 descreve o conjunto de ocorrências de mensagens e de arquivos anexos para proporcionar uma visão geral da distribuição dos conteúdos e a comparação entre os valores com vistas à detecção de possíveis fatores implicados na utilização do aplicativo produzidos pela diferença de modalidade.

Os números mostram o crescimento significativo do volume de mensagens na T2 (*), com respectivo aumento das participações por indivíduo, em média, (**). Os números dos anexos sugerem uma utilização de tais recursos razoavelmente padronizada, sem apresentação de tendências. Nota-se o uso expressivo de emojis (55,69%, DP: 492,90) na média geral das três turmas. Contudo, a tendência nas três turmas em sequência foi a redução do uso desse recurso. A Tabela 10 apresenta as relações entre a frequência de participação dos integrantes da disciplina no grupo do app, discriminado entre docentes e aprendizes.

A comparação entre a T1 e a T2 mostra um aumento de 46,91% nas interações e entre a T1 e a T3 uma retração de 5,16%, salientando o aumento de interações como fator associado ao modelo online. Mostra também o crescimento progressivo da participação dos discentes nos períodos: 30,53%, 47,13% e 72,57%. A redução na participação dos docentes 69,47%, 52,86% e 24,73% é compatível com o crescimento da participação dos aprendizes, dado que os volumes absolutos são relativamente próximos (nas duas turmas presenciais), sendo os números de participação dos docentes 544 e 418 intervenções.

A classificação e composição do conteúdo do corpus do grupo da disciplina no app estão apresentados na Tabela 11. O total apurado foi de 3256 expressões codificadas em: (i) presença letiva docente; (ii) presença letiva discente; (iii) presença social; (iv) emojis sociais e (v) emojis de orientação.

As presenças letivas são a grande maioria das manifestações, com maior presença dos docentes: 1381 ocorrências em face a 403 dos aprendizes em um total de 3256 registros codificados. Os dados numéricos exibem a discriminação entre os conteúdos diretamente relacionados às ações de ensino e aqueles de caráter acessório. Nota-se a expressiva participação das mensagens entre discentes com funções especializadas típicas dos docentes. Os emojis também se configuram em dois perfis distintos que dão suporte e reforço às mensagens dos participantes, colaborando, também, com a função educativa. A diferença numérica entre o total das mensagens e o total de mensagens codificadas devem-se ao fato de que os emojis estão, por vezes, inseridos em outras mensagens, produzindo uma inflação numérica.

Realizamos, adicionalmente, análise de conteúdo dos emojis do corpus que resultou em sete categorias, conforme Tabela 12. A Tabela sinaliza a predominância da utilização desses elementos em interações socioafetivas (categorias 1, 2, 3 e 7) sobre as funcionais, com efeitos práticos na disciplina (4 e 5). Sendo as categorias 6 e 8 sem definição precisa no contexto do estudo.

Com relação à volumetria dos emojis, há duas fontes de diferenças nos números tanto na análise de conteúdo (212) quanto na análise pelo COI (186): (i) emojis sem adesão no caso da análise de conteúdo e emojis utilizados em conjunto, em alguns dos casos, interpretados como uma só mensagem. Contudo, essas diferenças não têm influência nas análises e resultados de interpretação.

O resultado da análise de conteúdo das entrevistas realizadas com os egressos da disciplina mostra os temas de maior relevância na percepção dos aprendizes (Tabela 13). Essa análise objetivou criar focos de atenção aos elementos que possam ter relação com o desenvolvimento do desenho instrucional não só da disciplina, como implicações de natureza técnica no processo de ensino.

A categoria 3 concentra a maior parte das expressões dos participantes discentes, mostrando relativo predomínio de percepções positivas sobre a experiência desses participantes no ambiente online. Como o foco do artigo, em última análise, é a investigação sobre o desenho instrucional, esse destaque aponta para elementos de interesse na avaliação do modelo implantado relativos às estratégias adotadas.

A categoria 3b incluiu 5 URs que apresentavam sugestões, contrastando a percepção de falhas ou problemas com elementos que podem trazer contribuições. As 4 URs efetivamente de caráter negativo referiam-se ao mesmo elemento: a percepção do excesso de conteúdo. Note-se que os conteúdos não sofreram alterações na migração do modelo, o que sugere que, em modelos totalmente online, esse é um ponto a ser observado.

Como base para o entendimento do conteúdo categorizado, a Tabela 14 tem a função de tipificar as percepções dos aprendizes sobre elementos da disciplina, como estratégias; recursos e habilidades dos professores e monitores, que fundamentaram a categorização. Por motivos práticos, a tabela representa uma subamostra das categorias, selecionada por conveniência, para melhor compreensão de sua funcionalidade.

Apesar da tendência de avaliações positivas (Tabela 13), a Tabela 14 destaca pontos contrastantes, por exemplo, sobre a mobilidade que sugere diferenças das condições próprias do usuário, independentes das características da modalidade online, expressas na categoria 4.

Os resultados de aprendizagem estão expressos pelos escores dos estudantes nos exercícios realizados no decorrer da disciplina e na avaliação final, que contempla todo o programa da disciplina. A Tabela 15 mostra a média e o desvio padrão dos resultados de aprendizagem dos estudantes das três turmas.

Os escores de aprendizagem são organizados em uma escala de 1 a 10. O exemplo mostra que há muita similaridade nos resultados das três turmas, com leve queda nos escores da avaliação final na T2, (integralmente online). Ou seja, mesmo em condições consideradas mais problemáticas, os resultados se equivaleram àqueles das turmas presenciais. O novo modelo instrucional (totalmente online) não pôde ser testado, sugerindo uma estratégia que naturalmente apresentaria dificuldades a serem enfrentadas.

Esse dado sugere que o formato de avaliação possa haver afetado negativamente o desempenho dos discentes por ser a primeira vez que as apresentações finais foram realizadas totalmente online. Pode ser que os aprendizes não tenham desenvolvido habilidades específicas para esse fim, como a falta de domínio dos aparatos de apresentação online (programas, linguagem, recursos e outros no contexto).

A mobilidade mostrou-se uma característica positiva e motivadora na condução da disciplina. Como exemplo, o participante Di08 relata: “Além disso, é possível assistir à aula de qualquer lugar em que se sinta confortável”. Ainda alguns alunos acompanharam aulas fora da cidade, como o Di21; “eu tive a oportunidade de estar na minha cidade natal, enquanto desempenhava minhas atividades acadêmicas”. As análises sugerem também fluência nas plataformas de maneira geral (Silva e Behar, 2019; Tarouco, 2013).

As entrevistas confirmam a boa percepção das estratégias e formas de interação na disciplina, apontando adicionalmente predisposição e aceitação ao uso de soluções digitais (Tabelas 5 e 6), contudo há a presença de dificuldades de operação e no contexto da aprendizagem (espaço, família e outros). A análise do conteúdo aponta 40 menções positivas, 18 negativas e 4 neutras no conjunto total das entrevistas. Como efeito positivo paralelo, as ocorrências de mensagens em horários extraordinários foram insignificantes: 15,74% entre 19h00 e 06h59, e 0,84% entre 00h00 e 06h59.