Cenário Avaliação Digital nas UC de 1º ciclo UAb

Perceções e práticas de avaliação mediada por tecnologias digitais no 1º ciclo

Apresentação dos resultados

Elizabeth Souza Lúcia Amante

01

contexto

contexto

Tema da investigação: Avaliação Alternativa Digital no Ensino Superior: desafios para implementação de práticas avaliativas inovadoras no 1º ciclo (projeto aprovado pelo Conselho Científico em 23 de novembro de 2023)Doutoranda: Elizabeth Souza Orientadora: Lúcia Amante

02

questionário

questionário

Info

• Foi organizado a partir de sete dimensões.

• Tem como base teórica o Modelo PrACT.

• Composto por 47 questões, 41 de escolha múltipla e seis questões abertas, organizado em um formulário Google forms.

• Objetivos da pesquisa

03

resultados

Experiência docente

129 REPONDENTES

68,2% + de 20 anos no ES 36,4% + de 20 anos na UAb

pOR dEPARTAMENTO

pERFIL x GÉNERO

Plataforma avaliação final

63,4% Professores 36,6% Tutores

54% PlataformAbERTA 46% WISEflow

Nº de UCs que leciona

fAIXA ETÁRIA

Média de UCs: 2,68 Quantidade máxima: 7 UCs

67,9% entre os 51 e 60 anos 22,1% acima de 60 anos

Experiência docente

nº de turmas que leciona

Áreas de formação

Média de turmas: 3,51 Desvio padrão: 4,17 Ignorado o outlier (360)

Conforme classificação CNAEF.

Praticabilidade

Autenticidade

21 (8%)

25

26

10%

24(23%)

17(31%)

20%

10%

22 (6%)

31(46,5%)

30%

20%

40%

30%

50%

23(21%)

46(69,1%)

40%

60%

30 (70,4%)

44(38,7%)

50%

70%

28(90,7%)

41(95%)

60%

80%

27(89,9%)

90%

29(56,6%)

70%

42(66,7%)

80%

100%

45(73,5%)

11

20

19

18

90%

43(97%)

100%

100%

33(94%)

13

12(78,3%)

90%

15

100%

14 (64,4%)

80%

90%

70%

32(93,1%)

80%

60%

34 (95,6%)

40 (83%)

35 (44%)

70%

50%

60%

40%

36 (22,6%)

50%

30%

37 (8,6%)

40%

20%

30%

39 (40%)

10%

20%

10%

38 (11,8%)

Transparência

Consistência

Conclusões

Considerando as perceções e práticas reveladas pelos respondentes, é possível considerar que o processo de avaliação digital adotado pela UAb no 1º ciclo mostra-se aderente a boa parte dos parâmetros de qualidade definidos na estrurtura teórica adotada neste estudo (Modelo PrACT). Entretanto, em cada dimensão há aspetos a ter em atenção num momento de atualização do processo de avaliação.

Ainda que o nível de exigência do processo avaliativo seja elevado, tendo alto custo, a maioria dos respondentes percebe que os benefícios compensam o custo.

É aquela na qual se encontram mais aspetos a serem trabalhados no que diz respeito à qualidade da avaliação digital de competências.

Encontram-se os aspetos mais críticos, obervando pouco ou nenhum envolvimento e responsabilização dos estudantes no processo.

É aquela cujos aspetos estão mais alinhados aos parâmetros de qualidade definidos no Modelo para a avaliação digital.

oBRIGADA

ELIZABETH SOUZA elizabeth.souza@uab.pt

Modelo PrACT

Para saber mais

Impactos da IA na Avaliação Problemas de Autenticidade e Plágio/Integridade académica: "O surgimento de respostas geradas por ChatGPT e a dificuldade de identificar essa situação por parte dos softwares de deteção de plágio. A autenticidade dos trabalhos passou a ser um problema." "Impacto negativo: Cópia (não autorizada) por parte de alguns estudantes, a qual não é detetada através do Wiseflow (se outro equipamento - telemóvel, tablet - for usado perto do computador de teste a câmara não deteta a cópia), resulta em situações de avaliação incrementada (para quem copia) e de injustiça (para quem cumpre com as regras)." Desafios na Avaliação Final: "Nas provas finais, sendo perguntas simples, as mesmas podem ser respondidas por estudantes sem qualquer conhecimento da matéria, por meio da IA. É por isso importante as provas vigiadas. Nos trabalhos, o volume de texto e forma, perde relevo e não valorizo nos critérios de nenhuma UC, dado que pode ser obtido pela IA. Incoerências que ocorram num bom discurso, são mais penalizadas que anteriormente." Desenvolvimento de Competências e Reflexão Crítica: "Está a abrir-se a janela de aceitação docente das metodologias de projeto e outras orientada para avaliação do processo de aprendizagem, não apenas do produto final entregue."

Faixa etária

Estratégias para superar constrangimentos da IA na avaliação Aumento da Reflexão e Criatividade: "Elaboração de questões que apelem à criatividade e análise crítica por parte dos estudantes." "Valorizar mais o aspeto reflexivo e a fundamentação teórica com recurso aos textos estudados." Uso de Ferramentas e Métodos de Verificação: "Utilização de ferramentas de deteção de plágio." "Consulto a percentagem de plágio no Turnitin." Sensibilização dos Estudantes: "Sensibilização dos estudantes para os riscos (cognitivos e éticos) da sua utilização. Enfoque das atividades e critérios de avaliação no uso original, criativo e reflexivo dos recursos disponibilizados na UC para a resolução de situações concretas e atuais." Integração da IA no Processo Educativo: "Integrá-las ao trabalho e não proibi-las, criando regras que tornem a utilização transparente e planear atividades mais auténticas, que exija uma personalização das respostas."