CONSIDERATIONS FOR DEVELOPING EVALUATIONS OF ONLINE COURSES

ACHTEMEIER, Sue D.; MORRIS, Libby, V.; FINNEGAN, Catherine L.

Concepção e Avaliação em e-Learning

Concepção e Avaliação em e-Learning 26-04-23 2

Enquadramento

O texto é um estudo que classifica os princípios recolhidos a partir de uma extensa revisão da literatura que foca o que actualmente melhor se faz com vista a um ensino-aprendizagem eficaz em cursos on-line.   Nele, a partir de uma revisão dos instrumentos de avaliação actualmente em uso em  treze instituições da Geórgia e vários cursos on-line a nível nacional, procura encontrar-se a presença desses princípios nos itens recolhidos. (EUA)

Concepção e Avaliação em e-Learning 26-04-23 3

Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento

As boas práticas no processo de ensino-aprendizagem devem:(Chickering & Gamson)

Enc

oraj

ar o

con

tact

o en

tre o

alu

no e

o

prof

esso

r

Enc

oraj

ar a

co

oper

ação

ent

re

estu

dant

es

Enc

oraj

ar a

ap

rend

izag

em a

ctiv

a

Enf

atiz

ar te

mpo

na

tare

fa

Com

unic

ar

expe

ctat

ivas

alta

s

Res

peita

r div

erso

s ta

lent

os e

form

as

de a

pree

nder

Concepção e Avaliação em e-Learning 26-04-23 4

Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento

-A avaliação deve ser precedida dos resultados a obter

-A avaliação deve distinguir as questões formativas e sumativas

-A avaliação tem de ter a forte capacidade de "buy-in“

-Devem ser utilizados múltiplos métodos

-Os resultados da avaliação devem ser usados e partilhados

- A própria avaliação deve ser avaliada

Asp

ecto

s pa

ra a

qua

lidad

e da

av

alia

ção:

(Pal

omba

& B

anta

)

Concepção e Avaliação em e-Learning 26-04-23 5

Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento

-Porque se realiza a avaliação? (Why)

-Foca o estudante ou a experiência do docente? É o desenho do curso? É a entrega? o que mudará?

- Que resultados estão a ser avaliados? a que nível? (What)

- Quando deverá ser realizada a avaliação? (When)

- Onde e como deverá ser realizada a avaliação? (Where)

- Quem deverá estar envolvido? (Who)

Questões para planear a avaliação:

(Cuseo)

Concepção e Avaliação em e-Learning 26-04-23 6

Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento

- Boas questões devem ser trabalhadas de forma clara e simples, sem serem enviesadas ou conduzidas para obter uma resposta isenta. - A cada questão deve corresponder um só assunto e apresentar  categorias de resposta adequadas.

- As questões devem seguir uma ordem lógica indo, preferencialmente, do geral para o específico, deixando as questões mais pessoais para o final do instrumento de avaliação.

Standards para obter respostas dos alunos:

(Marsh)

Concepção e Avaliação em e-Learning 26-04-23 7

Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento

-A aula encoraja os estudantes a uma participação activa no seu próprio processo de aprendizagem?

-É a aprendizagem fundamentada e efectiva, por exemplo: contextual, autentica, baseada em casos, exemplos?

-É encorajada a resolução de problemas de forma colaborativa?

-O feedback é compatível com o desempenho?

- A Instrução integra componentes motivacionais para a auto-eficácia e desafio?

Princípios para avaliar a aprendizagem duradoura em salas de aula on-line:

(Hacker & Neiderhauser)

Concepção e Avaliação em e-Learning 26-04-23 8

Ideias centrais que contribuem para a definição da qualidade da avaliação Enquadramento

Dimensões da aprendizagem interactiva que podem contribuir para a compreensão do que a instrução baseada na WEB pode comportar:

(Reeves & Reeves)

Papel do professor

Suporte metacognitivo

Aprendizagem colaborativa

Sensibilidade cultural

Flexibilidade estrutural

Fonte de motivação

Orientação da tarefa

Teoria da aprendizagem

Orientação dos

objectivos

Filosofia pedagógica

Concepção e Avaliação em e-Learning 26-04-23 9

Conclusões do Estudo:

A maior parte dos cursos não cumprem os princípios preconizados para boas práticas.

“This research found a great disjuncture between the guidelines suggested for effective teaching and learning and the principles that were evaluated by the end-of-course evaluation instruments. The absence of questions dealing specifically with the online environment suggests that many instruments used in the evaluation of online instruction were likely taken from traditional course settings and applied directly to evaluate computer-mediated instruction.”

Concepção e Avaliação em e-Learning 26-04-23 10

Conclusões do Estudo:

As avaliações dos cursos são "tendenciosas", ou seja, incidem sobre aspectos que levam aos resultados desejados.

Houve princípios nem sequer abordados.

“This failure to construct an instrument specific to the educational environment allows much important information to escape assessment and may introduce irrelevant questions and erroneous information into  the evaluation process.”

Concepção e Avaliação em e-Learning 26-04-23 11

Conclusões do Estudo:

Apenas 8 dos 18 princípios identificados como importantes para o ensino aprendizagem foram avaliados por esses instrumentos de avaliação.

Notavelmente ausentes estiveram perguntas sobre a cooperação entre os alunos e a aprendizagem activa, elementos importantes para a aprendizagem on-line.

Nenhuma das avaliações do curso questionou  se o aluno participou em conversas on-line com o "instrutor" ou colegas de turma durante o curso, embora o diálogo seja considerado fundamental como estratégia de ensino para a construção de uma comunidade de aprendizagem on-line.

Concepção e Avaliação em e-Learning 26-04-23 12

Conclusões do Estudo:

“A lesson learned from these observations is that evaluation instruments seem to include what someone decides to ask the students at a given time.”

Não parece que a teoria do que constitui a melhor  prática de ensino e de aprendizagem tenha sido considerada na elaboração destes instrumentos de avaliação.

Concepção e Avaliação em e-Learning 26-04-23 13

Recomendações:

Com base nos princípios de Cuseo, construir instrumentos de avaliação para o ensino - aprendizagem que permitam um "feedback" real sobre o curso implementado ou a implementar. 

“Results of this study suggest a need to go back to Cuseo’s guidelines and consciously make them the starting point for the construction or revision of any online course or faculty evaluation instrument .Before creating such an instrument, one might attempt to answer Cuseo’s questions (why, what, who, when and where).”

Concepção e Avaliação em e-Learning 26-04-23 14

Recomendações:

Se os sete princípios de Boas Práticas no Ensino de Graduação deverão ser abordados nas questões de avaliação, deve-se ter certeza de que tal acontece.

Podem também ser consideradas as questões sugeridas por princípios de Effective Teaching in the Classroom on-line, a fim de reforçar a utilidade de um instrumento para  avaliação de cursos on-line.

Concepção e Avaliação em e-Learning 26-04-23 15

Trabalho realizado por:

Luciana GrofMaria LealSónia ValenteTeresa Rafael