Livro didático - avaliação por rubrica

Este material é um artigo a ser publicado na revista da USJ, com uso autorizado pelos autores para este curso.

3. Avaliação por rubrica na EaD

O desafio de elaborar avaliação por rubrica surgiu na formação de professores para a educação profissional, em um curso de pós-graduação a distância. Foram elaboradas rubricas para que, ao avaliar, o professor tivesse clareza sobre o que precisava ser avaliado em determinada tarefa e, ao mesmo tempo, para possibilitar aos alunos conhecerem, de antemão, os aspectos pelos quais seriam avaliados.

Em uma das unidades curriculares elaborou-se uma rubrica avaliativa para a seguinte tarefa:

Visando erradicar a disseminação de fake news em uma determinada comunidade, elabore uma proposta educativa, utilizando conceitos da educação inovadora, integrando pelo menos um dos eixos propostos por Moran. Preencha e entregue o template Desafio Presencial abaixo, mas antes, observe a forma como a tarefa será avaliada em Rubrica de Avaliação. A rubrica criada para avaliar a tarefa proposta está apresentada no Quadro 2.

Critérios Avaliativos

Descritores de Desempenho e Pontuação

Coerência da escolha do público e sua justificativa com a proposta educativa e sua justificativa

Não foi apresentado um ou mais elementos: público, justificativa do público, proposta educativa, justificativa da proposta educativa.

0 ponto

Não há coerência entre a proposta educativa com a escolha do público, ou seja, haverá grande dificuldade de viabilizar a proposta educativa para o público escolhido.

1 ponto

A proposta educativa apresenta coerência parcial com a escolha do público.

2 pontos

A escolha do público, bem com sua justificativa apresenta coerência com a proposta educativa e sua justificativa.

3 pontos

Coerência das ações escolhidas com o(s) eixo(s) indicado(s) por Moran

Não houve definição de ações ou de eixo

0 ponto

Não há evidência de que as ações propostas conseguem alcançar o que se pretende com o(s) eixo(s) escolhido(s)

1 ponto

As ações propostas atendem parcialmente o que se pretende no(s) eixo(s) escolhido(s)

2 pontos

As ações propostas estão coerentes com o que se pretende no(s) eixo(s) escolhido(s)

3 pontos

Relação das ações/momentos com a proposta educativa e o público alvo

Não foi preenchido um dos campos: ações/momentos; público alvo ou proposta educativa.

0 ponto

Não foi possível identificar relação entre as ações/momentos educativos com a proposta educativa ou com o público alvo.

1 ponto

Há incoerência das ações/momentos com a proposta educativa ou com o público alvo.

2 pontos

As ações/momentos conseguem contribuir plenamente com a proposta educativa e em consonância com o público alvo.

3 pontos

Preenchimento dos campos do formulário

Um ou mais campos não foi preenchido

0 ponto

 

 

Preencheu todos os campos do formulário

1 ponto

Quadro 2 - Rubrica para avaliação do desafio presencial

Fonte: Elaborado pelos autores (2019).

Como pode-se observar no quadro 2, optou-se por definir quatro critérios de avaliação. Os três primeiros critérios apresentam quatro descritores com seus respectivos níveis e desempenho. Para o último critério foram estabelecidos dois descritores.

O quadro 2 apresenta, portanto, os três elementos da rubrica, apontados por Popham (1997), que são: critérios, descritores e níveis de desempenho.

Para cada critério é possível estabelecer quantos níveis de desempenho forem necessários. Não há uma regra que estabeleça o mesmo quantitativo de descritores para todos os critérios.

Na outra atividade, os alunos precisavam elaborar a proposta de pesquisa para o Trabalho de Conclusão de Curso - TCC, organizando o tema, o problema, os objetivos, a justificativa da pesquisa, a metodologia a ser utilizada e deveriam iniciar a construção do referencial teórico, exercitando a elaboração de citações e referências, seguindo as normas da ABNT (Associação Brasileira de Normas Técnicas).

Para esta atividade, construiu-se a seguinte rubrica avaliativa apresentada no Quadro 3.


Critérios Avaliativos

Descritores de Desempenho e Pontuação

Critério 1: tema/problema/justificativa

Deixou de apresentar o problema/desafio ou a justificativa

0 ponto

Apresenta o problema/desafio mas este não está em formato de pergunta ou não encontra-se alinhado com o tema e com a justificativa

1 ponto

Apresenta o problema/desafio em forma de pergunta, alinhado com o tema e com a justificativa

2 pontos

Critério 2: objetivos alinhados com o desafio

não apresenta os objetivos da pesquisa ou os objetivos não iniciam com verbos no infinitivo

0 ponto

apresenta os objetivos da pesquisa iniciando com verbos no infinitivo, mas os objetivos não estão alinhados com o desafio

1 ponto

apresenta os objetivos da pesquisa iniciando com verbos no infinitivo e estes estão alinhados com o desafio

2 pontos

Critério 3: metodologia alinhada com desafio e objetivos da pesquisa

não apresenta a metodologia a ser desenvolvida na pesquisa

0 ponto

apresenta a metodologia a ser desenvolvida na pesquisa mas os tipos de pesquisa e/ou os instrumentos para coleta dos dados não são pertinentes ao desafio ou aos objetivos propostos

1 ponto

apresenta a metodologia a ser desenvolvida na pesquisa e descreve os tipos de pesquisa e instrumentos para coleta dos dados pertinentes ao desafio e objetivos propostos

2 pontos

Critério 4: fundamentação teórica - citações

não redigiu o item fundamentação teórica ou apresentou todas as citações fora da norma ABNT

0 ponto

redigiu a fundamentação teórica sem interligar as ideias dos autores ou deixou de apresentar um dos tipos de citação solicitados ou apresentou mais de uma citação fora da norma ABNT

1 ponto

redigiu a fundamentação teórica interligando as ideias dos autores e apresentou corretamente, conforme normas da ABNT, todas as citações solicitadas.

2 pontos

Critério 5: citações e referências

não elaborou as referências ou todas as referências elaboradas estão em desacordo com a norma ABNT

0 ponto

não utilizou no mínimo 3 referências diferentes ou apresentou pelo menos uma referência em desacordo com a norma ABNT ou deixou de referenciar algum dos autores citados

1 ponto

utilizou, no mínimo, 3 referências diferentes, todas estão corretas de acordo com as normas da ABNT e todos os autores citados foram referenciados

2 pontos

Quadro 3 - Rubrica para avaliação do TCC

Fonte: Elaborado pelos autores (2019).

Como pode-se observar no quadro 3, nesta rubrica optou-se por definir cinco critérios de avaliação com a mesma quantidade de descritores para cada critério.

O que muda substancialmente de um critério para outro é o descritor, pois este precisa ser coerente com o critério estabelecido, embora os níveis de desempenho apresentem a mesma escala.

Pode-se observar que as rubricas elaboradas contemplam todas as características necessárias para uma rubrica, conforme definido por Biagiotti (2005) e apresentadas no quadro 1: facilidade, objetividade, transparência, associação, reutilização, padronização e clarificação.

De forma geral o que pode ser constatado na apresentação destas rubricas, é que para avaliar uma atividade utilizando rubrica é importante, primeiramente, estabelecer quais critérios serão avaliados. Em um segundo momento, é preciso definir quantos níveis de desempenho serão necessários para avaliar cada critério. Por fim, descreve-se qual é o descritor para cada nível de desempenho. É importante que o descritor esteja claro para o aluno, a fim de que ele possa compreender como será avaliado na atividade em cada critério.

Como exemplo, no caso do critério 2 apresentado no quadro 3, primeiramente definiu-se qual o critério a ser avaliado: objetivos alinhados com o desafio. Em seguida, foram definidos os três níveis de desempenho: dois pontos, um ponto ou zero. Por último, para cada nível de desempenho, foi elaborada uma explicação – descritor - de como o aluno atinge cada uma dessas pontuações. Assim, o aluno visualiza, a priori, o que precisará fazer para obter a pontuação naquele critério.

Há casos em que a forma de avaliar um determinado critério é muito simples, tais como: fez ou não fez, certo ou errado, atende ou não atende, zero ou um. Independentemente dessa simplicidade, ainda assim, é necessário estabelecer os níveis de desempenho e os descritores, informando ao aluno, o que significa um nível e o outro.

Um exemplo disso pode ser observado no quadro 2, no último critério: preenchimento dos campos do formulário. Como a tarefa exigia obrigatoriamente o preenchimento de todos os campos do formulário, os níveis de desempenho definidos foram um e zero com seus respectivos descritores.