Livro didático - avaliação por rubrica
Este material é um artigo a ser publicado na revista da USJ, com uso autorizado pelos autores para este curso.
3. Avaliação por rubrica na EaD
O desafio de elaborar avaliação por rubrica surgiu na formação de professores para a educação profissional, em um curso de pós-graduação a distância. Foram elaboradas rubricas para que, ao avaliar, o professor tivesse clareza sobre o que precisava ser avaliado em determinada tarefa e, ao mesmo tempo, para possibilitar aos alunos conhecerem, de antemão, os aspectos pelos quais seriam avaliados.
Em uma das unidades curriculares elaborou-se uma rubrica avaliativa para a seguinte tarefa:
Visando erradicar a disseminação de fake news em uma determinada comunidade, elabore uma proposta educativa, utilizando conceitos da educação inovadora, integrando pelo menos um dos eixos propostos por Moran. Preencha e entregue o template Desafio Presencial abaixo, mas antes, observe a forma como a tarefa será avaliada em Rubrica de Avaliação. A rubrica criada para avaliar a tarefa proposta está apresentada no Quadro 2.
Critérios Avaliativos |
Descritores de Desempenho e Pontuação |
|||
Coerência da escolha do público e sua justificativa com a proposta educativa e sua justificativa |
Não foi apresentado um ou mais elementos: público, justificativa do público, proposta educativa, justificativa da proposta educativa. 0 ponto |
Não há coerência entre a proposta educativa com a escolha do público, ou seja, haverá grande dificuldade de viabilizar a proposta educativa para o público escolhido. 1 ponto |
A proposta educativa apresenta coerência parcial com a escolha do público. 2 pontos |
A escolha do público, bem com sua justificativa apresenta coerência com a proposta educativa e sua justificativa. 3 pontos |
Coerência das ações escolhidas com o(s) eixo(s) indicado(s) por Moran |
Não houve definição de ações ou de eixo 0 ponto |
Não há evidência de que as ações propostas conseguem alcançar o que se pretende com o(s) eixo(s) escolhido(s) 1 ponto |
As ações propostas atendem parcialmente o que se pretende no(s) eixo(s) escolhido(s) 2 pontos |
As ações propostas estão coerentes com o que se pretende no(s) eixo(s) escolhido(s) 3 pontos |
Relação das ações/momentos com a proposta educativa e o público alvo |
Não foi preenchido um dos campos: ações/momentos; público alvo ou proposta educativa. 0 ponto |
Não foi possível identificar relação entre as ações/momentos educativos com a proposta educativa ou com o público alvo. 1 ponto |
Há incoerência das ações/momentos com a proposta educativa ou com o público alvo. 2 pontos |
As ações/momentos conseguem contribuir plenamente com a proposta educativa e em consonância com o público alvo. 3 pontos |
Preenchimento dos campos do formulário |
Um ou mais campos não foi preenchido 0 ponto
|
Preencheu todos os campos do formulário 1 ponto |
Quadro 2 - Rubrica para avaliação do desafio presencial
Fonte: Elaborado pelos autores (2019).
Como pode-se observar no quadro 2, optou-se por definir quatro critérios de avaliação. Os três primeiros critérios apresentam quatro descritores com seus respectivos níveis e desempenho. Para o último critério foram estabelecidos dois descritores.
O quadro 2 apresenta, portanto, os três elementos da rubrica, apontados por Popham (1997), que são: critérios, descritores e níveis de desempenho.
Para cada critério é possível estabelecer quantos níveis de desempenho forem necessários. Não há uma regra que estabeleça o mesmo quantitativo de descritores para todos os critérios.
Na outra atividade, os alunos precisavam elaborar a proposta de pesquisa para o Trabalho de Conclusão de Curso - TCC, organizando o tema, o problema, os objetivos, a justificativa da pesquisa, a metodologia a ser utilizada e deveriam iniciar a construção do referencial teórico, exercitando a elaboração de citações e referências, seguindo as normas da ABNT (Associação Brasileira de Normas Técnicas).
Para esta atividade, construiu-se a seguinte rubrica avaliativa apresentada no Quadro 3.
Critérios Avaliativos |
Descritores de Desempenho e Pontuação |
||
Critério 1: tema/problema/justificativa |
Deixou de apresentar o problema/desafio ou a justificativa 0 ponto |
Apresenta o problema/desafio mas este não está em formato de pergunta ou não encontra-se alinhado com o tema e com a justificativa 1 ponto |
Apresenta o problema/desafio em forma de pergunta, alinhado com o tema e com a justificativa 2 pontos |
Critério 2: objetivos alinhados com o desafio |
não apresenta os objetivos da pesquisa ou os objetivos não iniciam com verbos no infinitivo 0 ponto |
apresenta os objetivos da pesquisa iniciando com verbos no infinitivo, mas os objetivos não estão alinhados com o desafio 1 ponto |
apresenta os objetivos da pesquisa iniciando com verbos no infinitivo e estes estão alinhados com o desafio 2 pontos |
Critério 3: metodologia alinhada com desafio e objetivos da pesquisa |
não apresenta a metodologia a ser desenvolvida na pesquisa 0 ponto |
apresenta a metodologia a ser desenvolvida na pesquisa mas os tipos de pesquisa e/ou os instrumentos para coleta dos dados não são pertinentes ao desafio ou aos objetivos propostos 1 ponto |
apresenta a metodologia a ser desenvolvida na pesquisa e descreve os tipos de pesquisa e instrumentos para coleta dos dados pertinentes ao desafio e objetivos propostos 2 pontos |
Critério 4: fundamentação teórica - citações |
não redigiu o item fundamentação teórica ou apresentou todas as citações fora da norma ABNT 0 ponto |
redigiu a fundamentação teórica sem interligar as ideias dos autores ou deixou de apresentar um dos tipos de citação solicitados ou apresentou mais de uma citação fora da norma ABNT 1 ponto |
redigiu a fundamentação teórica interligando as ideias dos autores e apresentou corretamente, conforme normas da ABNT, todas as citações solicitadas. 2 pontos |
Critério 5: citações e referências |
não elaborou as referências ou todas as referências elaboradas estão em desacordo com a norma ABNT 0 ponto |
não utilizou no mínimo 3 referências diferentes ou apresentou pelo menos uma referência em desacordo com a norma ABNT ou deixou de referenciar algum dos autores citados 1 ponto |
utilizou, no mínimo, 3 referências diferentes, todas estão corretas de acordo com as normas da ABNT e todos os autores citados foram referenciados 2 pontos |
Quadro 3 - Rubrica para avaliação do TCC
Fonte: Elaborado pelos autores (2019).
Como pode-se observar no quadro 3, nesta rubrica optou-se por definir cinco critérios de avaliação com a mesma quantidade de descritores para cada critério.
O que muda substancialmente de um critério para outro é o descritor, pois este precisa ser coerente com o critério estabelecido, embora os níveis de desempenho apresentem a mesma escala.
Pode-se observar que as rubricas elaboradas contemplam todas as características necessárias para uma rubrica, conforme definido por Biagiotti (2005) e apresentadas no quadro 1: facilidade, objetividade, transparência, associação, reutilização, padronização e clarificação.
De forma geral o que pode ser constatado na apresentação destas rubricas, é que para avaliar uma atividade utilizando rubrica é importante, primeiramente, estabelecer quais critérios serão avaliados. Em um segundo momento, é preciso definir quantos níveis de desempenho serão necessários para avaliar cada critério. Por fim, descreve-se qual é o descritor para cada nível de desempenho. É importante que o descritor esteja claro para o aluno, a fim de que ele possa compreender como será avaliado na atividade em cada critério.
Como exemplo, no caso do critério 2 apresentado no quadro 3, primeiramente definiu-se qual o critério a ser avaliado: objetivos alinhados com o desafio. Em seguida, foram definidos os três níveis de desempenho: dois pontos, um ponto ou zero. Por último, para cada nível de desempenho, foi elaborada uma explicação – descritor - de como o aluno atinge cada uma dessas pontuações. Assim, o aluno visualiza, a priori, o que precisará fazer para obter a pontuação naquele critério.
Há casos em que a forma de avaliar um determinado critério é muito simples, tais como: fez ou não fez, certo ou errado, atende ou não atende, zero ou um. Independentemente dessa simplicidade, ainda assim, é necessário estabelecer os níveis de desempenho e os descritores, informando ao aluno, o que significa um nível e o outro.
Um exemplo disso pode ser observado no quadro 2, no último critério: preenchimento dos campos do formulário. Como a tarefa exigia obrigatoriamente o preenchimento de todos os campos do formulário, os níveis de desempenho definidos foram um e zero com seus respectivos descritores.