Nota ReforLit

Entenda como a Nota ReforLit é calculada.

A Nota ReforLit é um indicador que sintetiza a recepção de uma obra a partir de avaliações e recomendações de acadêmicos e outras vozes qualificadas, como pastores, autores, instituições e leitores com reconhecida formação ou experiência na área.

Ela não representa a qualidade da obra em si, nem pretende estabelecer uma avaliação definitiva sobre seu valor. Seu objetivo é indicar como a obra tem sido recebida, avaliada e recomendada nas fontes consideradas pelo ReforLit.

A nota é apresentada em uma escala de até 10 pontos e utiliza dois tipos de evidência: resenhas e recomendações.

Como as evidências são avaliadas?

Cada resenha ou recomendação recebe um valor entre 1 e 5, de acordo com o posicionamento apresentado pela fonte:

1 — Muito negativa: avaliação fortemente desfavorável. Os problemas identificados são predominantes, e a obra não é recomendada.

2 — Negativa: avaliação predominantemente desfavorável. A obra pode possuir qualidades, mas suas limitações são consideradas mais relevantes.

3 — Mista ou neutra: avaliação equilibrada, inconclusiva ou essencialmente descritiva, sem posicionamento claramente positivo ou negativo.

4 — Positiva: avaliação predominantemente favorável. A obra é considerada útil, relevante ou recomendável, ainda que existam ressalvas.

5 — Muito positiva: avaliação fortemente favorável. A obra é apresentada como referência, contribuição especialmente importante ou recomendação de destaque.

O valor atribuído procura representar o posicionamento da fonte, e não acrescentar uma nova avaliação independente do ReforLit.

Resenhas e recomendações possuem pesos diferentes

As evidências possuem pesos diferentes de acordo com seu tipo:

Resenha: peso 2
Recomendação: peso 1

Uma resenha, portanto, influencia o cálculo duas vezes mais do que uma recomendação de mesmo valor.

Essa diferença ocorre porque as resenhas consideradas pelo ReforLit apresentam análise mais desenvolvida da obra e estão submetidas a critérios editoriais mais rigorosos.

São necessárias pelo menos cinco evidências para que uma obra receba uma Nota ReforLit.

Por que utilizar um ajuste bayesiano?

Uma média simples pode produzir resultados enganosos quando existem poucas avaliações.

Imagine uma obra com apenas cinco evidências extremamente positivas. Sua média poderia colocá-la imediatamente entre as obras mais bem avaliadas do site, mesmo que sua recepção ainda esteja baseada em poucas fontes.

Para reduzir esse efeito, o ReforLit utiliza um ajuste bayesiano.

O cálculo parte de um valor de referência igual a 3, o ponto intermediário da escala de evidências, com peso inicial igual a 10.

Isso faz com que notas baseadas em poucas evidências permaneçam mais próximas do valor intermediário. Conforme novas resenhas e recomendações são adicionadas, a influência desse valor de referência diminui e a nota passa a refletir cada vez mais diretamente as evidências reunidas.

Quanto maior a quantidade de evidências, maior a confiança atribuída à recepção observada.

Como a Nota ReforLit é calculada?

A fórmula utilizada é:

\[ N = 2 \cdot \frac{ \displaystyle\sum_{i=1}^{n} v_i p_i + \mu_0 w_0 }{ \displaystyle\sum_{i=1}^{n} p_i + w_0 } \]

Em que:

\(N\) = Nota ReforLit;
\(v_i\) = valor da evidência \(i\), entre 1 e 5;
\(p_i\) = peso da evidência \(i\): 2 para resenha e 1 para recomendação;
\(\mu_0\) = valor de referência, definido como 3;
\(w_0\) = peso do valor de referência, definido como 10;
\(n\) = número de evidências consideradas.

Como no ReforLit \(\mu_0 = 3\) e \(w_0 = 10\), a fórmula pode ser simplificada:

\[ \boxed{ N = 2 \cdot \frac{ \displaystyle\sum_{i=1}^{n} v_i p_i + 30 }{ \displaystyle\sum_{i=1}^{n} p_i + 10 } } \]

Exemplo

Considere uma obra com:

  • três resenhas, avaliadas como 5, 4 e 5;
  • duas recomendações, avaliadas como 4 e 5.

Aplicando os pesos:

\[ \sum_{i=1}^{5} v_i p_i = (5 \cdot 2) +(4 \cdot 2) +(5 \cdot 2) +(4 \cdot 1) +(5 \cdot 1) = 37 \]

A soma dos pesos é:

\[ \sum_{i=1}^{5} p_i = 2+2+2+1+1 = 8 \]

Aplicando esses valores à fórmula:

\[ N = 2 \cdot \frac{37+30}{8+10} \]\[ N = 2 \cdot \frac{67}{18} \]\[ \boxed{N \approx 7{,}44} \]

Sem o ajuste bayesiano, essas mesmas evidências produziriam uma nota de 9,25. Como existem apenas cinco evidências, o ajuste reduz o impacto dessa amostra inicial.

Se novas avaliações confirmarem essa recepção positiva, a influência do ajuste diminuirá progressivamente.

Como interpretar a Nota ReforLit?

A Nota ReforLit não procura responder simplesmente:

“Quão bom é este livro?”

Ela procura responder:

“Como esta obra tem sido recebida por fontes qualificadas, considerando as evidências disponíveis?”

Por isso, a nota deve ser entendida como uma síntese da recepção documentada da obra, e não como uma medida absoluta de sua qualidade.

Ela também deve ser considerada em conjunto com outras informações disponíveis no ReforLit, como Complexidade, Enfoque, Perspectiva, Público-alvo e Abordagem. Uma obra pode ser altamente recomendada e, ainda assim, não ser a opção mais adequada para determinado leitor ou objetivo.

Como novas resenhas e recomendações podem ser incorporadas ao ReforLit ao longo do tempo, a Nota ReforLit também pode mudar conforme a base de evidências disponível.