Knowing What Students Know e a avaliação de capacidades

A ideia mais conhecida é o triângulo da avaliação: cognição, observação e interpretação. As três partes devem ser desenhadas como um conjunto coordenado. Se uma falhar, o resultado pode ser consistente e ainda dizer muito pouco sobre a capacidade que interessa.

Cognição: o que significa progredir em um domínio

O primeiro vértice exige um modelo de como a competência se organiza e se desenvolve. Na educação, isso significa compreender quais conhecimentos, estratégias e formas de raciocínio importam em um domínio. Transferido para o trabalho, obriga a superar descrições como ter pensamento estratégico ou demonstrar liderança.

Uma arquitetura de capacidades precisa explicar o que muda entre os níveis. Podem mudar a complexidade dos problemas, a autonomia, o alcance das decisões, a qualidade do critério ou a capacidade de transferir o aprendizado para novas situações. Sem esse modelo, a avaliação apenas reúne impressões ao redor de um rótulo.

Esse ponto é especialmente valioso porque coloca o desenho antes do instrumento. Não se começa perguntando quais itens incluir, mas qual interpretação da capacidade se pretende sustentar.

Observação: quais tarefas podem revelar essa capacidade

O segundo vértice trata das situações que permitem observar manifestações relevantes. Uma capacidade não é vista diretamente. Observam-se decisões, procedimentos, explicações, resultados, interações e produtos do trabalho.

Essa perspectiva evita dois atalhos frequentes. O primeiro é avaliar aquilo que é fácil perguntar, mesmo que represente mal a capacidade. O segundo é supor que uma tarefa complexa é válida por parecer realista. Uma situação pode conter tantos fatores irrelevantes que se torne impossível saber o que produziu o desempenho.

Interpretação: como a evidência se transforma em conclusão

O terceiro vértice conecta observações a inferências. Inclui regras, modelos, rubricas e critérios para decidir o que a evidência significa.

Em uma avaliação de skills, interpretar não é somar sinais e atribuir um rótulo. É preciso justificar por que certas manifestações sustentam uma expectativa, como tratar a variação entre contextos, o que fazer com evidências contraditórias e quando a amostra ainda é insuficiente.

A interpretação também deve corresponder ao uso previsto. Evidências suficientes para orientar uma prática talvez não sejam suficientes para decidir uma promoção. O score não possui validade por si só; a solidez pertence à conclusão e à decisão tomada com ela.

A força do livro está nas conexões

A principal contribuição de Knowing What Students Know não é oferecer três caixas para preencher. É mostrar que cada vértice restringe os outros.

Se o modelo de capacidade muda, as tarefas e as regras também devem mudar. Se uma fonte observa apenas parte do desempenho, a interpretação deve ser limitada. Se a decisão exige maior certeza, talvez sejam necessárias observações adicionais ou condições mais representativas.

Essa coordenação melhora a rastreabilidade. Permite reconstruir o caminho de uma conclusão até a evidência, e da evidência até a definição da capacidade. Também torna visíveis os pontos em que entra o julgamento profissional.

Para uma organização, essa transparência é mais útil do que a promessa de objetividade total. O julgamento não desaparece; é colocado dentro de regras que podem ser examinadas, contestadas e melhoradas.

O que não convém transferir sem adaptação

Capacidade O que se espera que alguém saiba fazer.

Situação Que tarefa permitiria observá-la.

Julgamento Qual critério conecta evidência e conclusão.

O livro trabalha principalmente com aprendizagem e avaliação educacional. As organizações têm condições diferentes: experiência prévia heterogênea, tarefas menos padronizadas, consequências profissionais, acesso desigual a oportunidades e capacidades que dependem fortemente do contexto.

Uma avaliação empresarial não deveria copiar tarefas escolares nem presumir uma progressão única. Também não pode ignorar o poder envolvido quando um resultado afeta remuneração, mobilidade ou permanência. Governança, privacidade, possibilidade de contestação e proporcionalidade das consequências exigem tratamento adicional.

Além disso, o triângulo não resolve por si só a qualidade de cada componente. Uma definição ruim pode estar perfeitamente conectada a uma tarefa e a uma rubrica igualmente ruins. A coerência é necessária, mas precisa de evidências de validade, confiabilidade quando pertinente, equidade e revisão contínua.

Por que continua sendo uma leitura útil

Mais de duas décadas depois, o livro conserva uma virtude incômoda: impede que a avaliação seja tratada como um formulário. Leva a conversa para o modelo de capacidade, a situação que permite observá-la e o raciocínio que justifica uma conclusão.

Para equipes que desenham arquiteturas de skills, é especialmente útil como disciplina de perguntas:

• o que acreditamos que significa desenvolver esta capacidade?
• que desempenho permitiria observá-la sem confundi-la com outro fator?
• que conclusão essa evidência pode sustentar e para qual uso?

Uma avaliação defensável começa quando essas respostas permanecem conectadas. O instrumento vem depois.