Artigos sobre como desenhar, interpretar e usar evidências para avaliar capacidades com critério.
33 artigos
Falta de evidências, evidências contraditórias e incerteza não descrevem o mesmo problema. Quando são agrupadas sob um rótulo genérico, a organização pode inventar certezas, adiar indefinidamente ou tratar como lacuna aquilo que ainda não observou.
Uma avaliação que entrega apenas um score devolve menos informações do que utilizou para julgar. A pessoa precisa compreender o resultado, as evidências que o sustentam, seus limites e o que pode fazer a partir dele.
Uma média pode representar corretamente o centro de vários resultados, ao mesmo tempo que esconde a diferença que mais importa na decisão. Sua utilidade depende de quais componentes reúne e quais podem ser compensados.
Uma escala reduz as diferenças de interpretação quando obriga os avaliadores a reconhecer as mesmas evidências, não quando substitui palavras vagas por rótulos mais elegantes. Projetá-la exige definir o que será observado, explicitar as fronteiras entre os níveis e testá-las com casos que revelem onde começa o desacordo.
Uma skill é um construto útil para organizar capacidades, mas a avaliação não a acessa diretamente. Ela acessa decisões, explicações, procedimentos, resultados e comportamentos produzidos sob condições específicas.
Uma skill é uma construção útil para organizar capacidades, mas não se apresenta completa a quem avalia. O que vemos são manifestações parciais em tarefas, decisões e contextos específicos.
Escolher quem avalia uma skill não significa procurar a fonte mais confiável. Significa identificar quem teve acesso suficiente aos comportamentos, às decisões e aos resultados relevantes para a conclusão que precisamos construir.
Uma avaliação de skills é sólida quando sustenta a interpretação e o uso de seus resultados. Para isso, cinco condições precisam funcionar em cadeia: objeto, evidência, níveis, fontes e regras.
Duas pessoas podem observar o mesmo comportamento e chegar a conclusões diferentes. A reação habitual é tentar descobrir qual delas estava errada.