Como a avaliação de competências é construída
De onde vêm as questões, como elas são testadas antes de valer e como o resultado é calculado.
As questões
Sessenta questões foram escritas como rascunho com ajuda de IA, seis por domínio, a partir das ementas da CPM-F e da CPM-E e dos guias oficiais. Cada rascunho só segue adiante depois que uma pessoa revisa enunciado, alternativas, gabarito e justificativa.
O piloto
Por 4 semanas, cada questão aprovada aparece dentro das avaliações abertas da CPM-F e da CPM-E, duas por sessão, marcada na tela e sem contar nota. A resposta fica gravada junto com a nota que a pessoa tirou nas questões que contam.
A estatística
Toda semana são calculados dois números por questão. A dificuldade (p) é a proporção de acertos. A discriminação é a correlação ponto-bisserial entre acertar a questão e a nota da sessão: uma questão boa é acertada mais por quem vai bem no resto.
A seleção
Ao fim do piloto ficam 4 questões por domínio, quarenta no total. Só entram questões com pelo menos 30 respostas, dificuldade entre 0,25 e 0,85 e discriminação a partir de 0,1; entre elas, as de melhor discriminação. Se um domínio não tiver 4 questões assim, a seleção não acontece e o piloto continua.
O resultado
Cada domínio recebe uma faixa: abaixo de 50% a desenvolver, de 50% a 74% em consolidação, 75% ou mais sólida. A recomendação olha as duas partes: abaixo de 60% nos fundamentos, a CPM-F; com os fundamentos firmes e abaixo de 60% na execução, a CPM-E; acima de 60% nas duas, a CPM-E como caminho para a CPLE.
O resultado é indicativo. Quatro questões por domínio apontam onde estudar, mas não medem a competência de ninguém e não substituem um exame de certificação com blueprint publicado e nota de corte.
Situação hoje
60 questões em piloto, 0 selecionadas e 0 respostas registradas.