Como a avaliação de competências é construída
De onde vêm as questões, como elas são testadas antes de valer e como o resultado é calculado.
As questões
As questões são escritas como rascunho com ajuda de IA, seis por domínio, a partir das ementas da RAIF e da RAIP. Cada rascunho só segue adiante depois que uma pessoa revisa enunciado, alternativas, gabarito e justificativa.
O piloto
Por 4 semanas, cada questão aprovada aparece dentro das avaliações abertas da RAIF e da RAIP, duas por sessão, marcada na tela e sem contar nota. A resposta fica gravada junto com a nota que a pessoa tirou nas questões que contam.
A estatística
Toda semana são calculados dois números por questão. A dificuldade (p) é a proporção de acertos. A discriminação é a correlação ponto-bisserial entre acertar a questão e a nota da sessão: uma questão boa é acertada mais por quem vai bem no resto.
A seleção
Ao fim do piloto ficam 4 questões por domínio, trinta e seis no total. Só entram questões com pelo menos 30 respostas, dificuldade entre 0,25 e 0,85 e discriminação a partir de 0,1; entre elas, as de melhor discriminação. Se um domínio não tiver 4 questões assim, a seleção não acontece e o piloto continua.
O resultado
Cada domínio recebe uma faixa: abaixo de 50% a desenvolver, de 50% a 74% em consolidação, 75% ou mais sólida. A recomendação olha as duas partes: abaixo de 60% na base, a RAIF; com a base firme e abaixo de 60% na aplicação, a RAIP; acima de 60% nas duas, a RAIP como caminho para a RAIL.
O resultado é indicativo. Quatro questões por domínio apontam onde estudar, mas não medem a competência de ninguém e não substituem um exame de certificação com blueprint publicado e nota de corte.
Situação hoje
0 questões em piloto, 0 selecionadas e 0 respostas registradas.