Passar para o conteúdo principal

Entendendo os resultados das avaliações

Depois que um talento conclui uma avaliação, a Coodesh disponibiliza um conjunto de informações para ajudar o avaliador a interpretar o desempenho de forma completa, indo além da nota final.

A tela geral da avaliação

Ao acessar Avaliações e clicar no nome da avaliação desejada, você chega à página geral dela, com a aba Resultados selecionada por padrão.

O cabeçalho traz os metadados da avaliação: número de seções, duração total, idioma, responsável, tags de status, data de criação e data da última atualização. Um botão permite convidar novos talentos diretamente por ali.

Logo abaixo, um conjunto de cards resume o desempenho agregado de todos os talentos que já concluíram a avaliação:

  • Total de resultados: soma das entregas, sem contar novas tentativas.

  • Média de pontuação: média geral dos resultados únicos das avaliações realizadas.

  • Média de tempo de resposta: tempo médio das respostas únicas.

Ao lado dos cards, o gráfico plota a quantidade de entregas ao longo dos últimos 6 meses, separadas por dia ou mês, permitindo visualizar a distribuição temporal e o volume de resultados no período.

Logo abaixo, a tabela de resultados lista todos os talentos participantes, com pontuação, nível de atividades suspeitas, número de pausas, data de convite, data de finalização, e as colunas a seguir:

  • Gerenciar etapa: permite definir em que etapa do processo seletivo o talento se encontra (por exemplo, analisando, reprovado, desistente, entre outras).

  • Marcadores: exibe as tags configuradas na criação da avaliação, usadas para rastrear informações como a origem do talento (por exemplo, LinkedIn, Coodesh).

  • Ações: menu com ações adicionais disponíveis para aquela linha.

A navegação por abas dá acesso a outras informações relacionadas à mesma avaliação:

  • Convites: lista de todas as pessoas convidadas para realizar a avaliação, incluindo quem ainda não iniciou ou não concluiu — útil para acompanhar quem falta responder.

  • Feedback: comentários e avaliações que os próprios talentos fornecem sobre a experiência ao concluírem a avaliação.

  • Recursos: reúne os apontamentos feitos pelos talentos sobre alguma questão da avaliação, como um erro identificado ou outra observação relevante.

  • Seções: configuração das seções que compõem a avaliação.

Como acessar o resultado individual de um talento

Na tabela de resultados, clique no nome do talento desejado para abrir a página de resultado individual, com o detalhamento completo do desempenho dele naquela avaliação.

Como revisar o resultado do talento

Como é calculada a pontuação

A forma de avaliação de cada questão depende do tipo e do formato em que ela foi aplicada, e os critérios usados na correção são definidos no momento da criação da questão:

  • Correção automática: questionários (múltipla escolha) e questões de programação com casos de teste geram pontuação automaticamente.

  • Revisão Automática por IA: questões dos tipos Texto Livre, Projeto, Programação e Programação Livre podem contar com esse recurso, desde que os critérios de correção tenham sido configurados na criação da questão. Veja Como ativar revisão automática na questão.

  • Revisão manual: questões do tipo Arquivo (assim como áudio, vídeo e quadro branco) não contam com nenhum tipo de correção automática e são sempre revisadas manualmente. O mesmo vale para qualquer questão de um tipo compatível que tenha sido criada sem os critérios de revisão automatizada configurados.

  • Soft Skills: esse tipo de questão não gera pontuação.

Enquanto uma questão está pendente de revisão manual, ela não entra no cálculo da nota. Assim que avaliada, a pontuação da questão passa a compor a nota da seção, e a pontuação geral da avaliação é calculada como uma média ponderada dos resultados de cada seção, de acordo com o peso configurado para cada uma no momento da criação da avaliação.

Testes com resultado superior a 75% dão direito a certificado ao profissional.

O painel de resultado individual

Ao abrir o resultado de um talento específico, as seções abaixo estão disponíveis:

  • Informações do talento: traz os dados de identificação e o histórico da participação — como o talento foi convidado, a data/hora do convite, a data/hora de finalização e o tempo total gasto na realização da avaliação.

  • Pontuação: mostra o percentual geral de acerto e a fração de acertos sobre o total de questões, calculado conforme explicado acima.

  • Atividades suspeitas: resume os sinais de possível violação de integridade detectados durante a avaliação (proctoring), atribuindo um nível de risco geral (baixo, médio ou alto) e detalhando a contagem de ocorrências por tipo de comportamento — copiar/colar, saída da janela, redimensionamento de tela, troca de aba, desvio de olhar, saída do modo tela cheia, câmera coberta, uso de DevTools, rosto coberto e outros.

  • Plano de ação: área de recomendações automáticas geradas a partir dos dados de integridade e desempenho do talento. Quando não há sinais relevantes, é exibida a mensagem "Nenhuma recomendação encontrada".

  • Integridade: detalha, item a item, as informações que compõem o indicador de atividades suspeitas — dispositivo usado, navegador, última localização, quantidade de monitores detectados, número de pausas, se o talento saiu do modo tela cheia, se saiu da guia de navegação, se mudou o foco da janela, se utilizou mais de um endereço IP, se houve detecção de copiar/colar e se foi inserido texto sem colagem (o que pode indicar digitação a partir de outra fonte).

  • Seções: mostra como a avaliação foi dividida em blocos, cada um com seu próprio tipo de conteúdo, tempo estimado e peso configurado. Para cada seção, é exibida a pontuação obtida, o tempo realizado, o estado (aprovado ou reprovado, conforme o critério mínimo definido) e uma ação para visualizar o detalhe.

  • Distribuição de Pontuação por Habilidade: apresenta o desempenho do talento quebrado por habilidade, refletindo as habilidades associadas a cada questão no momento da criação do conteúdo da avaliação. Como cada questão pode estar vinculada a uma ou mais habilidades, essa tabela permite identificar em quais competências específicas o talento teve melhor ou pior desempenho, além da nota geral.

  • Anotações: campo editável, com editor de texto rico, usado pela equipe para documentar impressões e análises sobre os dados e o perfil do talento. É possível mencionar um colega de equipe que tenha permissão de acesso aos resultados digitando "@" seguido do nome da pessoa, direcionando a atenção dela para aquele comentário específico. Depois de escrever, clique em Adicionar para salvar — esse conteúdo é interno e não é visível para o talento.

  • Supervisão de imagens: exibe as fotos periódicas capturadas pela webcam durante a realização da avaliação, usadas para confirmar que a mesma pessoa participou do início ao fim.

  • Linha do tempo: registra cronologicamente os eventos ocorridos durante a avaliação (concessão de acesso a recursos de integridade, início da avaliação, capturas de supervisão, início de seções e de questões, entre outros), sinalizando os pontos de atenção com marcadores em amarelo ou vermelho, conforme a gravidade do evento.

  • Gravação de navegação: disponibiliza a gravação de tela do talento durante a realização da avaliação, com marcadores na barra de progresso indicando os momentos de interesse identificados na linha do tempo.

Informações adicionais

Também é possível consultar dados complementares sobre a participação do talento, como data do convite, data de conclusão do desafio, número de questões resolvidas, duração de cada questão individualmente e o tempo total do pacote de avaliação.

Respondeu à sua pergunta?