Testando competências com testes - por que e como

No meu artigo, examinei 7 maneiras de testar rapidamente as competências dos especialistas em TI, que podem ser aplicadas antes de uma entrevista técnica grande, volumosa e demorada. Então expressei minha simpatia por testes com tempo limitado. Neste artigo, revelarei o tópico dos testes com mais detalhes.

Os testes por tempo limitado são uma ferramenta universal adequada para testar o conhecimento e as habilidades práticas de qualquer especialista em qualquer profissão.

Portanto, a tarefa é que tenhamos um fluxo de feedback dos candidatos à vaga, precisamos obter rápida e simplesmente informações adicionais sobre as habilidades dos candidatos e sua conformidade com os requisitos da vaga. Queremos que essa verificação das competências dos candidatos não demore muito do nosso tempo, seja altamente confiável e conveniente para os candidatos concordarem em passar no exame.

Uma boa solução para esse problema são testes curtos, limitados no tempo. Não é o momento em que o teste começa, mas o tempo durante o qual o candidato deve responder a perguntas que é limitado. Um exemplo típico desse teste é um exame para conhecer as regras de trânsito, que é a primeira etapa de um exame para obter uma carteira de motorista. Em 20 minutos, você precisa responder a 20 perguntas.

Pouco de teoria

Em um artigo anterior, falei sobre o modelo de tomada de decisão híbrido de "homem razoável" proposto por Daniel Kahneman e seus colegas. De acordo com esse conceito, o comportamento humano é controlado por dois sistemas de tomada de decisão em interação. Sistema 1 - rápido e automático, garante a segurança do corpo e não requer esforços significativos para formar uma solução. Este sistema é treinado com base na experiência que uma pessoa recebe ao longo da vida. A precisão das decisões desse sistema depende da experiência e do treinamento pessoal, e a velocidade depende das características do sistema nervoso do indivíduo. Sistema 2 - lento, requer esforço e concentração. Ele nos fornece um raciocínio complexo e inferência lógica, seu trabalho revela o potencial da inteligência humana. No entanto, durante a operação deste sistema, os recursos são intensamente consumidos - energia e atenção. Portanto, a maioria das decisões é tomada pelo Sistema 1 - para que o comportamento humano se torne muito mais eficaz. O Sistema 1 aprende por um longo tempo devido aos esforços feitos pelo Sistema 2, mas, em seguida, fornece reações automáticas rápidas. O Sistema 2 é um solucionador de tarefas universal, mas funciona devagar e rapidamente se cansa. É possível "atualizar" o Sistema 2, mas os limites de possíveis melhorias são muito modestos e isso leva muito tempo e requer grandes esforços. O "bombeamento" do sistema 1. é muito procurado na sociedade humana. Quando procuramos uma pessoa com experiência em algo, isso significa que o sistema 1 é treinado para resolver rapidamente os problemas de que precisamos.

A melhor maneira de avaliar os recursos do Sistema 1 de uma pessoa específica em uma determinada área do conhecimento, considero testes com tempo limitado. Uma vez compilado, um teste permite avaliar e comparar rapidamente um grande número de candidatos. Esta é uma ferramenta para digitalizar o controle de conhecimentos e habilidades.

Como fazer um bom teste?

A tarefa de um teste bem escrito é determinar o grau de treinamento do candidato do Sistema 1 para o conhecimento e as habilidades necessárias. Para fazer esse teste, primeiro você precisa determinar os tópicos e as habilidades necessárias e, em seguida, elabora perguntas e respostas.

Portanto, eis meus critérios para preparar um teste que avalie de maneira precisa e qualitativa o conhecimento e as habilidades do candidato:

1. Perguntas e respostas devem ser simples. Ou você sabe a resposta correta ou não sabe. Não coloque no teste a necessidade de raciocínios e cálculos complexos.
2. A execução do teste deve ser limitada no tempo. Você pode até limitar o tempo de reflexão de cada resposta. Se o candidato não puder decidir a resposta em, digamos, 30 segundos, é improvável que muita atenção o ajude. Pesquisando a resposta correta em 30 segundos também deve ser difícil.
3. As perguntas devem ser sobre práticas realmente necessárias no trabalho - não abstratas e teóricas, mas puramente práticas.
4. É aconselhável que, para cada tópico pequeno, haja várias perguntas. Essas perguntas podem variar para diferentes candidatos (isso é semelhante a diferentes tipos de testes na escola) ou todas podem estar presentes em uma versão mais longa do teste.
5. O número de perguntas e o tempo para passar no teste devem estar bem conectados. Meça quanto tempo leva para ler as perguntas e responder às opções. Acrescente a esse tempo de 10 a 20 segundos para cada pergunta - esse é o momento de pensar e escolher uma resposta.
6. É aconselhável testar o teste em seus funcionários e acompanhar o tempo deles para determinar o tempo suficiente para os candidatos passarem no teste.
7. O volume do teste depende do objetivo de sua aplicação. Para a avaliação inicial de competências, na minha opinião, 10 a 30 perguntas com um prazo de 5 a 15 minutos são suficientes. Para um diagnóstico mais detalhado das habilidades, testes adequados são realizados por 30 a 45 minutos, contendo 50 a 100 perguntas.

Por exemplo, aqui está um teste que desenvolvi e usei recentemente ao selecionar candidatos para a posição de recrutador de TI. Foram necessários 6 minutos para concluir o teste, o tempo foi controlado manualmente e com honestidade. Todos os candidatos testados se encaixam nesse período. Levei 30 minutos para concluir o teste. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Você pode fazer o teste e, no final, pode ver onde cometeu um erro. Quando os candidatos passaram no teste, eles não mostraram erros, em seguida, resolvemos os erros em entrevistas com candidatos que não cometeram mais de três erros.

As ferramentas

Agora, estou criando testes e pesquisas usando o Formulários Google - esta é uma ferramenta simples, conveniente, universal e gratuita. No entanto, estou faltando algumas funcionalidades para chamar o Google Forms de uma boa ferramenta para criar testes. Minhas principais reclamações sobre o Google Forms:

1. Não há contabilidade e controle do tempo gasto tanto em todo o teste quanto em cada pergunta. Isso fornece mais informações sobre o comportamento do candidato durante o teste.
2. Como o Google Forms não é aprimorado pelos testes padrão, muitas opções importantes para os testes (por exemplo, "responder a uma pergunta é obrigatória" e "misturar respostas") precisam ser clicadas para cada pergunta - o que leva tempo e atenção. Para fazer cada pergunta em uma tela separada, você precisa criar seções separadas para cada pergunta, e isso também gera um grande número de cliques adicionais.
3. Se você precisar fazer um novo teste como uma combinação de fragmentos de vários testes existentes (por exemplo, para coletar um teste para um desenvolvedor fullstack de parte das perguntas para front-end e back-end em um idioma específico), será necessário duplicar as perguntas com as mãos. Não há como selecionar e copiar várias seções ou perguntas para outro formulário.

Colegas, se você conhece as melhores soluções para a criação de testes, escreva sobre eles nos comentários.