Menguji kompetensi dengan tes - mengapa dan bagaimana

Dalam artikel saya, saya memeriksa 7 cara untuk dengan cepat menguji kompetensi spesialis TI, yang dapat diterapkan sebelum wawancara teknis yang besar, banyak dan memakan waktu. Kemudian saya menyatakan simpati saya untuk tes terbatas waktu. Pada artikel ini saya akan mengungkapkan topik tes lebih terinci.

Tes terbatas waktu adalah alat universal yang cocok untuk menguji pengetahuan dan keterampilan praktis dari setiap spesialis dalam profesi apa pun.

Jadi, tugasnya adalah bahwa kami memiliki aliran umpan balik dari kandidat untuk lowongan, kami perlu dengan cepat dan sederhana mendapatkan informasi tambahan tentang keterampilan kandidat dan kepatuhan mereka dengan persyaratan lowongan kami. Kami ingin verifikasi kompetensi kandidat ini tidak menyita banyak waktu kami, agar sangat andal dan nyaman bagi kandidat untuk setuju untuk lulus ujian kami.

Solusi yang bagus untuk masalah ini adalah tes singkat yang terbatas waktunya. Ini bukan waktu ketika tes dimulai, tetapi waktu di mana kandidat harus menjawab pertanyaan yang terbatas. Contoh tipikal dari tes semacam itu adalah pemeriksaan untuk pengetahuan tentang peraturan lalu lintas, yang merupakan tahap pertama dari ujian untuk mendapatkan SIM. Dalam 20 menit Anda harus menjawab 20 pertanyaan.

Sedikit teori

Dalam artikel sebelumnya, saya berbicara tentang model pengambilan keputusan hibrida "orang yang masuk akal" yang diusulkan oleh Daniel Kahneman dan rekan-rekannya. Menurut konsep ini, perilaku manusia dikendalikan oleh dua sistem pengambilan keputusan yang saling berinteraksi. Sistem 1 - cepat dan otomatis, memastikan keamanan tubuh dan tidak memerlukan upaya signifikan untuk membentuk solusi. Sistem ini dilatih berdasarkan pengalaman yang diterima seseorang sepanjang hidup. Keakuratan keputusan sistem ini tergantung pada pengalaman dan pelatihan pribadi, dan kecepatan tergantung pada karakteristik sistem saraf individu. Sistem 2 - lambat, membutuhkan usaha dan konsentrasi. Ini memberi kita penalaran yang kompleks dan kesimpulan logis, karyanya mengungkapkan potensi kecerdasan manusia. Namun, selama pengoperasian sistem ini, sumber daya dikonsumsi secara intensif - energi dan perhatian. Oleh karena itu, sebagian besar keputusan dibuat oleh Sistem 1 - sehingga perilaku manusia menjadi jauh lebih efektif. Sistem 1 belajar untuk waktu yang lama karena upaya yang dilakukan oleh Sistem 2, tetapi kemudian memberikan reaksi otomatis yang cepat. Sistem 2 adalah pemecah tugas universal, tetapi bekerja lambat dan cepat menjadi lelah. Dimungkinkan untuk "memutakhirkan" Sistem 2, tetapi batas dari kemungkinan peningkatan sangat sederhana dan ini membutuhkan waktu yang lama dan membutuhkan upaya yang berat. "Pemompaan" Sistem 1 sangat diminati dalam masyarakat manusia. Ketika kita mencari seseorang yang berpengalaman dalam segala hal, ini berarti bahwa Sistem 1-nya dilatih untuk dengan cepat menyelesaikan masalah yang kita butuhkan.

Cara terbaik untuk menilai kemampuan Sistem 1 dari orang tertentu dalam bidang pengetahuan tertentu, saya menganggap tes yang terbatas dalam waktu. Setelah dikompilasi, tes memungkinkan Anda untuk mengevaluasi dan membandingkan di antara mereka sendiri sejumlah besar kandidat. Ini adalah alat untuk mendigitalkan kontrol pengetahuan dan keterampilan.

Bagaimana cara membuat tes yang bagus?

Tugas dari tes yang ditulis dengan baik adalah untuk menentukan tingkat pelatihan kandidat Sistem 1 untuk pengetahuan dan keterampilan yang Anda butuhkan. Untuk melakukan tes seperti itu, pertama-tama Anda perlu menentukan topik dan keterampilan yang diperlukan, dan kemudian menyusun pertanyaan dan menjawab pilihan.

Jadi, berikut adalah kriteria saya untuk mempersiapkan tes yang secara akurat dan kualitatif mengevaluasi pengetahuan dan keterampilan kandidat:

1. Pertanyaan dan jawaban harus sederhana. Entah Anda tahu jawaban yang benar, atau Anda tidak tahu. Jangan berbaring dalam tes kebutuhan untuk penalaran dan perhitungan yang kompleks.
2. Pelaksanaan tes harus dibatasi dalam waktu. Anda bahkan dapat membatasi waktu berpikir dari setiap jawaban. Jika kandidat tidak dapat memutuskan jawaban dalam, katakanlah, 30 detik, maka tidak mungkin banyak pemikiran akan membantunya. Googling jawaban yang benar dalam 30 detik juga harus sulit.
3. Pertanyaan harus tentang praktik yang benar-benar diperlukan dalam pekerjaan - tidak abstrak dan teoritis, tetapi murni praktis.
4. Disarankan bahwa untuk setiap topik kecil ada beberapa pertanyaan. Pertanyaan-pertanyaan ini dapat bervariasi untuk kandidat yang berbeda (ini mirip dengan berbagai jenis tes di sekolah) atau semua mungkin hadir dalam versi tes yang lebih panjang.
5. Jumlah pertanyaan dan waktu untuk lulus tes harus terhubung erat. Ukur berapa lama waktu yang dibutuhkan untuk membaca pertanyaan dan menjawab pilihan. Tambahkan ke waktu ini 10-20 detik untuk setiap pertanyaan - ini adalah waktu untuk berpikir dan memilih jawaban.
6. Dianjurkan untuk menguji tes pada karyawan Anda dan melacak waktu mereka untuk menentukan waktu yang cukup bagi para kandidat untuk lulus tes.
7. Volume tes tergantung pada tujuan penerapannya. Untuk penilaian kompetensi awal, menurut saya, 10-30 pertanyaan dengan batas waktu 5-15 menit sudah cukup. Untuk diagnosis ketrampilan tes yang lebih rinci selama 30-45 menit, berisi 50-100 pertanyaan.

Sebagai contoh, berikut adalah tes yang saya kembangkan dan gunakan baru-baru ini ketika memilih kandidat untuk posisi perekrut TI. Butuh 6 menit untuk menyelesaikan tes, waktu dikontrol secara manual dan jujur. Semua kandidat yang diuji cocok dengan ini. Butuh waktu 30 menit untuk menyelesaikan tes. docs.google.com/forms/d/e/1FAIpQLSfL2pUZob2Xq-1taJPwaB2rUifbdKWK4Mk0VREKp5yUZhTQXA/viewform

Anda dapat mengikuti tes dan pada akhirnya Anda dapat melihat di mana Anda membuat kesalahan. Ketika kandidat lulus tes ini, mereka tidak menunjukkan kesalahan, kami kemudian memilah kesalahan saat wawancara dengan kandidat yang membuat tidak lebih dari 3 kesalahan.

Alat-alatnya

Sekarang saya membuat tes dan survei menggunakan Formulir Google - ini adalah alat yang sederhana, nyaman, universal dan gratis. Namun, saya kehilangan beberapa fungsionalitas untuk menyebut Google Forms alat yang bagus untuk membuat tes. Keluhan utama saya tentang Formulir Google:

1. Tidak ada akuntansi dan kontrol waktu yang dihabiskan untuk seluruh tes dan pada setiap pertanyaan. Ini memberikan lebih banyak informasi tentang perilaku kandidat selama tes.
2. Karena Formulir Google tidak diasah oleh pengujian default, banyak opsi penting untuk pengujian (misalnya, "jawaban atas pertanyaan wajib" dan "campuran jawaban") harus "diklik" untuk setiap pertanyaan - yang membutuhkan waktu dan perhatian. Untuk mengajukan setiap pertanyaan pada layar terpisah, Anda perlu membuat bagian terpisah untuk setiap pertanyaan, dan ini juga mengarah ke sejumlah besar klik tambahan.
3. Jika Anda perlu membuat tes baru sebagai kombinasi fragmen dari beberapa tes yang ada (misalnya, untuk mengumpulkan tes untuk pengembang fullstack dari bagian pertanyaan untuk frontend dan backend dalam bahasa tertentu), Anda harus menggandakan pertanyaan dengan tangan Anda. Tidak ada cara untuk memilih dan menyalin beberapa bagian atau pertanyaan ke bentuk lain.

Kolega, jika Anda tahu solusi terbaik untuk membuat tes, silakan tulis tentang mereka di komentar.