Tingkat Kesukaran (Difficulty level) adalah cakupan yang menunjukkan seberapa mudah atau sukarnya butiran soal bagi peserta tes. Soal dapat dikatakan baik apabila, soal tidak terlalu mudah dan tidak terlalu sulit. Apabila :
soal terlalu mudah maka, tidak memberikan tantangan bagi siswa untuk berfikir
soal terlalu sukar maka, membuat siswa kehilangan motivasi karena sulit dijangkau
Soal yang ideal adalah soal yang mampu membedakan kemampuan siswa dengan baik dan mendorong
Besarnya indeks kesukaran (P) berkisar 0,00 sampai 1,00 dimana :
P mendekati 0,00 = soal sangat sukar
P mendekati 1,00 = soal sangat mudah
Misalnya :
Ada 20 siswa dengan nama kode A-T yang mengerjakan tes yang terdiri dari 20 soal. Jawaban tes-nya di analisa dan jawabannya tertera seperti dibawah ini.
(1= jawaban benar, 0= jawaban salah)
Dari tabel yang disajikan di atas dapat ditafsirkan bahwa :
Soal nomor 1 mempunyai taraf kesukaran 10 : 20 = 0,5
Soal nomor 13 adalah soal yang paling mudah karena seluruh siswa peserta tes dapa menjawab :
Indeks kesukarannya = 20 :20 =1,0
Menurut ketentuan yang sering diikuti, indeks kesukaran sering di klasifikasikan sebagai berikut:
Soal dengan P 0,00 sampai 0,30 adalah soal sukar
Soal dengan P 0,30 sampai 0,70 adalah soal sedang
Soal dengan P 0,70 sampai 1,00 adalah soal mudah
Soal yang dianggap baik adalah soal dengan tingkat kesukaran sedang, yaitu yang memiliki indeks kesukaran antara 0,30 sampai 0,70.