ABSTRACTEfektivitas suatu program pelatihan dapat diukur dari pencapaian evaluasi hasil belajar. Agar pengukuran terhadap efektifitas program pelatihan tersebut benar, maka dibutuhkan alat ukur yang reliabel dan valid. Untuk mengetahui reliabilitas dan validitas instrumen evaluasi hasil belajar, maka dilakukan analisis butir soal. Telah dilakukan analisis butir soal ujian tulis Pelatihan Petugas Proteksi Radiasi Industri Tingkat 3 yang diselenggarakan selama tahun 2017 menggunakan aplikasi ANATES. Dari hasil analisis diperoleh rentang tingkat reliabilitas rendah - sangat tinggi dengan nilai korelasi (rtt) 0,40 - 0,89. Sedangkan untuk validitas butir soal, dengan korelasi signifikan dan sangat signifikan (r > 0,251), memiliki rentang 44% - 70%.