ANALISIS BUTIR SOAL

MENGGUNAKAN SOFTWARE ITEMAN

MAKALAH

UNTUK MEMENUHI TUGAS MATA KULIAH

Evaluasi Pendidikan

Yang Dibina Oleh Bapak Drs. Eddy Sutadji M.pd

oleh :

Awang Bagus Dewangga 150511603473

Arif Bintang Putra P 120511427428

UNIVERSITAS NEGERI MALANG

FAKULTAS TEKNIK

JURUSAN TEKNIK MESIN

PRODI PENDIDIKAN TEKNIK MESIN

April 2017

KATA PENGANTAR

Dengan menyebut nama Allah SWT yang Maha Pengasih lagi Maha

Penyayang, kami panjatkan puja dan puji syukur atas kehadirat-Nya, yang telah

melimpahkan ramhat dan hidayah-Nya kepada kami, sehingga makalah kami yang

berisi materi tentang ITEMAN untuk memenuhi tugas mata kuliah Evaluasi

Pendidikan yang dibina oleh Bapak Drs. Eddy Sutadji M.pd dapat kami selesaikan

dengan tepat waktu.

Makalah ini kami susun dengan maksimal dan mendapatkan bantuan dari

berbagai pihak sehingga dapat memperlancar pembuatan makalah ini. Untuk itu

kami menyampaikan banyak terima kasih kepada semua pihak yang telah

membantu dalam pembuatan makalah ini.

Terlepas dari itu, kami menyadari sepenuhnya bahwa masih makalah ini

jauh dari sempurna dan banyak kekurangan baik dari segi susunan kalimat

maupun tata bahasanya. Oleh karena itu dengan lapang dada kami memerima

segala saran dan kritik dari pembaca agar kami dapat memperbaiki makalah ini.

Akhir kata kami berharap semoga makalah tentang ITEMAN ini dapat

memberikan ilmu yang bermanfaat dan menjadi suatu pedoman umtuk

mempelajari ITEMAN bagi pembacanya.

Malang, 4 April 2017

Penulis

BAB 1

PENDAHULUAN

1.1 Latar belakang

Kemajuan teknologi di era globalisasi telah memberikan banyak manfaat

dalam kehidupan sosial masyarakat. Penggunaan teknologi dalam membantu

menyelesaikan berbagai tugas manusia sudah menjadi hal yang umum dan bisa

juga menjadi suatu hal yang harus. Kemajuan teknologi ini juga harus diikuti

dengan perkembangan SDM yang baik.

Manusia sebagai pengguna dari teknologi harus mampu menggunakan

perkembangan teknologi yang ada saat ini maupun teknologi yang akan

berkembang di masa mendatang, adaptasi manusia dengan perkembangan

teknologi dapat dilakukan melalui pendidikan. Hal ini bertujuan supaya generasi

penerus bangsa ini dapat mengikuti perkembangan teknologi, selain itu dengan

begitu teknologi dan pendidikan dapat berkembang bersama seiring dengan

adanya generasi baru sebagai pengganti generasi lama.

Salah satu contoh dari perkembangan teknologi yang berkembang seiring

dengan pendidikan adalah program ITEMAN yang digunakan untuk menganalisis

butir soal. Menurut Rosana & Setyawarno (2016), ITEMAN (item and test

analysis) adalah perangkat lunak computer (software) yang dibuat khusus untuk

menganalisa butir soal atau suatu tes ynag dilakukan. ITEMAN merupakan

analisis butir empiric dengan model pendekatan klasik yang berguna untuk

menentukan kualitas butir soal atau sebuah tes.

Dalam penulisan makal ini kami memaparkan penjelasan dari ITEMAN,

fungsi dari ITEMAN, cara menggunakan ITEMAN, dan manfaat dari penggunaan

ITEMAN. Harapn dari makalah yang kami tulis adalah dapat mengupas tuntas

bahasan tentang ITEMAN dengan jelas dan tepat tanpa mengurangi esensi tulisan

dari berbagai sumber yang kami gunakan.

1.2 Rumusan Masalah

Adapun rumusan masalah pada makalah ini adalah

1. Apa yang di maksud dengan ITEMAN ?

2. Bagaimana cara penggunaan aplikasi ITEMAN ?

3. Bagaimana interpretasi hasil dari analisis melalui ITEMAN ?

4. Apa kelebihan dan kekurangan ITEMAN ?

1.3 Tujuan

Adapun tujuan pada makalah ini adalah

1. Mengetahui apa yang di maksud dengan ITEMAN

2. Mengetahui cara penggunaan aplikasi ITEMAN

3. Mengetahui interpretasi hasil dari analisis melalui ITEMAN

4. Mengetahui kelebihan dan kekurangan dari ITEMAN

BAB II

PEMBAHASAN

2.1 Pengertian ITEMAN

ITEMAN (item and test analysis) merupakan program komputer yang

digunakan untuk menganalisis butir soal secara klasik. Program ini termasuk satu

paket program dalam MicroCAT yang dikembangkan oleh Assessment Systems

Corporation mulai tahun 1982 dan mengalami revisi pada tahun 1984, 1986, 1988,

dan 1993; mulai dari versi 2.00 versi 3.50, dan sampai versi 4.3 yang sekarang.

Alamatnya adalah Assessment Systems Corporation, 2233 University Avenue,

Suite 400, St Paul, Minesota 55114, United States of America.

ITEMAN adalah perangkat lunak computer (software) yang dibuat khusus

untuk menganalisa butir soal atau suatu tes yang dilakukan. ITEMAN merupakan

analisis butir empiric dengan model pendekatan klasik yang berguna untuk

menentukan kualitas butir soal atau sebuah tes. Hasil dari analisis butir soal

meliputi tingkat kesukaran, daya beda, dan statistik penyebaran jawaban. Selain

menghasilkan statistic butir soal atau tes, program ini juga menghasilkan statistik

tes yang meliputi reliabilitas tes, kesalahan pengukuran atau standart error dan

distribusi skor (Rosana&Setyawarno, 2016: 19).

2.2 Cara Penggunaan Iteman

1. Membuka Aplikasi ITEMAN

Pastikan aplikasi ITEMAN sudah terinstall dalam laptop atau computer.

Untuk membuka aplikasi tersebut bisa dengan cara klik 2 kali pada ikon

aplikasi ITEMAN yang terdapat pada desktop atau klik pada ikon windows

kemudian klik pada search programs and files, ketik ITEMAN maka akan

muncul ikon aplikasi ITEMAN, kemudian klik pada ikon tersebut. Setelah

terbuka akan muncul seperti gambar 2.1.

Gambar 2.1 iteman versi 4.3

2. Memasukkan data yang akan dianalisis.

Data yang dimasukkan berupa data dengan format txt, untuk memperoleh

data dengan format txt maka harus memasukkan data melalui aplikasi notepad

yang ada dalam laptop atau computer. Data yang dimasukkan adalah respon

jawaban dari peserta ujian dan kunci jawaban ujian. Memasukkan data ke

notepad bisa melalui 2 cara yaitu, langsung ketik di notepad atau supaya lebih

mudah dan rapi bisa melalui Microsoft exel. Untuk memasukkan data dari

Microsoft excel ke Notepad bisa dengan cara Copy-Paste. Berikut contoh

memasukkan data ke notepad;

Gambar 2.2 data respon siswa Microsoft excel.

Pada gambar 2.2 terdapat warna biru dan kuning, berikut keterangannya;

Warna kuning merupakan nama dari peserta tes atau siswa, dapat

diganti dengan nomor urut absen atau tes.

Warna biru merupakan nomor butir soal

Yang tidak diberi warna merupakan jawaban peserta tes atau siswa.

Jika ada peserta tes yang tidak menjawab butir soal bisa di isi dengan

huruf O

Gambar 2.3 data respon siswa Notepad

Gambar 2.4 data kunci jawaban Microsoft Excel.

Gambar 2.5 data kunci jawaban Notepad

Pada gambar 2.5 terdapat simbol-simbol dengan keterangan sebagai

berikut;

18 sampai 40 merupakan nomor urut dari siswa yangmenikuti tes.

CABEB dst. Merupakan kunci jawaban dari tes.

5 merupakan jumlah opsi jawaban dalam soal.

MESIN merupakan domain area.

Huruf Y merupakan tanda bahwa butir soal tersebut dianalasis, jika

tidak dianalisis maka di isi dengan huruf N.

Huruf M merupakan tipe soal yaitu Multiple Choice. Bisa diganti

apabila model soal berbeda. R=Rating Scale, dan P=Numeric Respon

3. Menyimpan Respon jawaban siswa dan kunci jawaban dengan format txt.

Gambar 2.6 Simpan data Notepad

4. Memasukkan data respon dan kunci jawaban ke Aplikasi ITEMAN

Gambar 2.7

Entri data

Iteman 4.3

Ada beberapa data yang harus dimasukkan pada iteman 4.3, diantaranya;

Data matrix file, pada bagian ini dimasukkan data respon jawaban dari

siswa yang sudah disimpan dengan format txt seperti gambar 2.6.

Item control file, pada bagian ini dimasukkan data kunci jawaban yang

sudah disimpan dengan format txt seperti gambar 2.6.

Outfile, pada bagian ini diisikan nama file yang diinginkan untuk hasil

dari analisis.

Run title, pada bagian ini diisikan nama analisis, yang akan muncul

pada hasil output.

5. Edit input format

Gambar 2.8 input format

Pada Input Format terdapat beberapa point yang harus diisi sesuai dengan

data yang disimpan pada notepad. Contoh;

Number of examinee ID columns merupakan jumlah kolom

nomer/nama peserta tes.

Examinee ID begin in column merupakan kolom dimulainya

nomer/nama peserta tes.

Item response begin in column merupakan kolom dimulainya

respon jawaban dari peserta tes.

6. Scroring Options (dilakukan apabila ingin merubah penskoran)

Gambar 2.9 Scoring option.

7. Output Options (dilakukan apabila ingin mengatur output)

Gambar 2.10 output options

.8. RUN

Gambar 2.11 iteman 4.3.

Untuk finishing klik RUN yang ada disebelah kiri bawah seperti pada

gambar 2.11. setelah klik RUN maka akan muncul hasil seperti berikut;

Gambar 2.12 hasil analisis iteman 4.3.

2.3 Interpretasi Hasil Analisis Menggunakan Iteman

Pada dasarnya ITEMAN adalah perangkat lunak computer (software) yang

dapat meyajikan ringkasan analisis secara keseluruhan (analisis tes) dan

analisis tiap butir soal (analisis item).

1. Ringkasan Analisis Keseluruhan (anailisi tes)Table 2.13 tabel analisis tes.

Score Items Mean SD Min Score

Max Score

Mean P Mean Rpbis

Scored Items 40 10.793 10.238 1 34 0.304 0.537

Tabel 2.14 tabel analisis tes.Score

Alpha SEM Split-Half (Random)

Split-Half (First-Last)

Split-Half (Odd-Even)

S-B Random

S-B First-Last

S-B Odd-Even

Scored items

0.959 2.074 0.858 0.928 0.930 0.924 0.963 0.964

Tabel 2.15 kriteria hasil analisis tesKriteria Indeks Klasifikasi

Mean P (Taraf kesukaran)

0,000 - 0,250 Sukar

0,251 - 0,750 Sedang

0,751 - 1,000 Mudah

Rpbis (Daya beda)

D 0,199 Sangat Rendah

0,200 - 0,299 Rendah

0,300 - 0,399 Sedang

D 0,400 Tinggi

Alpha (Reliabilitas tes)

0,000 - 0,400 Rendah

0,401 - 0,700 Sedang

0,701 - 1,000 Tinggi

Berdasarkan tabel hasil analisis tes dan tabel kriteria dapat disimpulkan

hasil interpretasi dari analisis keseluruhan tes sebagai berikut;

Tingkat kesukaran (Mean P)

Pada tabel 2.1 didapat Mean P sebesar 0.034, berdasarkan tabel 2.3 nilai

tersebut tergolong dalam kelas sedang.

Daya beda (Rpbis)

Pada tabel 2.1 didapat Rpbis sebesar 0.537, berdasarkan tabel 2.3 nilai

tersebut tergolong dalam kelas tinggi.

Reliabilitas (Alpha)

Pada tabel 2.2 didapat Alpha sebesar 0.959, berdasarkan tabel 2.3 nilai

tersebut tergolong dalam kelas tinggi.

2. Ringkasan analisis tiap butir soal (analisis item)

Untuk ringkasan analisis tiap butir soal diambil 1 item sampel dari 40

item yang di analisis, yaitu item nomor 11. Berikut hasil interpretasinya;

Diagram 2.1 hasil analisis soal no. 11.

Tabel 2.16 hasil analisis informasi itemSeq. ID Key Scored Num Options Domain Flags11 11 A Yes 5 MESIN K, LR

Tabel 2.17 hasil analisis statistik itemN P Total

RpbisTotal Rbis Alpha w/o

29 0.069 -0.239 -0.456 0.961Tabel 2.18 hasil analisis statistik opsi jawabanOption N Prop. Rpbis Rbis Mean SD Color

A 2 0.069 -0.239 -0.456 3.000 2.000 Maroon **KEY**B 3 0.103 0.146 0.247 15.000 14.731 GreenC 7 0.241 0.113 0.155 12.714 13.732 BlueD 4 0.138 -0.331 -0.518 2.500 1.291 OliveE 13 0.448 0.165 0.207 12.538 8.403 GrayOmit 0Not Admin 0

Tabel 2.19 hasil analisis quantil plot dataOption N 0-20% 20-40% 40-60% 60-80% 80-100% ColorA 2 0.250 0.143 0.000 0.000 0.000 Maroon **KEY**B 3 0.000 0.000 0.333 0.000 0.167 GreenC 7 0.250 0.429 0.000 0.167 0.333 BlueD 4 0.500 0.286 0.000 0.000 0.000 OliveE 13 0.000 0.143 0.667 0.833 0.500 Gray

Tabel 2.20 kriteria hasil analisis butir soal (item)

Kriteria Indeks Klasifikasi

P (Taraf kesukaran)

0,000 - 0,250 Sukar

0,251 - 0,750 Sedang

0,751 - 1,000 Mudah

Rpbis (Daya beda)

D 0,199 Sangat Rendah

0,200 - 0,299 Rendah

0,300 - 0,399 Sedang

D 0,400 Tinggi

Prop (Pengecoh)

Prop < 5% Buruk

Prop > 5% Baik

Alpha (Reliabilitas soal)

0,000 - 0,400 Rendah

0,401 - 0,700 Sedang

0,701 - 1,000 Tinggi

Berdasarkan tabel hasil analisis tes dan tabel kriteria dapat disimpulkan

hasil interpretasi dari analisis item soal nomor 11 sebagai berikut;

Tingkat kesukaran (P) item no. 11.

Pada tabel 2.17 didapat P sebesar 0.069, berdasarkan tabel 2.20 nilai

tersebut tergolong dalam kelas sedang.

Daya beda (Rpbis)

Pada tabel 2.17 didapat Rpbis sebesar -0.239, berdasarkan tabel 2.20 nilai

tersebut tergolong dalam kelas sangat rendah.

Prop (Pengecoh)

Pada item ini setiap opsi jawaban dijawab lebih dari 5% dari seluruh

jumlah peserta tes, maka pengecoh tergolong bekerja dengan baik.

Reliabilitas (Alpha)

Pada tabel 2.17 didapat Alpha sebesar 0.961, berdasarkan tabel 2.20 nilai

tersebut tergolong dalam kelas tinggi.

2.4 Kelebihan dan Kekurangan Iteman

1. Kelebihan Iteman

Menginput data dapat dibantu dengan program Microsoft excel.

Hasil analisis lebih mudah dibaca karena berupa tabel-tabel.

Tampilan pada iteman lebih menarik daripada anates.

Tersedia banyak versi.

2. Kekurangan Iteman

Sering terjadi kesalahan saat penulisan data respon siswa.

Sulit dioperasikan karena menggunakan bahasa Inggris.

Banyak pengguna kesulitan pada saat input format.

Sulit mencari referensi untuk Iteman versi 4.3, kebanyakan menggunakan

versi 3.5.

BAB III

PENUTUP

3.1 kesimpulan

ITEMAN merupakan analisis butir empirik dengan model pendekatan klasik

yang berguna untuk menentukan kualitas butir soal atau sebuah tes. Hasil dari

analisis butir soal meliputi tingkat kesukaran, daya beda, dan statistik penyebaran

jawaban. Program ini juga menghasilkan statistik tes yang meliputi reliabilitas tes,

kesalahan pengukuran atau standart error dan distribusi skor. Iteman juga

membantu banyak guru ataupun dosen dalam menganalisis suatu tes dan butir

soal.

3.2 saran

Menurut kami masih banyak hal-hal yang perlu diperbaiki dalam Iteman,

contohnya seperti bahasa penggunaan yang lebih baik ada versi baru Iteman yang

menggunakan bahasa Indonesia, kebanyakan masalah dalam penggunaan Iteman

adalah tidak memahami perintah yang menggunakan bahasa Inggris.

DAFTAR PUSTAKA

Dadan Rosana & Didik Setyawarno. 2016. Statistik Terapan untuk Penelitian

Bidang Pendidikan. YOGYAKARTA: FMIPA UNY

Guyer, R., & Thompson, N.A., 2013. User’s Manual for Iteman 4.3. Woodbury,

MN: Assesment Systems Corporation.

Idzhan, R. 2013. Penelaahan Butir Soal dengan Komputer. Tersedia:

http://catatankuliya.blogspot.co.id/2013/07/modul-praktikum-program-

iteman.html