PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

21
EVALUASI PERENCANAAN JOHANNES PARLINDUNGAN, ST., MT. E-mail : [email protected] Blog : http://johannes.lecture.ub.ac.id/ JURUSAN PERENCANAAN WILAYAH dan KOTA FAKULTAS TEKNIK UNIVERSITAS BRAWIJAYA PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

description

PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF. VALIDITAS INSTRUMEN. VALIDITAS. KESESUAIAN ALAT UKUR ?. RELIABILITAS. KONSISTENSI HASIL PENGUKURAN ??. BEBERAPA KASUS …. UJIAN AKHIR NASIONAL. PERMASALAHAN VALIDITAS ATAU RELIABILITAS ?. - PowerPoint PPT Presentation

Transcript of PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

Page 1: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAANJOHANNES PARLINDUNGAN, ST., MT.

E-mail : [email protected] : http://johannes.lecture.ub.ac.id/

JURUSAN PERENCANAAN WILAYAH dan KOTAFAKULTAS TEKNIK

UNIVERSITAS BRAWIJAYA

PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02

VALIDITAS KUANTITATIF

Page 2: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP

VALIDITAS INSTRUMEN

2

KESESUAIAN ALAT UKUR ?

VALIDITAS

Page 3: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 3

KONSISTENSI HASIL PENGUKURAN ??

RELIABILITAS

Page 4: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP

BEBERAPA KASUS …

4

UJIAN AKHIR NASIONALPERMASALAHAN VALIDITAS ATAU

RELIABILITAS ?

AKURASI SOAL UJIAN SEBAGAI ALAT UKUR SESUAI INDIKATOR

PENCAPAIAN KEBERHASILAN

KURIKULUM

SOAL-SOAL SEC KONSISTEN MENGUKUR

KEMAMPUAN SISWA (Asumsinya ujian dilaksanakan

sec. jujur)

KASUS VALIDITAS KASUS RELIABILITAS

Page 5: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 5

INDIKATOR KEMISKINANDI INDIA APAKAH

SAMA DGN INDONESIA?PERMASALAHAN VALIDITAS

Page 6: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP

External VALIDITY

6

TERKAIT PADA GENERALISASI HASIL PENELITIAN – DAPAT DIULANG PADA TEMPAT DAN WAKTU YANG BERBEDA

PROBLEMS :

1. SELECTED SAMPLE THAT IS NOT REPRESENTATIVE

THE UNIT OF ANALYSIS IS WHAT IS SAMPLED AND WHAT IS COUNTED

Page 7: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 7

TERLALU BESAR

TERLALU KECILNOT

REPRESENTATIVE

NOT EFFICIENT,

COSTLY

SAMPLE

SMALL RANDOM SAMPLE IS NOT REPRESENTATIVE !!

CONTOH :SAMPLE = 30 (TIDAK REPRESENTATIF)POPULASI = 100, SAMPLE = 10 (TIDAK REPRESENTATIF)

TIDAK REPRESENTATIFNYA SAMPLE DI ATAS TERKAIT TEORI PROBABILITAS…

Page 8: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 8

TIDAK REPRESENTATIFNYA SAMPLE DI ATAS TERKAIT TEORI PROBABILITAS…

SAMPLING DILAKUKAN DENGAN CARA : MENGAMBIL OBJEK DENGAN TIDAK MENGEMBALIKAN KE UNIT SAMPLENYA

JUM

LAH

PO

PULA

SI =

50

JUM

LAH

PO

PULA

SI =

200

JLH POPULASI KEMUNGKINAN PENGAMBILAN SAMPLE

50 1/50 = 0.0200 49 1/49 = 0.0204 48 0.0208 47 0.0213 46 0.0217 45 0.0222 44 0.0227 43 0.0233 42 0.0238

JLH POPULASI

KEMUNGKINAN PENGAMBILAN

SAMPLE

200 1/200 = 0.0050 199 1/199 = 0.0050 198 0.0051 197 0.0051 196 0.0051 195 0.0051 194 0.0052 193 0.0052 192 0.0052

Page 9: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 9

2. STUDYING “SENSITIZED” UNIT of ANALYSIS

3. STUDYING VOLUNTEERS or SURVEY RESPONDENTS

APABILA UNIT SAMPLE ADALAH MANUSIA DAN MEREKA MENGETAHUI SEDANG DIANALISIS MAKA KESADARAN INI CENDERUNG MENYEBABKAN SUBJEK MEMBERI INFORMASI YANG DISTORSI

MELAKUKAN SURVEY TERHADAP INDIVIDU YANG INGIN UNTUK DIANALISIS.SAMPLE YG MEMBERI RESPONS BERASAL DARI KALANGAN TERTENTU SAJA.

DIBUTUHKAN METODE SURVEI PRIMER (WAWANCARA) YANG MAMPU MENJARING INFORMASI DARI KELOMPOK YANG HETEROGEN

Page 10: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 10

4. STATISTICAL INTERACTION

X Y

Z

- Z

X Y

Z

+ Z

GROUP. A GROUP. B

TIDAK BISA DILAKUKAN GENERALISASI !!KECILNYA UKURAN SAMPLE MENYEBABKAN RESIKO TERJADINYA “STATISTICAL INTERACTION” SEMAKIN BESAR.

Page 11: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP

Statistical VALIDITY

11

1. RANDOMNESS IN SAMPLING

LARGER SAMPLES HAVE LESS SAMPLING ERROR THAN SMALLER ONES.

THE USE of DATA. Kajian yg mendalam terhadap sebuah variabel akan butuh data dan sampel yg lebih banyak.

Page 12: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 12

2. RANDOMNESS IN MEASUREMENT

MULTIPLE MEASUREMENTS or MULTIPLE INDICATORS REDUCES RANDOM MEASUREMENT ERRORS, ESPECIALLY WHEN WHAT IT IS BEING MEASURED IS AN ABSTRACT CONCEPT

3. RANDOMNESS IN BEHAVIOUR

DIPENGARUHI OLEH DINAMIKA PERILAKU RESPONDEN

Page 13: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP

Internal VALIDITY

13

BEBERAPA PERMASALAHAN TERKAIT INTERNAL VALIDITY

INTERVENING EVENTS & TRENDS.OUTPUT SUATU PROGRAM TERCAPAI BUKAN KARENA KEBERHASILAN BERJALANNYA PROGRAM TERSEBUT, TETAPI KARENA TERJADINYA SUATU KONDISI YG TIDAK DIPERHITUNGKAN ATAU TREND TERTENTU.

TESTING.ADANYA SUATU KEGIATAN PENGUJIAN AKAN MEMBERIKAN KESADARAN RESPONDEN BAHWA MEREKA SEDANG DIEVALUASI, HAL INI DAPAT MENGUBAH SIKAP MEREKA SEHINGGA KINERJA PROGRAM SULIT DIUKUR.

Page 14: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 14

INSTRUMENTATION.ADANYA PERUBAHAN STANDARISASI / INSTRUMEN PENGUKURAN AKAN MENGGANGGU PROSES EVALUASI.

BEBERAPA PERMASALAHAN TERKAIT INTERNAL VALIDITY

REGRESSION ARTIFACTS.ADANYA NILAI EVALUASI YANG EKSTREM MEMILIKI KECENDERUNGAN SECARA ALAMI UNTUK KEMBALI KE NILAI RATA2 NORMAL.

UNCONTROLLED SELECTION.ADANYA VARIABEL YANG TIDAK DIPERHITUNGKAN (Z) TAPI TERNYATA SANGAT MEMPENGARUHI OUTPUT (Y). SETIAP LOKASI STUDI YG BERBEDA AKAN MEMILIKI KONDISI YG BERBEDA PULA.

X YX Y

Z

LINGKUNGAN A. LINGKUNGAN B.

Page 15: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 15

ATTRITION.UMUMNYA TERJADI PADA PENELITIAN EKSPERIMENTAL, DIMANA ADA PERUBAHAN RESPONDEN SETELAH DILAKSANAKAN TREATMENT, SEHINGGA PENGUKURAN DAMPAK TIDAK VALID.

BEBERAPA PERMASALAHAN TERKAIT INTERNAL VALIDITY

MULTIPLE TREATMENT INTERFERENCE (MULTICOLLINIEARITY).

CONTAMINATION.UMUMNYA TERJADI PADA PENELITIAN EKSPERIMENTAL, DIMANA SAMPEL MENGALAMI KONTAMINASI OLEH PIHAK2 DENGAN KARAKTERISTIK DI LUAR PENGENDALIAN EKSPERIMEN.

Page 16: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 16

DENGAN DEMIKIAN, DAPAT DISIMPULKAN :

VALIDITAS INTERNAL TERKAIT AKURASI DESAIN PENELITIAN DALAM KAITANNYA SESUAI

DENGAN TEORI DAN PENGALAMAN DALAM MEMAHAMI KONSTRUK YANG TERLIBAT DALAM PENELITIAN

Z (Extraneous Variables)

X (Treatment)

Y (Output)

µ (Random Component)

Page 17: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP

UJI VALIDITAS KUANTATIF

17

VALIDITAS KONSTRUKPENDAPAT AHLI (EXPERT JUDGEMENT), Minimal 3 Orang.

DIUJICOBA PADA SAMPEL (Min. 30 Orang)

ANALISIS FAKTOR

Page 18: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 18

VALIDITAS ISIMEMBANDINGKAN ISI INSTRUMEN DENGAN MATERI PENGUJIAN.

DIBANTU KISI2 INSTRUMEN BERUPA :VARIABEL dan INDIKATOR serta NOMOR BUTIR2 PERTANYAAN DARI yang BERASAL DARI PENJABARAN INDIKATOR.

ANALISIS BUTIR

Page 19: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 19

VALIDITAS EKSTERNAL

MEMBANDINGKAN (MENCARI KESAMAAN) ANTARA KRITERIA PADA INSTRUMEN DENGAN FAKTA-FAKTA EMPIRIS DI LAPANGAN

Page 20: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP 20

DALAM MENYUSUN DESAIN PENELITIAN, TINDAKAN PRAKTIS APA YANG DAPAT DILAKUKAN UNTUK

MENGHINDARI SAMPLING ERROR PADA EXTERNAL VALIDITY DAN MENGHINDARI

METHODOLOGICAL ERROR PADA INTERNAL VALIDITY, SEHINGGA PELAKSANAAN PENGUJIAN

VALIDITAS DAPAT BERJALAN EFISIEN ?

Page 21: PENDEKATAN KUALITATIF dan KUANTITATIF DALAM EVALUASI PERENCANAAN 02 VALIDITAS KUANTITATIF

EVALUASI PERENCANAAN - JP

DAFTAR PUSTAKA

21

FAISAL. 1989. FORMAT-FORMAT PENELITIAN SOSIAL. PT RAJAGRAFINDO PERSADA. JAKARTA.

LANGBEIN dan FELBINGER. 2006. PUBLIC PROGRAM EVALUATION.

SUGIYONO. 2011. METODE PENELITIAN KOMBINASI (MIXED METHODS). PENERBIT ALFABETA BANDUNG.

WHOLEY, et al. 2004. HANDBOOK OF PRACTICAL PROGRAM EVALUATION.