ASPEK KESELAMATAN DALAM PENGHASILAN INSTRUMEN PENTAKSIRAN

(Petikan Nota Mesyuarat Keselamatan dan Peningkatan Profesionalisma Pegawai/Kakitangan SPPU 24/5/04-28/5/04)

                                                                                                                                            Butakah Cinta ~ Berapa lamakah lagi~Terpaksa aku menanti~Sehingga teguhnya pendirian dihati ~Bukan hanya kepentingan~ Malahan keegoan telah ku korbankan~ Berlimpahan kasih sayang... aku curahkan Buat mu seorang...Kiranya semua itu~Tak memadai bagi mu~Apa sebenarnya ~yang kau mahu~Ku tak tahu...Kau hilang bila ku tiba~Kau datang bila ku kecewa...Terasa diri...di persenda...Dimana berakhirnya nanti~Permainan sendiwara mu ini...Sesungguhnya aku... tak mengerti...Jika benar cinta itu buta...Butakah mata ku...Berkali terluka masih jua... ku merindu...Apa yang ku inginkan...Cuma kejujuran dalam perhubungan...Jika itu tiada...Apalah ertinya...Penantian ini hanya sia-sia...( 2X )

Analisis Item 

PIAWAIAN PERSONEL

1. mempunyai pengetahuan dan pemahaman tentang keperluan dan kepentingan menganalisis item

2. mempunyai pengetahuan dan pemahaman tentang perkara-perkara yang akan diambil kira semasa menganalisis item

3. mempunyai pengetahuan dan pemahaman tentang bagaimana hendak menganalisis item

PIAWAIAN PROSES

1. menyemak keakuran item dengan Spesifikasi Ujian dari aspek

          - kandungan/tajuk

          - konstruk yang dikur

          - Jadual Spesifikasi Ujian

    2.   menyusun item mengikut kod tertentu

          - kandungan/tajuk

          - konstruk yang diukur       

    3.  menyemak semula item dari aspek persembahan fizikal

           -  kejelasan arah

           -  kejelasan, kecakupan dan kerelevanan maklumat

           -  pengunaan bahasa dan istilah yang betul

           -  bias dan sensitiviti

    4. memperbaiki atau mengubahsuai item yang tidak berfungsi

PIAWAIAN PRODUK

1. sekumpulan item yang akur dengan spesifikasi ujian dan sedia untuk pemasangan kertas soalan

Tafsir 

Item

Perkara atau alat yang digunakan untuk mendapat evidens yang boleh dipertimbangkan dalam pentaksiran sesuatu konstruk yang hendak diketahui tahapnya/kehadirannya pada seseorang pelajar serta pemberian skornya

Item Pentaksiran

Alat, instrumen atau kaedah untuk mendapatkan evidens tentang penguasaan atau pencapaian pelajar terhadap sesuatu konstruk untuk dibuat pertimbangan

Statistik Item

maklumat tentang tingkah laku item dari segi kesukaran item, keupayaan item, dari segi mendiskriminasi antara pelbagai tahap pencapaian calon yang mengambil ujian dan keberkesanan distraktor pada item berkenaan bagi menarik calon-calon yang tidak menguasai perkara-perkara yang diuji

Analisis Item adalah satu taburan data mengenai respons pelajar-pelajar terhadap item itu. 

Fungsi utama analisis item adalah mengawal kesahan dan kebolehpercayaan sesuatu ujian.

Diantara fungsi lain ialah :

1. mengenal pasti item yang mempunyai unsur keraguan (ambigous), salah kunci atau kunci kurang berfungsi, terlalu

   mudah, terlalu sukar, berupaya mendiskriminasi kumpulan cerdas dengan kumpulan lemah, mempunyai unsur tekaan

   (guessing)

2. membaiki item supaya lebih berfungsi dari segi kesahan, kebolehpercayaan dan objektif ujian

3. membina bank item

4. menganggar statistik ujian sebenar

5.menggunakan untuk tujuan proses pengajaran dan pembelajaran, penilaian kurikulum, pemilihan, diagnosis, pemarkahan dan

    memperbaiki  kemahiran menulis

MAKLUMAT ASAS DATA ANALISIS ITEM

1. Indeks Kesukaran (Index Difficulty)

ialah satu indeks pengukuran tentang kesukaran item bagi kumpula yang diuji. Indeks ini menunjukan sama ada sesuatu item adalah terlalu sukar, sederhana atau terlalu mudah.

Garrett (1959), Sax (1980) dan Brown (1983) menyatakan bahawa satu kesukaran sesuatu item juga bergantung kepada berapa ramai calon dalam kumpulan yang diuji menjawab dengan betul. Dalam situasi ini, indeks kesukaran disebut sebagai indeks pilihan apabila ia mewakili perkadaran atau peratus calon dalam kumpulan yang diuji dapat menjawab sesuatu item dengan betul.

Indeks kesukaran dinyatakan sebagai perkadaran dan julatnya adalah diantara 0 dan 1. Lebih tinggi nilai indeks, lebih mudah item berkenaan kepada kumpulan yang diuji kerana lebih ramai calon dapat menjawab dengan betul.

Item yang diprauji adalah dari kumpulan yang berbeza. Skor daripada taburan yang berbeza hanya sah dibandingkan apabila purata dan sisih piawainya adalah sama. Indeks kesukaran bagi item-item yang telah di prauji mesti ditukarkan kepada satu skala linear supaya boleh dibuat perbandingan dan seterusnya digunakan untuk pemasangan satu kertas soalan. Indeks kesukaran item yang digunakan oleh Lembaga Peperiksaan Malaysia ialah satu skala linear, yang dinamakan skala Delta, yang mengunakan sisih min 13 dan sisih lazim 14.

Lampiran 1 menunjukkan hubungan indeks pilihan dengan indeks kesukaran mengunakan skala delta

Pengunaan skala delta memerlukan andaian bahawa kebolehan (trait) yang diukur itu mempunyai taburan normal

Lampiran 2 mengemukakan pengiraan bagi indeks kesukaran item berbentuk subjektif/esei yang skornya berbentuk selanjar.

Lembaga Peperiksaan Malaysia memberi penilaian keatas nilai-nilai Delta seperti berikut :-

2. Indeks Diskriminasi (Discrimination Index)

Thorndike (1955) mendefinisikan indeks diskriminisi sebagai indeks yang menunjukkan keupayaan item itu mendiskriminasi antara kebolehan kumpulan cerdas dengan kumpulan lemah. Sax (1980) mentakrifkan indeks diskriminasi sebagai pekali korelasi yang menghubungkan skor item dengan skor kriterion, amnya skor kriterion merujuk kepada skor ujian.

Lembaga Peperiksaan Malaysia mengunakan korelasi biserial titik (Point Biserial), rpbis, yang menghubungkan antara prestasi berbagai kumpulan terhadap sesuatu item dengan prestasi mereka keatas sesuatu kriterion yang mengukur kebolehan yang sama. Markah keseluruhan ujian dijadikan kriterion. Korelasi ini juga digunakan kerana skor item adalah dikotomi dan skor kriterion adalah selanjar. Korelasi ini juga sangat sesuai digunakan kerana sampel praujian dianggap stabil atau setara dengan kumpulan pos-ujian.

Seorang pelajar yang memperolehi yang tinggi didalam sesuatu ujian seharusnya memperolehi skor yang tinggi bagi tiap-tiap item yang dijawab dalam ujian itu. ini bermakna korelasi tesebut tinggi. Dengan itu, item yang mempunyai pekali korelasi (indeks diskriminasi) yang tinggi dikatakan mempunyai keupayaan yang tinggi diskriminasinya.

Kebolehpercayaan merujuk kepada takat perbezaan markat ujian calon yang disebabkan oleh perbezaan sebenar kebolehan calon. Oleh itu, ujian yang kebolehpercayaan tinggi mesti mengandungi item-item yang mempunyai indeks diskriminasi yang positif dan tinggi.

Pengiraan bagi rpbis adalah seperti Lampiran 3

Jadual di bawah menunjukkan pekali korelasi yang sesuai digunakan mengikut bentuk skor item dan skor kriterion.

Indeks diskriminasi bagi sesuatu item objektif aneka pilihan boleh digunakan membahagi aras prestasi pelajar yang diperkenalkan oleh Martuza (1977) dan Sax (1980). Setelah item-item diperiksa, kertas jawapan pelajar disusun mengikut markah secara tertib menaik. Kumpulan (20%-30%) pelajar cerdas dan Kumpulan (20%-30%) pelajar lemah diasingkan.

Dengan menggunakan rumus :

dengan keadaan

T                = bilangan pelajar dalam kumpulan cerdas yang menjawab dengan betul

R               = bilangan pelajar dalam kumpulan lemah yang menjawab dengan betul

NT             = jumlah pelajar dalam kumpulan cerdas

NR            = jumlah pelajar dalam kumpulan lemah

Jika semua pelajar dalam kumpulan cerdas dapat menjawab dengan betul dan tidak seorang pun pelajar dalam kumpulan lemah dapat menjawab dengan betul, nilai diskriminasi adalah 1. Jika sebaliknya berlaku, nilai indeks tersebut adalah -1. Jika nilai indeks 0, item tersebut tidak berupaya mendiskriminasi antara kumpulan cerdas dengan kumpulan lemah.

Kaedah ini adalah seperti dalam Lampiran 4.

Pekali korelasi (indeks diskriminasi) hasil darab momen Pearson, r , digunakan untuk ujian esei/struktur yang skor item dan jumlah skornya bebentuk selanjar, pengiraan bagi r adalah seperti dalam Lampiran 5.

Ebel (1979), mengariskan beberapa penilaian keatas nilai-nilai indeks diskriminasi seperti berikut :-

Lembaga Peperiksaan Malaysia memberi penilaian ke atas nilai-nilai indeks diskriminasi seperti berikut :

MENGANALISIS ITEM

Statistik Ujian

Rajah dibawah menunjukkan contoh satu keratan data statistik ujian

MPV  1974 ANALISIS ITEM BAGI 7000/1 PENGURUSAN ILMU

Maklumat yang diperolehi merujuk kepada data tersebut

STATISTIK ITEM

Contoh menunjukkan satu keratan data statistik item

Lampiran 1

Penukaran Nilai p kepada nilai Delta mengunakan Skala Delta

 pada Min Delta = 13.0 dan Sisihan Piawai Delta = 4.0

Lampiran 2

Kaedah Pengiraan Indeks Kesukaran Bagi Item Struktur/Esei