19-Jul-14

1

Pembinaan item model KBAT dAn Model PISA

20 April 20142.00 petang

Bilik Seminar, Fakulti Pendidikan, UTM

Abdul Halim AbdullahFakulti Pendidikan UTM

• The main goal of classroom testing andassessment is to obtain valid, reliable anduseful information concerning studentachievement.

Assessment

• Pentaksiran adalah proses mendapatkan maklumatdengan menggunakan pelbagai kaedah danpendekatan sama ada formatif, sumatif, formal daninformal, dalaman dan luaran bagi mendapatkanevidens yang boleh dipertimbangkan dan seterusnyamembuat penghakiman tentang sesuatu produkpendidikan.

Pentaksiran

8 basic steps in classroom testing & assessment (Linn & Miller, 2005):1. Determining the purpose of measurement2. Developing specification3. Selecting appropriate assessment tasks4. Preparing relevant assessment tasks5. Assembling the assessment6. Administering the assessment7. Appraising the assessment8. Use the result to improve learning & instruction

Constructing Test Items

Langkah Pembinaan Item KBATJSU PEMBINAAN

ITEM KESAHAN• Konstruk ialah perkara yang ditaksir atau diukur

Konstruk

KONSTRUK

Pengetahuan-sejauh mana murid faham akansesuatu perkara selepas melaluiproses pembelajaran

Kemahiran-sejauh manamurid berupayamelakukan sesuatu

Nilai dan sikap-sejauh manamurid itu bolehmempamerkan danmengamalkan sikapyang positif

19-Jul-14

2

Domain kognitif:1. Pengetahuan2. Pemahaman3. Aplikasi 4. Analisis5. Sintesis6. Penilaian

Taksonomi Bloom

Domain kognitif:1. Mengingat2. Memahami3. Mengaplikasi 4. Menganalisis5. Menilai6. Mencipta

Taksonomi Bloom (Revised)

Taksonomi Bloom

Pengetahuan

Pemahaman

Aplikasi

Analisis

Sintesis

Penilaian

Mengingat

Memahami

Mengaplikasi

Menganalisis

Menilai

Mencipta

KATA NAMA KATA KERJA

• Mengingat semula maklumat• Kata kerja – mentakrif, mengenalpasti, menyenaraikan,

menama, melabel, dll• Contoh:1. Senaraikan jenis penjelmaan yang telah anda pelajari?2. Apakah ciri suatu translasi?3. Namakan bahagian-bahagian yang terdapat pada

bulatan?

Tahap 1 - Mengingat

• Menerangkan idea atau konsep• Kata kerja – Mengintepretasikan, meringkaskan,

merumus, mengkelas, menerangkan, dll• Contoh:1. Dalam rajah, W’ ialah segitiga di bawah penjelmaan K.

Terangkan penjelmaan K dengan selengkapnya.2. Terangkan hubungan jejari dengan diameter bulatan

Tahap 2 - Memahami

• Menggunakan maklumat dalam situasi yang baru.• Kata kerja - Menunjuk cara, menjalankan,

menggunakan, mengira, merekod, mengubahsuai,menjana idea, menjelas dengan contoh, dll

• Contoh:1. Dalam graf di ruang jawapan di atas, lukis imej bagi

segi tiga P di bawah translasi....2. Jejari sebuah bulatan ialah 7cm. Hitung luas sektor

yang mencangkum sudut 60

Tahap 3 - Mengaplikasi

19-Jul-14

3

• Contoh:3. Dengan menggunakan Teorem Pythagoras,

anggarkan ketinggian sebuah tiang lampu sekiranyajarak pelajar dengan tiang serta sudut dongakandiperolehi.

Tahap 3 - Mengaplikasi

• Mencerakinkan maklumat kepada komponen-komponen untuk memahami struktur organisasinyadan perhubungan antara komponen

• Kata kerja – Membanding beza, mengurus,menyelesaikan masalah, menghuraikan,mencerakinkan, mencirikan, menaakul, dll

• Contoh:1. Apakah benda di sekeliling anda yang

mengaplikasikan konsep Penjelmaan. Huraikan alasananda?

2. Apakah alatan di taman permainan yang mempunyailokus lengkuk bulatan?

Tahap 4 - Menganalisis

16

Segi empat sama

Segi empat tepat Segi tiga Bulatan

Tahap 4 - Menganalisis Tahap 4 - Menganalisis

19-Jul-14

4

• Membuat pertimbangan berdasarkan kriteria yangspesifik

• Kata kerja – Mengkritik, membuat hipotesis, memberihujah/ pendapat, membuat keputusan

• Contoh:1. Adakah putaran dan pembesaran merupakan satu

isometri? Jelaskan pendapat anda.

Tahap 5 - Menilai

• Contoh:2. Sebuah kedai pizza menawarkan dua pizza bulat yang

mempunyai ketebalan yang sama tetapi saiz yangberbeza. Pizza yang lebih kecil mempunyai diameter30 cm dan berharga RM30. Manakala pizza yang lebihbesar ini mempunyai diameter 40 cm dan berhargaRM40. Pizza manakah yang mempunyai nilai yanglebih baik untuk wang anda? Terangkan hujah anda.

Tahap 5 - Menilai

Tahap 5 - Menilai

A BAntara A dan B, yang manakah lebih baik?Kalau A, mengapa?Kalau B, mengapa?

• Menyatukan elemen untuk membentuk idea ataustruktur yang baru

• Kata kerja – Merekacipta, menggabungkan, merangka,membina, dll

• Contoh:1. Dengan menggunakan konsep penjelmaan, bolehkah

anda terangkan bagaimana untuk menghasilkansebarang corak pada mozaic seperti dalam contohberikut?

Tahap 6 - Mencipta

23

Sintesis bentuk menjadi objek bermakna

24

Tahap 6 - Mencipta

19-Jul-14

5

Sintesis bentuk menjadi objek bermakna

Tahap 6 - Mencipta

Fail GSP

Taksonomi Bloom

Taxonomy Verbs for objectives1. Remembering Define, describe, identify, label, list, match,

name, state2. Understanding Convert, explain, extend, give example, infer

3. Applying Change, compute, solve, relate, modify4. Analysing Break down, differentiate, discriminate, point

out5. Evaluating Compare, conclude, criticise, justify,

summarise6. Creating Design, construct, plan, produce, invent

Kemahiran Berfikir Aras Tinggi (KBAT)

• Tajuk- tempat pentaksiran sesuatu konstruk itudilaksanakan

• Bahagian-bahagian tertentu mata pelajaran dandikenalpasti daripada Sukatan Pelajaran.

• Biasanya dibahagikan kepada beberapa subkonteks

PENJELMAAN KONSEP PUTARANKONSEP PANTULAN

Konteks

• Ditentukan berdasarkan tiga aspek:

Aras Kesukaran

Aspek Aras Mudah Aras Sukar

TahapPengetahuan

Asas(Basic)

Lanjutan(Advance)

Kelaziman Lazim(Familiar)

Baru(Novel)

Kerencaman Ringkas(Simple)

Rencam(Complex)

Mainly two types of classroom test items: a. Objective test items

• Multiple choice, short answer, fill in the blanks, etc.• Highly structured• Only 1 correct answer, can be predetermined

b. Performance assessment• Essay questions, open-ended problems, etc.• No single right answer• Expert is required to score the test

Tentukan jenis item

19-Jul-14

6

• In most tests, there is a wide range of tasks that ateacher wants to measure.

• To ensure that a test covers as wide as possible therange of tasks, a simple listing of specific tasks is notenough

• Use Table of Specifications to list the tasks that ateacher wants to measure including the number ofitems for each task so that a test covers arepresentative sample of instruction

Table of Specifications

• Two functions:– Ensures balance and proper emphases across the

content covered by the teacher– Assures inclusion of items that requires the use of

higher cognitive processes as well as items measuring recall of specific materials

(MacDaniel, 1994)

Table of Specifications

• Three steps in building a table of specifications:1. Preparing a list of instructional objectives2. Outlining the course content3. Preparing the two-way chart (table)

(Linn & Miller, 2005)

Table of Specifications

1. Preparing a list of instructional objectives• State objectives in terms of what we expect students

to be able to do at the end of instruction• Well-stated objectives tell the type of student

performance we are willing to accept as evidencethat the instruction has been successful

Table of Specifications

1. Preparing a list of instructional objectives• Use ABCD• A – Audience• B – Behaviour• C – Condition• D – Degree

Table of Specifications

19-Jul-14

7

1. Preparing a list of instructional objectives• At the end of the lesson, the students are able to

state all 6 levels of Bloom Taxonomy in the correctorder.

• At the end of the instruction, the students are ableto design a table of specifications for a test coveringone topic following the instructional objectives.

Table of Specifications

1. Preparing a list of instructional objectives• Criteria to review objectives:a) Completeness – are all important outcomes

included?b) Appropriateness – Are outcomes related to school

goals?c) Soundness – Are outcomes in harmony with sound

principles of learning?d) Feasibility – Are outcomes realistic in terms of

student abilities, time available and facilities?

Table of Specifications

2. Outlining the course content• What to be included in the test?• Which contents will determine which learning

objectives to be tested.• Syllabus

Table of Specifications

3. Preparing the table• Not all the objectives can be tested using only one

type of test. • Select appropriate objectives to be tested according

to the type of test we are going to prepare.• The table should have the total number of test items

and the percentage allotted to each objective and content area.

Table of Specifications

Kandungan

Mengingat Memahami Mengaplikasi

Menganalisis

Menilai Mencipta

A. … Obj. 1 Obj. 2 Obj. 3

B. … Obj.4 Obj. 5 Obj. 6

C. … Obj.7 Obj. 8

D. … Obj. 9 Obj. 10 Obj.11

Jadual Spesifikasi UjianKBAT

Kandungan

Mengingat Memahami Mengaplikasi

Menganalisis Menilai Mencipta

- List all the equations linking s, u, v, a & t

- Explain the relationships between v, a & t

- Performalgebra to link 2 equations suitable to solve a problem

B. Solve problemsin linear motion with constant a

- Solve problems in linear motion with a constant a

-Make comparison between v and t;-Determine s, t, u, v & a in a problem

- Predict the estimateds for 2 moving objects

Topic: Linear motionTable of Specifications

KBAT

19-Jul-14

8

Contents as in the syllabus

Remembering

Understanding Applying Analysing Evaluating Creating

A. … Obj. 1 Obj. 2 Obj. 3

% No. % No.

% No. % No.

B. … Obj.4 Obj. 5 Obj. 6

% No. % No. % No. % No.

C. … Obj.7 Obj. 8

% No. % No. % No.

D. … Obj. 9 Obj. 10 Obj.11

% No. % No. % No. % No.

Table of SpecificationsKBAT

Jadual Spesifikasi Ujian

Kandungan Tahap kognitifMengingat Memahami Mengaplikasi Menganalisis Menilai Mencipta

Relating time, displacement, velocity and acceleration

List the equations that relate time, displacement, velocity and acceleration. [1]

Interpret the relationships of time, displacement, velocity and acceleration. [2]

Choose the correct equation to solve a l inear motion problem. [3,4]

20 % 4 5 % 1 5 % 1 10 % 2Solve problems of l inear motion with constant acceleration

Solve problems of l inear motion with constant acceleration. [5,6]

Compare the velocity and time. [7]

Identify the s, t, v, u and a of a problem. [8]

Predict the distance of two moving objects. [9,10]

30 % 6 10 % 2 10 % 2 10 % 2Interpret l inear motion graphs

List the information found on linear motion graphs. [12]

Identify the physics quantity of l inear motion graphs. [11]

Sketch a l inear motion graph based on the information given. [13]

Determine the information and facts of l inear motion graphs. [14,15]

25 % 5 5 % 1 5 % 1 5 % 1 10 % 2Solve problems relating to l inear motion graphs

Calculate the average velocity of a displacement-time graph. [16]Calculate the

displacement of a velocity-time graph. [17]

Make conclusion and interpretation of a l inear motion graph. [18]

Translate a displacement-time graph to a velocity-time graph. [19]

Make decision to select the best graph to represent a situation. [20]

25 % 5 10 % 2 5 % 1 5 % 1 5 % 1

3. Preparing the table• After the table is complete, check that it has a good

distribution of percentage of items.• This should reflect the emphasis of the teacher’s

instruction in the classroom.• Objectives considered more important and more

teaching time should be allotted more test items.• This also be consistent with the intended and actual

instructional priority given to the topic.

Table of Specifications

3. Preparing the table• The table is just a guidance and the final version of

the test may be different.• However, it should not be too far from the original

desired distribution and should have the correcttotal number of items.

Table of Specifications

4. Preparing relevant assessment tasks• Construct test items following as close as possible to

the specification developed• Match test items to intended outcomes

Pembinaan Item KBAT

Konstruk :

Konteks :

Aras kesukaran :

Pengetahuan sedia : ada

Pembinaan Item KBAT

Tentukan jenis item

19-Jul-14

9

Tentukan jenis evidens1. Fakta2. Konsep3. Generalisasi4. Keupayaan menilai5. Rasional

Pembinaan Item KBAT

Rancang stimulus1. Pelbagai2. Saling berkaitan3. Teks sepenuhnya4. Teks bukan

sepenuhnya

Tulis item1. Stimulus2. Stem3. Distraktor

Pembinaan Item KBAT

Tulis peraturan pemarkahan/ rubrik penskoran

Konstruk Menilai

Konteks Nisbah, kadar dan kadaran

Aras kesukaran Sederhana

Pengetahuan sedia ada Konsep penukaran unit

Pembinaan Item KBAT

Berdasarkan Penguatkuasaan Barang-BarangKawalan di Bawah Akta AKB 1961, didapatiharga minyak masak adalah seperti berikut:

Pada pandangan anda, minyak masakmanakah yang mempunyai nilai lebih baikuntuk wang anda? Jelaskan.

1 kg RM3.30

2 kg RM6.25

STEM- Sains, Teknologi, Kejuruteraan, Matematik

No. Butiran Markah

1. 3

2. 2

3. 1

Pembinaan Item KBAT

Peraturan pemarkahan:

Pembinaan Item KBAT

Siti ingin menyediakan kotak berbentukkuboid untuk mengisi sebuah periuk nasiyang hendak dihadiahkan kepada ibunya.Berapakah isipadu yang paling sesuai bagikotak tersebut?A. 5 200 cm3

B. 10 400 cm3

C. 15309 cm3

D. 38 880 cm3

Konstruk : Mengaplikasi

Konteks : Pepejal Geometri

Aras kesukaran : Sederhana

Pengetahuan sedia ada : Isipadu pepejal

19-Jul-14

10

Pembinaan Item KBAT

Insiden MH370 yang terjadi baru-baru ini amat mengejutkan kitasebagai rakyat Malaysia.Rajah berikut menunjukkanbilangan penumpang pesawatMH370 sebagaimana yangdikeluarkan oleh Malaysia AirlineSystem (MAS).

Tukarkan data tersebut kepadasebuah carta pai.

Konstruk : Mengaplikasi

Konteks : Statistik

Aras kesukaran : Sederhana

Pengetahuan sedia ada : Peratus

Pembinaan Item KBATKonstruk : Menganalisis

Konteks : Bulatan

Aras kesukaran : Sederhana

Pengetahuan sedia ada : Bahagian-bahagian bulatan

Rajah di bawah menunjukkan lokasipencarian pesawat MH370 olehpasukan-pasukan tertentu. Sekiranyaradius sektorpencarian KM AMANAHdan KD PAHANG ialah 2/5 daripadakeseluruhan radius 120 batu nautika,berapakah luas kawasan pencarianoleh KD GANYANG, KM SEBATIK, KMSEGANTANG dan PENGGALANG 17.

Diketahui, satu batu nautika adalahbersamaan dengan 1,852 meter.