เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 1 แนะนาการใช้โปรแกรมวเิ คราะห์แบบสอบ TAP : (Test analysis Program) เกือ้ กระแสโสม 1. บทนา โปรแกรมการวิเคราะห์แบบสอบ TAP (Test Analysis Program) พัฒนาข้ึนโดยบรุ๊ก (Brooks, Gordon. P.) เพ่ือให้ใช้ได้ง่ายและน่าเช่ือถือ (ฟรีด้วย)มีประโยชน์มากสาหรับครูผู้สอนที่เก่ียวข้องกับการ พัฒนาแบบสอบเพือ่ ใหไ้ ด้แบบสอบที่มีคุณภาพสาหรบั วดั คุณลกั ษณะของผ้เู รียน รวมท้ังเป็นโปรแกรมที่ครู สามารถนาไปใช้ในรายวิชาที่เกี่ยวข้องกับการพัฒนาแบบสอบได้ โปรแกรมน้ีใช้ในระบบปฏิบัติการ Windows 9X/NT/2000/XP เขียนด้วยภาษา Delphi Pascal ผู้พัฒนาได้พัฒนามาอย่างต่อเน่ืองและ นาเสนอในวารสารและที่ประชุมนานาชาติที่สาคัญ เช่น Version 4.2.5 (April 2003) ณ ที่ประชุม American Educational Research Association รัฐ Chicago Version 4.5.X (July 2003) ตีพมิ พ์ใน วารสาร Applied Psychological Measurement ปัจจุบันเป็น Version 5.2.X (ขนาด 1.2 MB) ได้ พัฒนาจากเดิมในเรื่องความสามารถในการกาหนดเกรดที่กว้างขึ้น ความสามารถในการวิเคราะห์แบบ partial credit ความสามารถในการวิเคราะห์ผล นาเสนอ มุมมองท่ีรวดเร็วและการเช่ือมโยงกับ SPSS โ ป ร แ ก ร ม TAP ทั้ ง 3 Versions นี้ ผู้ ใ ช้ ส า ม า ร ถ ด า ว โ ห ล ด ฟ รี จ า ก http://oak.cats.ohiou.edu/~brooksg/software.htm โปรแกรม TAP ได้ให้ความสะดวกแก่ผู้ใช้ในเรื่องการป้อนข้อมูล เช่น ผู้ใช้สามารถป้อนข้อมูล คะแนนโดยตรงในหนา้ จอของโปรแกรม หรอื ใชว้ ธิ กี ารนาเขา้ จากโปรแกรมอ่ืนได้ นอกจากน้ี โปรแกรมยัง เอื้อต่อการฝึกปฏิบัติการวิเคราะห์แบบสอบสอบโดยผู้ใช้สามารถสร้างชุดตัวอย่างข้อมูลสาหรับการ วิเคราะห์จากตัวโปรแกรมโดยใช้วิธีการสุ่มข้อสอบโดยมีการกาหนดค่าพารามิเตอร์ต่างๆ เช่น ความยาก ของข้อสอบ จานวนผสู้ อบ จานวนข้อสอบ และจานวนตวั เลือกในแตล่ ะขอ้ ได้ โปรแกรม TAP พฒั นาขึ้นเพ่อื ใชว้ ิเคราะห์แบบสอบตามทฤษฏกี ารทดสอบแบบด้ังเดิม (Classical Test Theory) ประเภทการสอบแบบอิงกลุ่ม (Norm-Referenced Test) โดยให้ผลการวิเคราะห์ที่ สาคัญ 3 กล่มุ ไดแ้ ก่ 1. ผลการวิเคราะห์ผู้สอบ ( Examinee Analysis) ประกอบด้วยค่าสถิติต่อไปน้ี เปอร์เซ็นต์ใน การตอบถูก (percentage correct) เกรด (letter grade) ช่วงความเช่ือมั่นของคะแนนและเกรด จานวนข้อท่ตี อบถูก จานวนขอ้ ท่ีตอบผดิ รวมทัง้ คา่ สถติ พิ นื้ ฐานของกลมุ่ ผสู้ อบ 2. ผลการวิเคราะห์ข้อสอบและแบบสอบ (Item and Test Analysis) ประกอบด้วยค่าสถิติ ต่อไปน้ี ค่าความยากของข้อสอบ (item difficulty) ค่าสหสัมพันธ์แบบพอยท์ไบซีเรียล (point biserial) ดัชนีอานาจจาแนก (discrimination index) ค่าสถิติตา่ งๆสาหรบั การวอเคราะหเ์ มอื่ ขอ้ สอบแต่ละข้อถูก ตัดทงิ้ (คา่ ความเท่ียง คา่ เฉลย่ี สว่ นเบย่ี งเบนมาตรฐาน เปน็ ตน้ ) 3. ผลการวเิ คราะหต์ ัวเลือก (Options Analysis) ประกอบด้วยค่าสถิติต่อไปน้ี จานวนผู้ตอบใน กลุ่มสูง-กลุ่มต่าท่ีเลือกตอบตัวเลือก ค่าความยากของข้อสอบและค่าอานาจจาแนกของตัวเลือกท้ังตัวที่ ถกู และตวั ลวง
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 2 2. การปอ้ นขอ้ มูลแบบสอบ TAP มีวิธีการป้อนข้อมูลสาหรับการวิเคราะห์ที่ง่าย สะดวก ผู้ใช้สามารถป้อนข้อมูลโดยตรงจาก หน้าจอของโปรแกรมหรือนาเข้าจากโปรแกรมอ่ืนได้ นอกจากนี้ผู้ใช้สามารถกาหนดลักษณะโดเมน/ เน้ือหาท่ีมุ่งวัด (content domain) และระดับพฤติกรรมด้านพุทธิพิสัยที่มุ่งวัด (cognitive level) โดย ป้อนข้อมูลลงในชอ่ งกาหนดลกั ษณะดงั กลา่ วทก่ี รอบ Table of Specification ได้ 2.1 การป้อนขอ้ มลู แบบสอบโดยตรงในหน้าจอของโปรแกรม TAP มีขน้ั ตอนดังน้ี 1. ภายใต้กรอบ INPUT ให้เลือก Enter New Data แล้วคล้ิกท่ีปุ่ม Go to Data Editor ดงั ภาพประกอบท่ี 1 (กรอบ INPUT อย่สู ว่ นซา้ ยสุด) ภาพที่ 1 หนา้ ตา่ งของโปรแกรมเมอ่ื เขา้ สโู่ ปรแกรม 2. ภายใต้หนา้ จอ Data Editor (ภาพท่ี 2) ให้กรอกรายละเอียดทีเ่ กี่ยวขอ้ ง ดงั นี้ Title: รายช่ือหวั ข้อแบบสอบหรอื วิชาท่สี อบ (ไม่เกิน 70 ตัวอักษร) Comments: คาอธบิ ายเพม่ิ เตมิ ข้อสงั เกต หมายเหตุท่ีเกี่ยวขอ้ งกบั แบบสอบ Answer Key: ตวั เลขท่เี ปน็ เฉลยของข้อสอบ #Options: จานวนตวั เลือกของข้อสอบแตล่ ะขอ้ Item Include: กรอก Y ถา้ นาข้อสอบขอ้ น้ันมาวเิ คราะห์ หรอื กรอก N ถ้าไม่ต้องการนาข้อสอบข้อนน้ั มาวิเคราะห์ #Examinee: จานวนผเู้ ขา้ สอบ #Items: จานวนขอ้ สอบ Missing Data Symbol: กาหนดสัญลักษณท์ ผี่ ู้ตอบไมต่ อบหรือตอบมากกว่า 1 ตัวเลือก อาจใสเ่ ลข 9 ID label Length: กาหนดความยาวของ ID รหสั ประจาตวั ผู้เข้าสอบโดยกาหนดจานวน อักขระตามท่ตี ้องการ DATA : ในชอ่ งว่างให้ปอ้ นรหัสผู้เข้าสอบและปอ้ นตวั เลอื กแต่ละข้อของผู้เข้าสอบให้ครบ จานวนขอ้ ท้ังหมด Save file : เมอ่ื กรอกข้อมลู เสรจ็ แลว้ ให้บนั ทกึ ข้อมูลโดยกดป่มุ Save file
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 3 ภาพที่ 2 หน้าจอ Data Editor 3. วเิ คราะห์ข้อมูลโดยคลิ้กท่ีปุ่ม Close & Analyze ผลการวิเคราะห์แสดงในหน้าต่าง 2 ส่วน คือ หน้าต่าง QUICK EXAMINEE RESULTS แสดงค่าสถิติเกี่ยวกับผู้สอบ และหน้าต่าง QUICK ITEM ANALYSIS แสดงค่าสถิติสาหรับข้อสอบ เม่ือต้องการบันทึกผลการวิเคราะห์ท้ัง 2 ส่วนลงในไฟล์ ให้ไปที่ช่อง OUTPUT แล้วพิมพ์ช่ือท่ีต้องการเก็บผลการวิเคราะห์ลงในช่อง Result File Name นามสกุล.TXT และคล้ิก ตรงช่อง Save Quick Examinee Result to File และคลิ้ก ตรงช่อง Save Quick Item Analysis to a File โดยโปรแกรมจะบันทึกผลการวิเคราะห์ไว้ในช่ือเดียวกันแต่ต่าง นามสกุลกัน ดังภาพประกอบที่ 3 ภาพที่ 3 กรอบ OUTPUT สาหรบั การต้ังไฟล์บรรทกุ ผลการวเิ คราะห์ นอกจากนี้ การส่ังการวิเคราะห์และการบันทึกผลการวิเคราะห์ สามารถใช้เมนูส่วนกลางของ หนา้ จอได้ ดังภาพประกอบท่ี 4
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 4 ภาพท่ี 4 ปุม่ สั่งวเิ คราะห์และบันทกึ ผลการวิเคราะห์ ปมุ่ ข้างบน คล้ิกเพอ่ื จุดประสงคต์ อ่ ไปนี้ Analyze (F9) เพอ่ื วิเคราะห์ขอ้ มลู โดยไดผ้ ลการวิเคราะหเ์ หมือนคาสัง่ Close & Analyze View Full Results & Graphs เพอื่ วิเคราะห์ข้อมูลโดยให้ผลการวิเคราะห์ผู้สอบและข้อสอบท่ีมี รายละเอยี ดมากขึน้ พร้อมแสดงแผนภมู ิแท่งและฮีสโตแกรมของคะแนนสอบ Save Full Results (F5) เพื่อบันทึกผลการวิเคราะห์ขอ้ มูลโดยละเอียด 2.2 การนาเข้าข้อมูลของแบบสอบจากโปรแกรมอ่ืน ภายใต้เมนู Data ในหน้าจอ Data Editor สามารถนาเข้าข้อมูลแบบ .txt file ได้ โดยไปท่ีเมนู Data แล้วคลิ้กเมนูรอง Insert data from text file จากนั้นระบแุ หลง่ ข้อมูล ช่ือไฟล์ ท้ายท่ีสุดเปิด (open)ไฟล์ จะได้ข้อมูลเข้ามาในหน้าจอ Data Editor เพอ่ื ทาการวิเคราะห์ตอ่ ไป 2.3 การนาเขา้ เนอื้ หา/ปริเขตท่ีม่งุ วดั และระดบั พฤตกิ รรมท่มี ุง่ วัด ในขน้ั ตอนการสร้างข้อสอบมี ขั้นตอนหน่ึงที่ผู้สร้างได้ปฏิบัติ เรียกว่า การสร้างผังข้อสอบหรือทาตารางที่เรียกว่า ตารางกาหนดแผนผัง การสร้างข้อสอบ (Table of Specification) เป็นตารางที่สร้างขึ้นเพ่ือเสนอรายละเอียดของการทดสอบ แต่ละคร้ังว่าจะวัดเน้ือหาอะไร และพฤติกรรมระดับใด ซึ่งระดับพฤติกรรมมีหลายวิธีที่จะนิยามถึงระดับ พฤตกิ รรมดา้ นพุทธิพิสัย โดยท่ัวไปนิยมใช้แนวคิดของบลูมเป็นกรอบในการจัดแบ่งระดับพฤติกรรม เป็น 6 ระดับ ได้แก่ ความรู้ความจา ความเข้าใจ การนาไปใช้ การวิเคราะห์ การสังเคราะห์ และการประเมิน โปรแกรม TAP ไดก้ าหนดตวั เลอื กสาหรับการไดส้ ารสนเทศเกี่ยวกบั เนอื้ หาและพฤติกรรมที่มุง่ วัดด้วย ตัวอย่างตาราง Table of Specifications ของแบบสอบทั่วไปทางธุรกิจ (General Business Test) จานวน 30 ข้อ Content Domain Cognitive level knowledge comprehension application Factor of production 64 2 Market/command economies 3 4 1 Measuring economic activity 2 5 4 การกรอกข้อมูลเกี่ยวกับตารางกาหนดแผนผังการสร้างข้อสอบ (Table of Specifications) ดาเนินการ โดยไปที่เมนู Options แล้วคล้ิกเมนูรอง Set table of Specifications ปรากฏหน้าจอ Table of Specifications แล้วกรอกข้อมูลในช่องที่กาหนดให้ เสร็จสมบูรณ์แล้วคล้ิก OK ดังตัวอย่างการกรอก ข้อมูลจากตารางขา้ งตน้ ลงในโปรแกรม ดงั ภาพที่ 5
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 5 ภาพท่ี 5 หนา้ จอ Table of Specifications 2.4 การใช้ตัวสร้างคะแนนโดยวิธีการสุ่ม สาหรับผู้ใช้โปรแกรมที่ต้องการสาธิตการวิเคราะห์ ข้อสอบและแบบสอบให้เพ่ือนครูหรือผู้สนใจ โปรแกรมสามารถสร้างตัวอย่างข้อมูลคะแนนสาหรับการ วิเคราะห์โดยใช้วิธีการสุ่ม โดยมีการกาหนดค่าพารามิเตอร์ท่ีเก่ียวข้อง เช่น ค่าความยาก จานวนข้อสอบ จานวนผูส้ อบ โดยดาเนนิ การดงั นี้ ภายใต้กรอบ INPUT ให้เลือก Generate Sample Data จากน้ันคล้ิก Go To Data Editor ปรากฏหน้าจอ Data Generation Information (ดังภาพท่ี 6 ) โดยมีตัวเลือกย่อยเกี่ยวกับความยาก ของข้อสอบ และช่องให้ระบุเกี่ยวกับ จานวนผู้เข้าสอบ จานวนข้อสอบ รูปแบบการสุ่ม และจานวน ตัวเลือก ซึ่งผู้ใช้สามารถระบุได้ตามต้องการ เม่ือระบุเสร็จแล้วให้คลิ้กที่ปุ่ม Generate เพื่อให้ได้ข้อมูล พรอ้ มท่ีจะวเิ คราะห์ โดยใช้คาสั่ง Close and Analyze หรอื บันทึก(save) ไฟล์ไว้เพ่อื วเิ คราะหต์ ่อไปได้
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 6 ภาพที่ 6 หนา้ จอ Data Generation Information 3. ผลการวิเคราะห์ด้วยโปรแกรม TAP เมื่อนาเข้าข้อมูลสาหรับการวิเคราะห์เรียบร้อยแล้ว ทาการ วิเคราะหโ์ ดยคลิ้กปมุ่ Analyze (F9) จะให้ผลการวเิ คราะห์แบบรวดเร็วแบบสรุปเก่ียวกับผลการวิเคราะห์ ผูส้ อบและผลการวิเคราะห์ข้อสอบ ถ้าตอ้ งการแสดงผลการวิเคราะห์อย่างละเอียด ให้คล้ิกปุ่ม View Full Results ผลการวิเคราะห์โดยละเอยี ดปรากฏรายการหรือค่าสถติ ิที่เกยี่ วขอ้ ง 4 สว่ น คือ 3.1 ผลการวิเคราะหผ์ สู้ อบ (Examinee Analysis) ปรากฏผลดังน้ี ID คือ รหสั ประจาตัวของผู้สอบแตล่ ะคน Score คอื คะแนนทไ่ี ดข้ องผสู้ อบแต่ละคน Percent คือ ร้อยละของสัดสว่ นระหวา่ งคะแนนที่ไดก้ ับคะแนนเต็ม Ltr Grade คือ ผลการตัดเกรดโดยผู้วิเคราะห์สามารถกาหนดในเมนู Options เมนูรอง Set Percentages of Grades ว่าจะให้ตัดกี่เกรดและเกณฑ์คะแนนเท่าใด 68%C.I คือ การประมาณค่าคะแนนจริงของผู้สอบแต่ละคนแบบช่วงด้วยความเชื่อม่ัน ร้อยละ 68 โดยคดิ จากสูตร X-SEM T (คะแนนจริง) X+SEM 95%C.I. คือ การประมาณค่าคะแนนจริงของผู้สอบแต่ละคนแบบช่วงด้วยความเชื่อม่ัน รอ้ ยละ 68 โดยคิดจากสตู ร X-(1.96) SEM T (คะแนนจริง) X+(1.96)SEM Number of Examinees คือ จานวนผสู้ อบทั้งหมด Minimum Score คอื คะแนนตา่ สุดทผี่ ูส้ อบในกลุ่มทาได้ Maximum Score คือ คะแนนสูงสุดท่ีผูส้ อบในกล่มุ ทาได้ Median Score คอื คะแนนมัธยฐาน Standard Deviation คือ ส่วนเบี่ยนมาตรฐานของคะแนนสอบ
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 7 Variance คอื ความแปรปรวนของคะแนนสอบในกลมุ่ Skewness คือ ความเบ้ของคะแนนสอบในกลมุ่ Kurtosis คอื ความเบ้ของคะแนนสอบในกลุ่ม Bar Graph คือ แผนภูมแิ ทง่ แสดงการแจกแจงความถีข่ องคะแนน Stem-and-Leaf Display คอื แผนภาพตน้ ไม้แสดงการแจกแจงความถี่ของคะแนน Bar Chart for Letter Grades คือแผนภูมิแท่งแสดงการแจกแจงความถ่ีของผู้สอบใน แต่ละระดับเกรด 3.2 ผลการวิเคราะหข์ ้อสอบและแบบสอบ (Item and Test Analysis) ปรากฏผลดงั น้ี Item คอื ขอ้ สอบแต่ละขอ้ Number Correct คือ จานวนผู้สอบทต่ี อบถูกในขอ้ นน้ั Item Diff. คอื ค่าความยากของข้อสอบ Disc.Index คอื ดชั นอี านาจจาแนกของข้อสอบ #Correct in High Grp คือ จานวนผ้สู อบในกลมุ่ สูงที่ตอบข้อสอบข้อนัน้ ถูก #Correct in Low Grp คือ จานวนผสู้ อบในกลุ่มตา่ ท่ีตอบข้อสอบข้อน้ันถูก Point Biserial คือ คา่ อานาจจาแนกทคี่ านวณโดยใชส้ ตู รสหสมั พันธ์พอยทไ์ บซีเรยี ล Adjusted Pt.Bis. คือ ค่าอานาจจาแนกทีค่ านวณโดยใชส้ ูตรสหสมั พันธไ์ บซเี รียล Number of Items คอื จานวนขอ้ สอบทัง้ หมด Mean Item Difficulty คือ ค่าเฉล่ียของคา่ ความยากของข้อสอบ Mean Item Discimination คอื คา่ เฉล่ยี ของค่าอานาจจาแนกของข้อสอบ Mean Point Biserial คอื ค่าเฉลี่ยของสหสัมพันธพ์ อยท์ไบซเี รียล KR20(Alpha) คือ ค่าความเท่ียงแบบสอดคล้องภายในของแบบสอบท่ีคานวณจากสูตร KR20 (ใช้เฉพาะคะแนนแบบ 0-1 เท่านั้น) โดยค่าความเท่ียงท่ีได้จะมีค่าเท่ากันกับสูตร Alpha ในกรณีท่ี คานวณกับขอ้ สอบที่มกี ารให้คะแนนแบบ 0-1 KR21 คือ ค่าความเท่ียงแบบสอดคล้องภายในของแบบสอบท่ีคานวณจากสูตร KR21 ค่าท่ีคานวณได้จะต่ากว่าสูตร KR20 เสมอ เมื่อค่าความยากของข้อสอบแต่ละข้อแตกต่างกัน แต่ถ้าค่า ความยากของข้อสอบแตล่ ะข้อเทา่ กัน สูตร KR20 และ KR21 จะมีค่าเทา่ กัน SEM(from KR20) คือ ค่าความคลาดเคลื่อนมาตรฐานของการวัดที่ประมาณค่าจากค่า ความเทย่ี ง KR20 ซง่ึ SEM ทใี่ ชใ้ นโปรแกรม TAP คานวณได้จากสตู ร SEM SD 1 KR20 High Grp Min Score คือ คะแนนต่าสดุ ของกลุ่มสงู Low Grp Min Score คอื คะแนนต่าสุดของกลุ่มต่า Minimum Item Diff. คอื ค่าตา่ สุดของคา่ ความยากของข้อสอบ Maximum Item Diff. คือ คา่ สูงสุดของค่าความยากของข้อสอบ Minimum Disc. Index คือ ค่าตา่ สุดของดัชนีอานาจจาแนกของข้อสอบ Maximum Disc. Index คือ คา่ สงู สดุ ของดชั นีอานาจจาแนกของขอ้ สอบ Minimum Point Biserial คอื ค่าตา่ สุดของสหสัมพันธพ์ อยท์ไบซเี รยี ล
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 8 Maximum Point Biserial คือ คา่ สูงสดุ ของสหสมั พันธ์พอยท์ไบซีเรยี ล Additional Item Analysis คือ ผลการวเิ คราะหข์ อ้ สอบเพ่มิ เติม Scale Mean if Item Deleted คอื คะแนนเฉล่ียของข้อสอบทั้งฉบับเม่ือไม่รวมข้อสอบ ขอ้ นั้น (เมอ่ื ถกู ตดั ออก) Scale SD if Item Deleted คือ ส่วนเบ่ียงเบนมาตรฐานของคะแนนของข้อสอบท้ัง ฉบบั เมื่อไมร่ วมขอ้ สอบข้อน้นั KR-20 if Item Deleted คือ ค่าความเท่ียงของแบบสอบท้ังฉบับ เมื่อไม่รวมข้อสอบข้อ นัน้ SEM if Item Deleted คอื ค่าความคลาดเคลอื่ นมาตรฐานของการวัดของแบบสอบเม่ือ เมื่อไม่รวมข้อสอบข้อนน้ั Biserial Corr. คอื ค่าสหสัมพนั ธไ์ บซเี รียล Mean Biserial Corr. คือ ค่าเฉลีย่ สหสมั พนั ธไ์ บซเี รียล Maximum Biserial Corr. คือ ค่าสูงสุดของสหสัมพนั ธไ์ บซเี รยี ล Answer Key Analysis คอื การวเิ คราะห์ตัวเลือกทั้งหมด Bar Chart for Correct Answer Usage คือ แผนภูมิแท่งแสดงความถ่ีของตัวเลือกท่ี เป็นเฉลยของขอ้ สอบ Bar Chart for Number of Options Usage คือ แผนภูมิแท่งแสดงความถ่ีของ ตวั เลือกทใ่ี ช้ในขอ้ สอบแตล่ ะข้อ Items Included คือ แสดงข้อสอบท่ีรวมเข้าวิเคราะห์ Items Excluded คือ แสดงขอ้ สอบทไ่ี ม่รวมเข้าวิเคราะห์ Answer Key คือ แสดงเฉลยขอ้ สอบ 3.3 ผลการวเิ คราะหต์ วั เลอื ก (Options Analysis) ปรากฏผลดงั น้ี เม่ือใช้การแบง่ กลมุ่ แบบ 50% เม่อื ใชก้ ารแบง่ กลมุ่ แบบ 27% จากตัวอย่างข้างต้น เป็นการวิเคราะห์โดยใช้เทคนิคการแบ่งกลุ่มแบบ 50% และ 27 % กับกลุ่ม ผสู้ อบ 30 คน ตัวเลขท่ีอยู่นอกวงเล็บคือความถี่ของผู้สอบท่ีเลือกตอบตัวเลือกน้ันในแต่ละกลุ่ม คือ กลุ่ม สูง (High) กลุ่มต่า (Low) และกลุ่มโดยรวมท้ังหมด (TOTAL) ส่วนตัวเลขในวงเล็บคือสัดส่วนของผู้เข้า
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 9 สอบทเี่ ลือกตอบตัวเลือกนัน้ ถา้ เปน็ ตวั เลอื กทเี่ ฉลยเรียกวา่ ค่าความยากของข้อสอบ (P) จากตัวอย่างค่า P มีค่า 0.767 เป็นข้อสอบที่ค่อนข้างง่าย คือจานวนผู้สอบร้อยละ 76 ที่ตอบข้อสอบข้อนั้นถูก ส่วนดัชนี อานาจจาแนกเป็นผลต่างระหว่างค่าความยากในกลุ่มสูงและกลุ่มต่า นั่นคือ ค่า Diff ท่ีเป็นตัวเลขในลง เล็บนั่นเอง จากตัวอย่างจะเห็นว่า ข้อสอบข้างต้นมีค่าดัชนีอานาจจาแนก ( r ) 0.200 เม่ือใช้วิธีการ แบ่งกลุ่มแบบ 50 % และมีค่าดัชนีอานาจจาแนก ( r ) 0.354 เม่ือใช้วิธีการแบ่งกลุ่มแบบ 27 % ดัชนี อานาจจาแนกทไี่ ดถ้ อื วา่ อยใู่ นเกณฑท์ ใี่ ชไ้ ด้ (r 0.20) ในกรณีตวั เลือกท่ีเปน็ ตัวลวง (Distractor) ผู้วิเคราะห์สามารถพิจารณาสัดส่วนของผู้เลือกตัวลวง และดัชนีอานาจจาแนกของตัวลวงได้เช่นกัน แต่มีข้อสังเกตผลการวิเคราะห์จากโปรแกรม TAP ค่าดัชนี อานาจจาแนกท่ีมีประสิทธิภาพนั้นค่าที่ได้ต้องมีค่าติดลบ (ตัวเลือกท่ี 3 และ 5) เน่ืองจากว่าโปรแกรมใช้ วิธีการคานวณโดยใช้สัดส่วนความถ่ีในกลุ่มสูงลบด้วยกลุ่มต่า ในทางกลับกันถ้าใช้วิธีการคานวณโดยใช้ สัดส่วนความถ่ีในกลุ่มต่าลบด้วยกลุ่มสูง ค่าดัชนีอานาจจาแนกที่มีประสิทธิภาพน้ันค่าท่ีได้ต้องมีค่า เป็นบวก จากตัวอย่างข้อสอบข้อสอบมีค่าดัชนีอานาจจาแนกอยู่ในเกณฑ์ที่ใช้ได้ ใช้เกณฑ์ r 0.05 โดยใช้สูตรกลุ่มต่าลบกลุ่มสูง (r = PL - PH) หรือ ค่าสัมบูรณ์ของ r 0.05 เมื่อใช้สูตรกลุ่มสูงลบด้วย กลุ่มต่า ( r = PL - PH) สาหรับเกณฑ์การแปลความหมายของค่าความยาก (P)และดัชนีอานาจจาแนก สามารถใช้เกณฑด์ ังตารางตอ่ ไปนี้ เกณฑก์ ารแปลความหมายผลการวิเคราะหค์ าตอบถูก (Answer Key) ความยากของขอ้ สอบ (P) ความหมาย 0.80-1.00 ง่ายมาก 0.60-0.79 คอ่ นขา้ งง่าย 0.40-0.59 ปานกลาง 0.20-0.39 ค่อนข้างยาก 0-0.19 ยากมาก อานาจจาแนกของขอ้ สอบ (P) ความหมาย 0.60-1.00 ดมี าก 0.40-0.59 ดี 0.20-0.39 0.10-0.19 พอใช้ อาจตอ้ งปรับปรุง คอ่ นขา้ งต่า ควรปรับปรงุ 0-0.9 ตา่ มาก ควรตดั ทิง้ เกณฑท์ ่ใี ช้ได้ของตัวลวง (Distractor) สตู ร (P) และ( r) เกณฑ์ท่ใี ชไ้ ด้ สัดสว่ นของผเู้ ลือกตวั ลวง (P) P 0.05 P = PL + PH 2 อานาจจาแนกของตวั ลวง ( r) r 0.05 r = PL - PH 3.4 ผลการวิเคราะห์แสดงด้วยแผนภูมิ หลังท่ีได้สั่งวิเคราะห์แล้ว ถ้าต้องการให้แสดงผล การวิเคราะห์กราฟ ทาได้โดยคล๊ิกปุ่ม View Full Results & Graphs จะปรากฏปุ่มประเภทของ แผนภาพ 3 ประเภท คือ Bar Chart for Grades แสดงแผนภูมิแท่งแจกแจงความถี่ของผู้สอบในแต่ละ
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 10 ระดับเกรด Bar Chart for Scores แสดงแผนภูมิแท่งแจกแจงความถี่ของผู้สอบตามระดับคะแนน และ Histogram for Scores แสดงฮีสโทแกรมแจกแจงความถ่ีแต่ละดับคะแนน ถ้าต้องการให้แสดงแผนภูมิใด ใหค้ ลิก้ ทปี่ ุม่ แผนภูมนิ ั้น ดังภาพประกอบที่ 7 (1) (2) (3) (1) Bar Chart for Grades (2) Bar Chart for Scores (3) Histogram for Scores ภาพท่ี 7 การวเิ คราะหแ์ สดงด้วยแผนภูมิ 4. การเมนทู างเลอื กเพื่อกาหนดค่าต่างๆในการวิเคราะห์ มีเมนูท่นี ่าสนใจ ดังนี้ 4.1 การตัดเกรดของนักเรียนแต่ละคน ภายใต้เมนู Options ให้เข้าไปที่เมนูรอง Set Percentages of Grades จะปรากฏหน้าจอดังภาพที่ 8 ให้ผู้วิเคราะห์กาหนดระดับเกรดท่ีต้องการ ซ่ึง อาจจะเป็นแบบ 2 เกรด คือ ผ่าน-ไม่ผ่าน 5 เกรด คือ A B C D และ F 12 เกรด คือ A A- B+ B
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 11 B- C+ C D+ D D- และ F นอกจากนี้ยังสามารถกาหนดระดับเกรดนอกเหนือจากนี้ได้เอง เม่ือ กาหนดเกรดแลว้ จากนั้นให้กาหนดเกณฑ์ข้ันตา่ รอ้ ยละของคะแนนในแตล่ ะระดบั เกรด ดังภาพท่ี 8 ภาพที่ 8 หนา้ การกาหนดระดับเกรดและเกณฑแ์ ตล่ ะระดับเกรด 4.2 การแบ่งกลุ่มสูงกลุ่มต่า การวิเคราะห์ข้อสอบตามแนวคิดการทดสอบแบบด้ังเดิมประเภท การสอบแบบอิงกลุ่ม ผู้วิเคราะห์จาเป็นต้องแบ่งกลุ่มท่ีได้คะแนนสูงและกลุ่มท่ีได้คะแนนต่า เพื่อหาค่า อานาจจาแนกของขอ้ สอบแต่ละขอ้ ในการแบ่งกลุม่ อาจใช้วิธีการแบ่งแบบ 50 % , 33 % และ 27 % ใน โปรแกรมได้ต้ังวิธีการแบ่งกลุ่มไว้แบบ 27% ถ้าผู้วิเคราะห์ต้องการเปลี่ยนในกรณีผู้เข้าสอบมีจานวนไม่ มากนัก ก็สามารถกาหนดเปอร์เซ็นต์การแบ่งกลุ่มใหม่ได้ โดยไปท่ีเมนู Options แล้วไปที่เมนูรอง Set Percentages of Item Discrimination ผู้วิเคราะห์สามารถกาหนดร้อยละในการแบ่งกลุ่มได้ ดังภาพท่ี 9
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 12 ภาพท่ี 9 หน้าจอ Discrimination Percentages สาหรับการแบง่ กลุ่มสงู กลุม่ ต่า 5. เมนูวิเคราะห์เพ่ือทานายจานวนข้อสอบท่ีควรเพิ่มเข้าไป ปัจจัยหน่ึงท่ีมีผลในการเพ่ิมค่าความเท่ียง ให้สูงข้ึนได้คือการเพิ่มความยาวของแบบสอบน้ันคือเพ่ิมจานวนข้อสอบ โดยข้อสอบน้ันมีความยากง่าย พอกันกับข้อสอบเดิม โปรแกรม TAP ได้กาหนดเมนูวิเคราะห์เพื่อทานายการเพิ่มค่าความเท่ียงได้ และ จานวนข้อสอบท่ีจาเป็นต้องเพิ่มเข้าไปในแบบสอบ (ความยาวของแบบสอบ) โดยผู้วิเคราะห์เข้าไปที่เมนู Analysis แล้วไปที่เมนูรอง Spearman-Brown Prophecy จากนั้นกาหนดค่าความเท่ียงตามที่ต้องการ เสรจ็ แล้วคลก้ิ ท่ปี มุ่ Calculate จะปรากฏผลดงั ตัวอยา่ งในภาพที่ 10 ภาพที่ 10 การทานายความยาวของแบบสอบ การวิเคราะห์โดยใช้สูตรดังกล่าว อยู่บนข้อตกลงเบ้ืองต้นของความเป็นคู่ขนานระหว่างแบบสอบ และข้อสอบ แต่ถ้าข้อสอบขาดคุณสมบัติของความเป็นคู่ขนาน สูตรสเปียร์แมน-บราวน์ อาจประมาณค่า สมั ประสิทธไ์ิ ดส้ ูงกว่าหรือตา่ กว่าความเปน็ จริงได้ แตอ่ ยา่ งกต็ าม เมื่อเพ่ิมความยาวของแบบสอบ โดยทั่วไปจะช่วยเพิ่มความเท่ียงของแบบสอบ มี ข้อสงั เกตที่สาคัญ การลดความยาวของแบบสอบมีผลต่อการลดลงของค่าความเที่ยง ดังนั้นการตัดข้อสอบ ออกจากแบบสอบควรประทาอย่างรอบคอบ โดยเฉพาะอยา่ งแบบสอบทม่ี จี านวนขอ้ สอบนอ้ ย
เก้ือ กระแสโสม : แนะนำกำรใชโ้ ปรแกรมวเิ ครำะห์แบบสอบ TAP หน้า 13 ข้อตกลงสาหรับผู้ใชโ้ ปรแกรม โปรแกรม TAP พัฒนาขึ้นโดย Brook, Gordon. P. ผู้พัฒนาได้จดลิขสิทธิ์แล้ว แต่เป็นโปรแกรมที่ฟรีสาหรับ ผู้ใช้โดยใหม้ ลี ิขสิทธิ์สาหรับผใู้ ชภ้ ายใต้ข้อตกลงดงั น้ี 1. สามารถคัดลอกโปรแกรมไปใช้ได้จากโปรแกรมต้นฉบับเท่าน้ัน หรือจากเว็บไชต์ของ Brook คือ http://oak.cats.ohiou.edu/~brooksg/software.htm 2. ไม่นาไปใชใ้ นลักษณะการค้า เช่า หรือใชเ้ พื่อผลประโยชน์ส่วนตน 3. ไม่นาไปรวมหรือผกู ติดกบั สินค้าอ่ืนใดเพื่อประโยชนเ์ สริม 4. ไม่ตดั ตอ่ จดั การขยายตอ่ โปรแกรมที่เป็นการลอกเลียนแบบ เอกสารอ้างอิง Lewis M.TAP: User’s Guide. Available from: http://oak.cats.ohiou.edu/~brooksg/software.htm
Search
Read the Text Version
- 1 - 13
Pages: