.เครื่องมือและการหาคุณภาพงานวิจัย พล.อ.ต.รศ.ดร.นภัทร์ แก้วนาค

เครื่องมือการวจิ ยั และการหาคุณภาพ (Improve Version) 1. ทมี่ าของเครื่องมือ/กระบวนการสร้าง 2. คณุ ภาพเคร่ืองมือ : IOC/CVI/ 3. G*Power Program 4. แบบวดั /ทดสอบทางจติ วทิ ยา 5. สรุปค่าสถติ สิ าคญั ในการวจิ ยั พล.อ.ต.ดร.นภทั ร์ แก้วนาค นกั วจิ ยั แห่งชาติ (Since 1995)

ทมี่ าของเครื่องมือ “ 1. นิยามศัพท์........................................ 2. กรอบแนวคดิ การวจิ ัย....................... 3. ทฤษฎ/ี หลกั การ/หลกั ธรรม............... 4. ขอบเขตเนื้อหา................................. 5. วตั ถุประสงค์การวจิ ัย........................ 2

กระบวนการสร้างเคร่ืองมือ 3 1. ทบทวนวรรณกรรม 2. ทบทวนประเดน็ ทม่ี า (จากข้างต้น) 3. ทม่ี าของกรอบโครงสร้างของเครื่องมือ 4. กาหนดประเดน็ ข้อสาคญั 5. ร่างเอกสารเคร่ืองมือ 6. นาไปหาคุณภาพเครื่องมือ 7. ปรับปรุง (ความตรง/ความเทย่ี ง) 8. นาไปใช้

คุณภาพของเคร่ืองมือการวจิ ยั 1. ความตรง (Validity) 1.1 Face Validity (ความตรงเชิงพินิจ) 1.2 Construct Validity Index : CVI (ความตรงเชิงโครงสร้าง/เน้ือหา) 1.3 Inter–Correlated of Objectives and Contents : IOC (Index of Item–Objectives Congruence : IOC) 4

คุณภาพของเครื่องมือการวจิ ยั (ต่อ) 2. ความเท่ียง (Reliability) - ค่าความคงท่ีของการวดั /ประเมิน - ค่าสัมประสิทธ์สหสมั พนั ธ์ : คะแนน 2 ชุด - มีค่าระหวา่ ง -1 ถึง +1 5

วธิ ีการหาค่าคุณภาพเครื่องมือฯ 1. Face Validity : ความตรงเชิงพนิ ิจ 1.1 ร่างเอกสาร เครื่องมือการวจิ ยั 1.2 นาส่งให้ Advisor / Experter ไดพ้ จิ ารณา 1.3 ตรวจสอบความถูกตอ้ ง/ครบถว้ น เหมาะสมทางวชิ าการ 1.4 ตรวจสอบการใชถ้ อ้ ยคา/สานวนภาษา 1.5 ปรับปรุง/แกไ้ ข 6

วธิ กี ารหาค่าคุณภาพเครื่องมือฯ (ต่อ) 2. การหาค่า IOC 2.1 ข้นั ตอน 2.1 ร่างเอกสาร เคร่ืองมือการวจิ ยั 2.2 หา Face Validity ก่อน 2.3 คดั เลือกผเู้ ชี่ยวชาญ ≥ 5 ทา่ น 2.4 นาเอกสารไปใหผ้ เู้ ช่ียวชาญประเมินค่า IOC 2.5 ผวู้ จิ ยั วเิ คราะห์ค่า IOC (≥ 0.5 ทุกขอ้ ≥ 0.65 ภาพรวม) 7

การหาค่า IOC (ต่อ) 2.2 วธิ ีการ : สร้าง Form การหาค่า IOC : ให้ผู้เชี่ยวชาญตรวจประเมิน 1 ลาดับ ข้อคาถาม ผลการประเมนิ +1 0 -1 1 …………………………….. ………………….. ………………….. …………………. 2 …………………………….. ………………….. ………………….. …………………. 3 …………………………….. ………………….. ………………….. …………………. 4 …………………………….. ………………….. ………………….. …………………. 5 …………………………….. ………………….. ………………….. …………………. 8

การหาค่า IOC (ต่อ) 2 ตัวอย่างผลการประเมนิ : ผู้เช่ียวชาญ Ri n ข้อท่ี No 1 ผ้เู ชี่ยวชาญ จานวน 5 ท่าน No 5 IOC การพจิ ารณา No 2 No 3 No 4 1 +1 0 +1 0 -1 0.2 ปรับปรุง ปรับปรุง 2 +1 0 -1 0 +1 0.2 ใชไ้ ด้ ลบออก 3 +1 +1 +1 +1 +1 +1.0 ลบออก 4 -1 -1 -1 0 0 -0.5 5 -1 -1 -1 -1 -1 -1.0 9

การหาค่า CVI ( 0.80 : ภาพรวม) 1 สูตร CVI = ������������ 3,4 ������(������) โดย xi ( 3 , 4) จานวนขอ้ คาถามที่ผเู้ ชี่ยวชาญใหค้ ะแนน 3 หรือ 4 n จานวนผเู้ ชี่ยวชาญท่ีพิจารณา N จานวนขอ้ คาถามท้งั หมด เกณฑ์ : ประเมิน 1 ขอ้ คาถามไมส่ อดคลอ้ งกบั นิยามศพั ท์ 2 ตอ้ งปรับปรุงเน้ือหา 3 สอดคลอ้ งพอควร 4 สอดคลอ้ งชดั เจน 10

การหาค่า CVI (ต่อ) 2 ข้นั ตอน 1. ร่างเอกสาร เครื่องมือการวจิ ยั 2. หา Face Validity (ผา่ น) 3. หาคา่ IOC ( 0.50 ,0.65) 4. คดั เลือก ผเู้ ชี่ยวชาญ  5 ท่าน 5. นาเอกสารฯไปใหผ้ เู้ ช่ียวชาญประเมินคุณภาพ 6. ผวู้ จิ ยั วเิ คราะห์คา่ CVI ( 0.80) 11

การหาค่า CVI (ต่อ) 3 ตวั อย่างผลการประเมินจากผู้เชี่ยวชาญ (5 คน : 25 ข้อ) ข้อท่ี No 1 ผ้เู ช่ียวชาญ No 5 CVI No 2 No 3 No 4 121334 2 1 2 4 3 3 20 0.80 3 3 3 4 4 3 25 4 4 4 3 3 2 544433 ภาพรวม = 0.80 12

ค่าความเชื่อมน่ั (Reliability) ข้นั ตอน 1. ร่างเอกสาร เคร่ืองมือการวจิ ยั 2. หา Face Validity (ผา่ น) 3. หาคา่ IOC (0  0.50 ,0.65) 4. หาค่า CVI ( 0.80) 5. หากลุ่มทดสอบเครื่องมือ ท่ีคลา้ ยกลุ่มตวั อยา่ ง  30 คน (ทาทีละคน/ทาเป็ นกลุ่ม) 13

ค่าความเช่ือมนั่ (Reliability) (ต่อ) 14 ข้นั ตอน (ต่อ) 6. นาเครื่องมือไปทดสอบใช้ (ใหก้ ลุ่มทดสอบทา) 7. เก็บแบบ/เครื่องมือ มาวเิ คราะห์ (SPSS PC+) : Reliability Analysis 8. วเิ คราะห์ Reliability Analysis 9. หาค่า  Cronbach 9.1 รายคาถาม/รายดา้ น 9.2 ภาพรวมท้งั ฉบบั

เกณฑ์พจิ ารณา : ค่า Alpha ( Cronbach) เช่น 1. เคร่ืองมือทางวทิ ยาศาสตร์  0.95 2. เคร่ืองมือทางสงั คมทวั่ ไป  0.70 3. เครื่องมือวดั ทศั นคติ เจตคติ  0.85 4. เครื่องมือวดั ความรู้  0.90 15

ขนาดของตวั อย่าง : อานาจการทดสอบสมมตฐิ าน โปรแกรมสาเร็จรูป เช่น 1. โปรแกรม MS/PC-DOS (Goldstein, 1988) 2. โปรแกรม G*Power (on สูตรของ Cohen, 1977) 16

G*Power : Program 17 1. เริ่มพฒั นา 1996 (ปัจจุบนั G* Power 2007) (www.psqcho.uni-duesseldorf/gpower3) (Buchner. 2010) 2. รองรับอานาจการทดสอบ 2.1 ก่อนการวจิ ยั (Priori Power Analysis) 2.2 หลงั การวจิ ยั (Post hoc PA) 2.3 ท้งั ก่อน + หลงั (Compromise PA) 2.4 วเิ คราะห์ความไว (Sensitivity Analysis) - วเิ คราะห์ขนาดอิทธิพล (Effect size) จุดวกิ ฤต/คา่ นยั สาคญั 2.5 วเิ คราะห์เกณฑ์ (Criterion Analysis) หลงั การวจิ ยั

G*Power : Program (ต่อ) 18 3. ข้นั ตอนการใช้โปรแกรม 3.1 เลือก Stat ท่ีเหมาะสม (t–test , Z–test , F–test , x2-test , exact-test) 3.2 เลือกประเภท : อานาจการทดสอบ (5 แบบขา้ งตน้ ) 3.3 Key ขอ้ มลู การวเิ คราะห์ขนาดตวั อยา่ ง 3.4 Click : Calculate : Sample size 3.5 เลือกอ่าน/ใช้ สถิติจาก Menu เช่น Sample size group A = x Sample size group B = y Actual power = 0.950

การวเิ คราะห์ขนาดตวั อย่าง : 3 ค่า การวเิ คราะห์ขนาดตวั อย่าง 1. Effect size ค่าขนาดอิทธิพล 2. ความน่าจะเป็นของความคลาดเคลื่อนการทดสอบ ( ,) 3. การจดั สรรขนาดตวั อยา่ ง เขา้ กลุ่ม (เท่ากนั ) 19

ประเภทของค่า Effect size 1. เพือ่ การทดสอบค่าเฉล่ีย 2 กลุ่ม () 2. เพ่อื การทดสอบค่าเฉลี่ย มากกวา่ 2 กลุ่ม () 3. เพอ่ื การทดสอบ x2-test (w) 4. เพื่อการทดสอบ สัมประสิทธส์ หสัมพนั ธ์ (p) 5. เพอื่ เปรียบเทียบสมั ประสิทธส์ หสัมพนั ธ์ (q) 6. เพื่อทอสอบสัมประสิทธส์ หสัมพนั ธ์พหุคุณ (������2) 20

ระดบั ค่า ระดับค่า Effect size : ประมาณการ Effect size 1. Small size (0.01 – 0.20) 2. Medium size (0.15 – 0.50) 3. Large size (0.35 – 0.80) 21

การนาไปใช้ เช่น 1. ประมาณค่า ES เพอื่ การวเิ คราะห์ t–test, Rx, การสอน 2 วธิ ี 2. ประมาณค่า ES เพ่อื การวเิ คราะห์ความแปรปรวน 2.1 One way ANOVA 2.2 Two way ANOVA Rx – การสอน 3 วธิ ี ต่อสมั ฤทธ์ิผลการเรียน 22

23 แบบวดั /แบบทดสอบทางจติ วทิ ยา เช่น 1. แบบวดั ความรู้ 10. แบบวดั การปรับตวั 11. แบบวดั การรู้ประสิทธิภาพแห่งตน 2. แบบวดั เจตคติ 12. แบบวดั การเรียนรู้ตลอดชีวติ 3. แบบวดั ค่านิยม 13. แบบวดั การเห็นคุณคา่ ในตวั เอง 4. แบบวดั ทกั ษะ 14. แบบวดั การใชเ้ หตผุ ล 5. แบบวดั ภาวะความเป็ นผนู้ า 15. แบบวดั ความเสมอภาค 6. แบบวดั สมรรถนะความสามารถ 16. แบบวดั ความเครียด 7. แบบวดั ความวติ กกงั วล 17. แบบวดั ความสนใจ 8. แบบวดั การความคุมตนเอง 18. แบบวดั ความสามารถในการจดั การตนเอง 9. แบบวดั กระบวนการตดั สินใจ

24 กระบวนการสร้างแบบวดั ทางจิตวิทยา/พฤติกรรม 1. กาหนดประเภทแบบวดั 2. กาหนดคุณลกั ษณะ (Attribute) ของแบบวดั 3. ทบทวนวรรณกรรมท่ีเกี่ยวขอ้ ง 4. นิยามความหมายเชิงทฤษฎี/เชิงปฏิบตั ิการ 5. นิยาม Construct/Attributive (คุณลกั ษณะโครงสร้างเน้ือหา)

25 กระบวนการสร้างแบบวดั ทางจิตวทิ ยา/พฤติกรรม (ตอ่ ) 6. ตรวจสอบความตรง/ความเท่ียงของนิยาม 7. สร้างรูปแบบ/โครงสร้าง เคร่ืองมือ/แบบวดั 8. ตรวจสอบคุณภาพแบบวดั 8.1 Face Validity 8.2 IOC 8.3 CVI 8.4  Cronbach

26 กระบวนการสร้างแบบวดั ทางจิตวทิ ยา/พฤติกรรม (ต่อ) 9. การนาไปทดลองใช้ Try Out การใช้ 10. วเิ คราะห์ดชั นีความมีประสิทธิภาพ 11. ปรับปรุง/พฒั นา 12. นาไปใชว้ ดั คุณลกั ษณะ/พฤติกรรม ตามที่ตอ้ งการ

27 คุณลกั ษณะ : แบบวดั ทางจติ วทิ ยา เช่น 1. แบบสงั เกตพฤติกรรม...................................... 2. แบบทดสอบวดั ความรู้.................................... 3. แบบสอบถาม.................................................. 4. แบบสารวจรายการ.......................................... 5. แบบประเมินค่า (3, 5 ระดบั )........................... 6. แบบสังเกตพฤติกรรม......................................

28 ค่าสถติ ทิ ่สี าคญั ในการวจิ ยั เช่น 1. ค่า IOC (0.50/0.65) ผ้เู ช่ียวชาญ  5 คน 2. ค่า CVI ( 0.80) 3. ค่า  Cronbach (0.85) (ss  30 คน) 4. ค่า Effect size : G*Power 5. ค่า Stat : Advance Research Methodology 6. จานวนการสมั ภาษณ์  17 คน 7. จานวนการ Focus Group  9 – 12 คน

29 ค่าสถติ ทิ ีส่ าคญั ในการวจิ ยั (ต่อ) เช่น 8. EDFR.  ผเู้ ชี่ยวชาญ 17 คน / Md.  3.5, IR ≤ 1.5 9. วดั ผลโปรแกรม วดั ดว้ ย t–test /F-test 9. Goodness of fit : - x2–test, RMSEA/RMS  0.5 - KMO  0.80 - x2/df  2 - GFI/AGFI  0.90