TRƯỜNG ĐẠI HỌC SƯ PHẠM ĐẠI HỌC ĐÀ NẴNG PHÂN TÍCH ĐỀ THI KIỂM TRA ĐÁNH GIÁ TRONG GIÁO DỤC Giảng viên: PGS.TS. Nguyễn Bảo Hoàng Thanh Th.S. Nguyễn Thành Chiến Học viên : Lê Thị Ngọc Anh Khoá : K41.42 – LL và PPDH Vật lí Đà Nẵng, Tháng 8 năm 2021
Kiểm tra đánh giá trong giáo dục Mục lục A. PHÂN TÍCH ĐỀ THI THEO LÝ THUYẾT CỔ ĐIỂN ...................................... 5 1. Chuẩn bị dữ liệu ................................................................................................ 5 1.1. Nhập dữ liệu (đáp án và các phương án trả lời)......................................... 5 1.2. Làm sạch dữ liệu ........................................................................................ 5 2. Phân tích đề thi theo lý thuyết khảo thí cổ điển ................................................ 7 2.1. Tạo các sheet phục vụ cho công việc thống kê .......................................... 7 2.2. Chuyển dữ liệu từ hàng ngang sang hàng dọc ......................................... 12 B. PHÂN TÍCH ĐỀ THI THEO LÝ THUYẾT KHẢO THÍ HIỆN ĐẠI............... 14 1. Chuẩn bị dữ liệu .............................................................................................. 14 2. Thực hiện phân tích bằng phần mềm QUEST ................................................ 16 2.1. Các bước thực hiện................................................................................... 16 2.2. Đọc kết quả............................................................................................... 18 2.2.1. File *.map.......................................................................................... 18 2.2.2. File *.ita............................................................................................. 23 2.2.3. File *.cas............................................................................................ 24 2.2.4. File *.kid............................................................................................ 25 3. Thực hiện phân tích bằng phần mềm CONQUEST........................................ 26 3.1 Các bước thực hiện.................................................................................... 26 3.2. Các lệnh vẽ đồ thị..................................................................................... 28 3.2.1. Đường cong đặc trưng câu hỏi (dựa vào điểm số)............................ 29 3.2.2. Đường cong đặc trưng câu hỏi (dựa vào nhóm các phương án trả lời) ..................................................................................................................... 30 3.2.3. Đường cong đặc trưng cho cả đề thi ................................................. 31 3.2.4. Đường cong thông tin cho từng câu hỏi............................................ 31 3.2.5. Đường cong thông tin cho cả đề thi .................................................. 33 3.3. Đọc kết quả............................................................................................... 33 3.3.1. File *itn ............................................................................................. 33 Học viên: Lê Thị Ngọc Anh Trang 1
Kiểm tra đánh giá trong giáo dục 3.3.2. File *shw ........................................................................................... 34 4. Thực hiện phân tích kết quả bằng phần mềm SPSS ....................................... 36 4.1. Các bước thực hiện................................................................................... 36 4.2. Định dạng đồ thị....................................................................................... 44 4.3. Đọc kết quả............................................................................................... 48 4.3.1. Bảng thống kê mô tả.......................................................................... 48 4.3.2. Sơ đồ Stem-and-Leaf Plots ............................................................... 49 4.3.3. Biểu đồ hình hộp – râu ...................................................................... 50 4.3.4. Biểu đồ Histogram ............................................................................ 50 4.3.5. Mối tương quan giữa 2 biến .............................................................. 51 4.3.6. Đồ thị biểu diễn mối tương quan giữa hai biến ................................ 52 5. Thực hiện phân tích kết quả bằng phần mềm Vitesta ..................................... 52 5.1. Viết chương trình điều khiển.................................................................... 52 5.1.1. File dữ liệu *.dat................................................................................ 52 5.1.2. File điều khiển *.ctl........................................................................... 54 5.2. Các bước thực hiện................................................................................... 54 5.3. Đọc kết quả............................................................................................... 55 5.3.1. Tham số câu hỏi ................................................................................ 55 5.3.2. Tham số câu hỏi IRT......................................................................... 56 5.3.3. Năng lực thí sinh ............................................................................... 57 5.3.4. Hàm thông tin và đường cong đặc trưng của các các câu hỏi .......... 57 5.3.5. Phân bố độ khó – năng lực................................................................ 60 5.3.6. Đồ thị phân bố điểm.......................................................................... 61 5.3.7. Hàm thông tin đề thi – đường cong sai số chuẩn.............................. 62 C. XÂY DỰNG NGÂN HÀNG ĐỀ THI................................................................ 63 I. Các bước xây dựng ngân hàng đề thi............................................................... 63 II. Quy trình phân tích dữ liệu của các đề thi...................................................... 64 III. Các bước thực hiện........................................................................................ 64 Học viên: Lê Thị Ngọc Anh Trang 2
Kiểm tra đánh giá trong giáo dục 3.1. Phân thức đề thi số 1 ................................................................................ 64 3.2. Tạo file câu hỏi chung ở thư mục đề số 2 ................................................ 65 3.2. Phân tích đề thi số 2 và sử dụng file chứa câu hỏi neo ............................ 65 3.3. Trích xuất dữ liệu từ kết quả phân tích bằng phần mềm Quest ............... 66 3.4. Tạo đề thi từ ngân hàng câo hỏi ............................................................... 67 D. PHÂN TÍCH ĐỀ THI TỰ LUẬN BẰNG PHẦN MỀM QUEST/CONQUEST ................................................................................................................................. 68 I. Tạo file dữ liệu................................................................................................. 68 II. Phân tích đề thi tự luận bằng phần mềm Quest .............................................. 69 2.1. File điều khiển *.ctl.................................................................................. 69 2.2. Đọc kết quả............................................................................................... 70 2.2.1. File *.map.......................................................................................... 70 2.2.2. File *.ita............................................................................................. 71 III. Phân tích đề thi tự luận bằng phần mềm Conquest....................................... 73 3.1. File điều khiển *.cqc ................................................................................ 73 3.2. Đọc kết quả............................................................................................... 74 E. PHÂN TÍCH PHIẾU KHẢO SÁT BẰNG PHẦN MỀM SPSS ........................ 77 I. Phân loại dữ liệu, mã hóa, nhập liệu và một số xử lý trên biến....................... 77 1.1. Phân loại dữ liệu....................................................................................... 77 1.2 Các loại thang đo....................................................................................... 78 1.2.1. Thang đo danh nghĩa – nominal scale............................................... 78 1.2.2. Thang đo thứ bậc – ordinal scale ...................................................... 78 1.2.3. Thang đo khoảng – interval scale ..................................................... 78 1.2.4. Thang đo tỉ lệ - ratio scale................................................................. 79 1.3. Nguyên tắc mã hóa và nhập liệu .............................................................. 79 1.4. Cửa sổ làm việc của SPSS............................................................................ 80 1.5. Tạo tập tin dữ liệu trong SPSS................................................................. 80 1.5.1. Khai báo biến .................................................................................... 80 Học viên: Lê Thị Ngọc Anh Trang 3
Kiểm tra đánh giá trong giáo dục II. Các bước phân tích phiếu khảo sát bằng phần mềm SPSS ........................... 82 2.1. Nhập dữ liệu từ phiếu khảo sát thu được vào phần mềm SPSS............... 82 2.2. Đánh giá độ tin cậy................................................................................... 83 2.3. Đánh giá độ hiệu lực – Phân tích nhân tố khám phá................................ 85 2.4. Thống kê mô tả với từng biến quan sát.................................................... 88 2.5. Tạo bảng chéo .......................................................................................... 88 2.6. Thống kê Anova ....................................................................................... 92 Học viên: Lê Thị Ngọc Anh Trang 4
Kiểm tra đánh giá trong giáo dục A. PHÂN TÍCH ĐỀ THI THEO LÝ THUYẾT CỔ ĐIỂN Các dữ liệu được sử dụng trong bài do giảng viên “ThS. Nguyễn Thành Chiến” cung cấp 1. Chuẩn bị dữ liệu 1.1. Nhập dữ liệu (đáp án và các phương án trả lời) - Sử dụng phần mềm Excel để tiến hành nhập đáp án và phương án trả lời vào Sheet đầu tiên (tạm đặt tên là Answer) theo mẫu: + Dòng đầu tiên ghi tên các câu hỏi + Dòng thứ 2 ghi đáp án tương ứng với các câu hỏi + Kể từ dòng thứ 3 trở đi tiến hành nhập liệu cho các phương án trả lời của bài trắc nghiệm 1.2. Làm sạch dữ liệu Kiểm tra dữ liệu nhập vào có sai xót gì không - Phương án không trả lời để dâu “-” (không nhập bất kỳ kí tự nào) - Kiểm tra các phương án không nằm trong các phương án gợi ý ban đầu, xuất hiện ký tự lạ…. - Các bước tiến hành + Đặt chuột ở dòng số 1 chọn bôi đen tất cả → Sort & Filter → Filter Học viên: Lê Thị Ngọc Anh Trang 5
Kiểm tra đánh giá trong giáo dục + Kích chuột vào dấu sổ xuống của từng cột Item để kiểm tra xem có phương án lạ xuất hiện không. Nếu có thì tích vào phương án đó → OK (Vd trong hình xuất hiện phương án 1 là phương án lạ) → Thay tất cả các phương án lạ thành “-” Học viên: Lê Thị Ngọc Anh Trang 6
Kiểm tra đánh giá trong giáo dục 2. Phân tích đề thi theo lý thuyết khảo thí cổ điển 2.1. Tạo các sheet phục vụ cho công việc thống kê - Tạo Sheet tính điểm (tạm đặt tên là ChamDiem) các phương án trả lời của phiếu trắc nghiệm. Công thức như hình → Kéo thả chuột để copy công thức cả bảng chấm điểm → Giải thích câu lệnh: Nếu tại ô B3 của sheet Answer có giá trị bằng với giá trị ở ô B2 thì thay bằng 1, nếu không thì vẫn giữ nguyên giá trị ở ô B3 của sheet Answer (Nghĩa là đáp án của HS giống với đáp án thì đúng và cho 1 điểm) - Và câu trả lời đúng được tính theo công thức: Trang 7 Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục → Giải thích công thức: Bước trên ta đã thay số câu đúng bằng 1 nên nếu ta cộng hết các giá trị đó lại sẽ được số câu đúng của HS. Vì thang điểm là 10 nên điểm của HS sẽ bằng tính bằng [Số câu đúng] * 10 / 80 - Phân tích độ khó, % tỉ lệ lựa chọn các phương án + Tính tần suất: là số lần xuất hiện của đáp án → Giải thích câu lệnh: Đếm trong vùng từ ô B3 đến ô B91 (ô giá trị đầu đến ô giá trị cuối cùng của cột cần đếm) những ô có giá trị giống với ô A94 (nghĩa là trong cột chứa đáp án câu 1 đêm có bao nhiêu lần có giá trị “A”. Dấu $ có nghĩa là cố định (vd: B$3 thì khi copy công thức qua ô C94 thì B$3 sẽ thành C$3, khi copy công thức xuống dưới ô B95 thì B$3 vẫn là B$3, nghĩa là hàng số 3 sẽ được cố định khi copy công thức) Học viên: Lê Thị Ngọc Anh Trang 8
Kiểm tra đánh giá trong giáo dục + Tính tỉ lệ: Lấy số lựa chọn A chia cho tổng số câu sẽ được tỉ lệ của câu A, và tương tự với các câu khác - Sau đó tiến hành tạo Sheet mới và copy dữ liệu từ sheet ChamDiem để sắp xếp danh sách điểm theo thứ tự tăng dần(tạm đặt tên Sheet này là Sapxep) + Bôi đen cột điểm → Sort & Filter → Sort Smallest to Largest → Expand the selection → OK Học viên: Lê Thị Ngọc Anh Trang 9
Kiểm tra đánh giá trong giáo dục - Tính toán 27% số lượng thí sinh có điểm thi cao nhất và 27% số lượng thí sinh có điểm thi thấp nhất (lưu ý đúng số lượng đã tính được, không phải là lấy tất cả các thí sinh có cùng nhóm điểm). Sau đó chuyển 2 nhóm thí sinh này sang 2 sheet mới riêng lẻ để tiến hành phân tích riêng cho từng nhóm → Lưu ý: Khi copy 27% số lượng thí sinh có điểm thi cao nhất sang nhóm trên và 27% số lượng thí sinh có điểm thi thấp nhất sang các sheet mới cần copy giá trị để không bị lỗi các công thức tính + Chọn vùng cần copy → Ctrl C → Đặt con trỏ chuột tại vị trí mới → Tại Paste chọn Paste Special → Values → OK + Tính tần suất và tỉ lệ như đã hướng dẫn ở trên - Sau đó tổng hợp 2 nhóm có điểm số cao nhất (nhóm trên) và nhóm có điểm số thấp nhất (nhóm dưới) vào một sheet excel mới (tạm đặt tên là DoLech) và tiến hành phân tích độ chênh lệch của 2 nhóm này + Dùng lệnh tham chiếu để lấy giá trị (Vd: tỉ lệ của đáp án A câu 1 ở nhóm trên nằm ở ô B103 sheet Nhomtren thì ghi công thức như hình) → kéo thả chuột copy theo phương ngang (dấu $ để không thay đổi vị trí hàng 103) → Tương tự làm với đáp án B, … và nhóm dưới Học viên: Lê Thị Ngọc Anh Trang 10
Kiểm tra đánh giá trong giáo dục - Và tạo các số liệu để tính độ chênh lệch bằng cách lấy giá trị ở nhóm trên trừ đi giá trị tương ứng ở nhóm dưới - Tương tự tham chiếu bảng tần suất của nhóm trên và nhóm dưới sang sheet “Dochenhlech” Học viên: Lê Thị Ngọc Anh Trang 11
Kiểm tra đánh giá trong giáo dục - Tính độ phân biệt của câu hỏi bằng công thức Số câu đúng nhóm trên − số câu đúng nhóm dưới Số thí sinh nhóm trên hoặc số thí sinh nhóm dưới 2.2. Chuyển dữ liệu từ hàng ngang sang hàng dọc Trang 12 - Chọn vùng cần chuyển → copy (Ctrl C) Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục - Di chuyển con trỏ đến vùng trống (chưa có dữ liệu), chọn lệnh Paste Special…, Chọn Value và Transpose (chuyển hiển thị từ dòng sang cột và ngược lại) - Sau đó chọn OK ta sẽ được như hình - Tiến hành định dạng lại và copy sang phần báo cáo ở word.) Học viên: Lê Thị Ngọc Anh Trang 13
Kiểm tra đánh giá trong giáo dục B. PHÂN TÍCH ĐỀ THI THEO LÝ THUYẾT KHẢO THÍ HIỆN ĐẠI 1. Chuẩn bị dữ liệu - Bước 1: Tạo file excel cho các câu hỏi với A,B,C,D là các phương án, để trống phương án bị lỗi hoặc missing (lưu ý file excel này là chỉ có kết quả làm bài của thí sinh, không có bất cứ 1 số liệu phân tích nào khác, kể cả đáp án) → Làm sạch dữ liệu như hướng dẫn ở phần A - Bước 2: Mở SPSS → File → Import Data → Excel → Chọn file excel Dữ liệu vừa tạo (Lưu ý: tắt file Excel trước khi Import) → OK Học viên: Lê Thị Ngọc Anh Trang 14
Kiểm tra đánh giá trong giáo dục - Kết quả → Variable View Học viên: Lê Thị Ngọc Anh Trang 15
Kiểm tra đánh giá trong giáo dục - V1: ID của thí sinh (có nhiều nhất 4 kí tự → Width (số kí tự) = 4) - Item: Đáp án của thí sinh (có nhiều nhất 1 kí tự → Width (số kí tự) = 1) - Bước 3: File → Save as → Chọn vị trí lưu file (Lưu ý: cùng thư mục với phần mềm sử dụng phân tích tương ứng, Vd: trong hình ảnh là sử dụng phần mềm Quest) → File name (lưu ý: không dấu) → Save as type (Fixed ASCII (*.dat) → Save 2. Thực hiện phân tích bằng phần mềm QUEST 2.1. Các bước thực hiện - Bước 1: Sử dụng chương trình soạn thảo Notepad để tạo file mã lệnh điều khiển cho phần mềm QUEST phân tích theo mẫu sau Header BAI TAP NHOM 1 Tiêu đề set width =132 ! page set logon >- nhom1.log Tạo file lưu các lỗi khi chạy phần mềm data_file nhom1.dat Sử dụng dữ liệu từ file “nhom1.dat” → Tạo từ SPSS codes ABCD Sự lựa chọn format V1 1-4 items (t5,80a1) ID: 4 kí tự đầu, có 80 items bắt đầu kí tự 5 Học viên: Lê Thị Ngọc Anh Trang 16
Kiểm tra đánh giá trong giáo dục key CCCACBBAABCBBABAADDDBDDCDBCAABDADCAADDCBAAADAABCBCBB- DBDDAADBCBCCCDBADDABCCCCCDBD ! score=1 Đáp án mỗi câu, tương ứng 1 điểm scale 1-80 !nhom1 estimate ! iter=100;scale=nhom1 show ! scale=nhom1 >- nhom1.map show cases!scale=nhom1; form=export; delimiter=tab >- nhom1.cas show cases!scale=nhom1 >- nhom1a.cas show items!scale=nhom1 >-nhom1a.itm itanal ! scale=nhom1 >- nhom1.ita Phân bố thống kê tương quan giữa kidmap 1-2 ! scale=nhom1 >- nhom1.kid độ khó và kết quả làm bài của TS 1 quit và TS 2 (nếu cần mới thêm vào) * Lưu ý: + Có thể ghi đáp án thủ công hoặc có thể đưa đáp án từ file excel sang file điều khiển chạy QUEST → copy đáp án từ excel sang chương trình soạn thảo notepad → copy đáp án sang word → xóa hàng loạt các ký tự khoảng trắng ở giữa các phương án (Ctrl+H → Find what (^w) → replace all) Học viên: Lê Thị Ngọc Anh Trang 17
Kiểm tra đánh giá trong giáo dục - Bước 2: Lưu file (File → Save as) này với tên nhom1.ctl (Lưu ý: lưu cùng folder với phần mềm Quest và file nhom1.dat - Bước 3: Sử dụng phần mềm QUEST để phân tích dữ liệu từ file *.dat sử dụng lệnh trong file *.ctl. Bấm vào biểu tượng QUEST để chạy được màn hình sau: - Bước 4: Nhập lệnh: submit nhom1.ctl → Enter 2.2. Đọc kết quả Trang 18 2.2.1. File *.map File *.map cho kết quả đánh giá chung các câu hỏi Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục BAI TAP NHOM 1 ---------------------------------------------------------------- Current System Settings 10/ 8/21 10:25 all on nhom1 (N = 330 L = 80 Probability Level= .50) ---------------------------------------------------------------- Data File = nhom1.dat Data Format = V1 1-4 items (t5,80a1) Log file = nhom1.log Page Width = 132 Page Length = 65 Screen Width = 78 Screen Length = 24 Probability level = .50 Maximum number of cases set at 60000 VALID DATA CODES ABCD GROUPS ( 330 cases ) : All cases 1 all SCALES ( 80 items ) : All items 1 all ( 80 items ) : 1-80 2 nhom1 DELETED AND ANCHORED CASES: No case deletes or anchors DELETED AND ANCHORED ITEMS: No item deletes or anchors RECODES SCORING KEYS Score = 1 CCCACBBAABCBBABAADDDBDDCDBCAABDADCAADDCBAAADAABCBCBBDBDDAADBCBCC CDBADDABCCCCCDBD ================================================================ Học viên: Lê Thị Ngọc Anh Trang 19
Kiểm tra đánh giá trong giáo dục BAI TAP NHOM 1 -------------------------------------------------------------------------------------- Item Estimates (Thresholds) 10/ 8/21 10:25 all on nhom1 (N = 330 L = 80 Probability Level= .50) -------------------------------------------------------------------------------------- Summary of item Estimates ========================= .00 Mean=0, SD=0.61 : phù hợp với mô hình Mean .61 (Mean phải bằng hoặc gần 0.00, SD phải bằng hoặc gần SD SD (adjusted) .60 1.00) Reliability of estimate .96 Độ tin cậy của đề thi Fit Statistics =============== Infit Mean Square Outfit Mean Square Mean 1.00 Mean 1.01 Mean=1.00, SD=0.09 : phù hợp với mô hình SD .09 SD .12 (Mean phải bằng hoặc gần 1.00, SD phải bằng hoặc gần 0.00) Infit t Outfit t Mean -.33 Mean .01 SD 2.15 SD 1.41 0 items with zero scores 0 items with perfect scores ====================================================================================== BAI TAP NHOM 1 -------------------------------------------------------------------------------------- Case Estimates 10/ 8/21 10:25 all on nhom1 (N = 330 L = 80 Probability Level= .50) -------------------------------------------------------------------------------------- Năng lực trung bình của mẫu thí sinh (case estimate) Summary of case Estimates tham gia bài kiểm tra ========================= Độ khó chung của bài kiểm tra: 0 Mean -.70 + Năng lực trung bình của mẫu < 0: đề khó so với SD .58 năng lực của mẫu thí sinh SD (adjusted) .52 + Năng lực trung bình của mẫu > 0: đề dễ so với năng Reliability of estimate .81 lực của mẫu thí sinh Fit Statistics + Năng lực trung bình của mẫu = 0: đề phù hợp so với =============== năng lực của mẫu thí sinh Infit Mean Square Outfit Mean Square Mean 1.00 Mean 1.01 Mean=1.00, SD=0.09 : phù hợp với mô hình SD .09 SD .13 (Mean phải bằng hoặc gần 1.00, SD phải bằng hoặc gần 0.00) Infit t Outfit t Mean -.14 SD .97 Mean .03 SD .74 Học viên: Lê Thị Ngọc Anh Trang 20
Kiểm tra đánh giá trong giáo dục 0 cases with zero scores 0 cases with perfect scores ====================================================================================== BAI TAP NHOM 1 -------------------------------------------------------------------------------------- Item Estimates (Thresholds) all on nhom1 (N = 330 L = 80 Probability Level= .50) --2-.-0------------S--ơ--đ-ồ--p-h-â--n--b-ổ--n-ă|-n-g--l-ự--c-t-h-í--s-in--h--v-à--đ-ộ--k-h--ó--c-â-u--h-ỏ-i--t-h-i--------------- | X| NĂNG LỰC CAO | 74 RẤT KHÓ X| X| 39 | 35 | 38 1.0 X| 77 | X| 54 69 | 19 51 NĂNG LỰC XX | 2 24 28 63 X| 25 34 64 67 76 TƯƠNG ĐỐI CAO | 16 31 59 75 X| XX | 23 27 55 58 70 72 XXXX | 14 18 20 21 40 45 XXXXX | 12 26 53 73 .0 XXX | 1 11 36 43 46 XXXXXXX | 3 22 41 80 NĂNG XXXXXX | 5 50 52 62 LỰC XXXX | 4 10 13 44 57 71 79 | 8 9 49 56 66 78 XXXXXXXXXXX TRUNG XXXXXXXXXXX | 17 42 XXX | 29 BÌNH XXXXXXXXXXX | 7 61 68 XXXXXX | 15 47 XXXXXXXXXXXXXXXXX | 30 33 XXXXXXX | 48 65 -1.0 XXXXXXXXXXXXXXXXXX | XXXXXXXXX | XXXXXXXXXX | 32 XXXXXXXXXX | 37 XXXXXXXXX | 6 XX | NĂNG LỰC XXX | RẤT DỄ XX | THẤP X| X| | 60 -2.0 | X | Có ít câu hỏi đánh giá nhóm TS năng lực thấp | Chóp của nhánh năng lực và chóp nhánh câu | -3.0 | hỏi bị lệch nhau → Đề khó Học viên: Lê Thị Ngọc Anh Trang 21
Kiểm tra đánh giá trong giáo dục -------------------------------------------------------------------------------------- Each X represents 2 students ====================================================================================== BAI TAP NHOM 1 -------------------------------------------------------------------------------------- Item Fit all on nhom1 (N = 330 L = 80 Probability Level= .50) -------------------------------------------------------------------------------------- Biểu đồ minh họa sự phù hợp của các câu hỏi INFIT MNSQ .71 .77 .83 .91 1.00 1.10 1.20 1.30 1.40 ----------+----+---------+---------+---------+---------+---------+---------+--------- 1 item 1 . *| . 2 item 2 . |*. 3 item 3 . *| . 4 item 4 .* | . 5 item 5 .*| . 6 item 6 . *| . 7 item 7 . *| . 8 item 8 .* | . 9 item 9 . |* . 10 item 10 . *| . 11 item 11 . | *. 12 item 12 . |* . 13 item 13 . *| . 14 item 14 . *| . 15 item 15 Tất cả cá.c dấu sao nằm trong |* . 16 item 16 kho..ảng (0.77; 1.30) *| . 17 item 17 . |* 18 item 18 → Khôn.g cần loại bỏ câu nào *| * . 19 item 19 . | . 20 item 20 . |* . 21 item 21 . |* . 22 item 22 . * . 23 item 23 . |* . 24 item 24 . |* . 25 item 25 . |* . 26 item 26 . *| . 27 item 27 . *| . 28 item 28 . *| . 29 item 29 . *| . 30 item 30 .* | . 31 item 31 . *| . 32 item 32 .* | . 33 item 33 .* | . 34 item 34 . |* . 35 item 35 . |* . 36 item 36 . |* . 37 item 37 . *| . 38 item 38 . *| . 39 item 39 . |* . 40 item 40 . | *. 41 item 41 . |* . 42 item 42 . *| . 43 item 43 . *| . Học viên: Lê Thị Ngọc Anh Trang 22
Kiểm tra đánh giá trong giáo dục 44 item 44 . *| . 45 item 45 . |* . 46 item 46 . |* . 47 item 47 . *| . 48 item 48 . *| . 49 item 49 . |* . 50 item 50 . |* . 51 item 51 . | *. 52 item 52 . |* . 53 item 53 . *| . 54 item 54 . |* . 55 item 55 . *| . 56 item 56 .* | . 57 item 57 . *| . 58 item 58 . |* . 59 item 59 . | *. 60 item 60 . *| . 61 item 61 . *| . 62 item 62 . |* . 63 item 63 . |* . 64 item 64 . *| . 65 item 65 .* | . 66 item 66 . *| . 67 item 67 . |* . 68 item 68 . *| . 69 item 69 . *| . 70 item 70 . |* . 71 item 71 . |* . 72 item 72 . |* . 73 item 73 . *| . 74 item 74 . *| . 75 item 75 . |* . 76 item 76 . *| . 77 item 77 . |* . 78 item 78 . *| . 79 item 79 . |* . 80 item 80 . * . ====================================================================================== Những câu trắc nghiệm nằm trong hai đường chấm thẳng đứng có giá trị trung bình bình phương độ phù hợp INFIT MNSQ nằm trong khoảng (0.77; 1.30) sẽ phù hợp với mô hình Rasch. Nếu câu trắc nghiệm nào không phù hợp thì loại bỏ. 2.2.2. File *.ita File *.ita cho kết quả đánh giá chi tiết từng câu hỏi BAI TAP NHOM 1 -------------------------------------------------------------------------------------- Item Analysis Results for Observed Responses 16/ 8/21 12:39 all on nhom1 (N = 330 L = 80 Probability Level= .50) -------------------------------------------------------------------------------------- ...................................................................................... Học viên: Lê Thị Ngọc Anh Trang 23
Kiểm tra đánh giá trong giáo dục Item 1: item 1 Độ phân biệt Infit MNSQ = .99 Mức độ phù hợp với mô hình Rash, 0.25 → 0.75 Disc = .28 nằm trong khoảng Categories A B C* D missing (0.77; 1.30) Count Đáp án 1 Số TS lựa chọn (tần suất) 71 69 111 78 Percent (%) 21.6 21.0 33.7 23.7 Tần số Pt-Biserial -.18 .02 .28 -.15 Hệ số tương quan p-value .001 .384 .000 .002 xác suất thống kê khả năng Mean Ability -.89 -.67 -.47 -.86 -1.29 mỗi phương án trả lời được Step Labels Phải <0.05 Phải cao hơn lựa chọn 1 đáp án sai Thresholds .02 Ngưỡng để vượt qua Error .12 Sai số trong tính toán < 0.2 ...................................................................................... Item 2: item 2 Infit MNSQ = 1.15 Có khả năng nhầm đáp án Disc = -.04 < 0 Categories AB C* D missing Cần xem xét chỉnh sửa Count 60 99 75 95 1 Hoặc loại bỏ Percent (%) 18.2 30.1 -1.29 Pt-Biserial -.02 > 22.8 28.9 p-value .06 .330 .01 Mean Ability .151 -.71 -.04 -.64 .223 > 0.05.394 -.73 -.68 Step Labels 1 Cần xem xét lại vì độ tin cậy thấp Thresholds .60 Không lớn nhất → Chưa đánh giá Error .14 tốt năng lực thật sự của thí sinh ...................................................................................... 2.2.3. File *.cas BAI TAP NHOM 1 ----------------------------------------------------------------------------- Độ phù hợp với mô hình Rash Case Estimates In input Order Phải trong khoảng (0.77, 1.30) 16/ 8/21 12:39 all on nhom1 (N = 330 L = 80 Probability Level= .50) ----------------------------------------------------------------------------- NAME |SCORE MAXSCR | ESTIMATE ERROR | INFIT OUTFT INFT OUTFT ----I-D--củ-a--T-S---S-ố|-c-â-u-đ-úT-n-Sg-b-ỏ-3--câ-u-|--N-ă-n-g-l-ự-c-T-S---------|---M-N-S-Q----M-N-S-Q-----t-------t---- 1 | 18 77 | -1.29 .28 | 1.09 1.13 .64 .66 27 | 36 80 | -.21 .23 | .84 .82 -2.53 -1.32 3 13 | 32 80 | -.44 .24 | .95 .96 -.65 -.23 4 18 | 35 80 | -.27 .23 | .95 .93 -.80 -.48 5 24 | 29 80 | -.61 .24 | .88 .86 -1.49 -.90 6 30 | 25 80 | -.85 .25 | 1.08 1.09 .75 .56 7 36 | 45 80 | .28 .23 | .97 .95 -.48 -.32 Học viên: Lê Thị Ngọc Anh Trang 24
Kiểm tra đánh giá trong giáo dục Nếu độ phù hợp của TS nằm ngoài khoảng (0.77, 1.30) ta sử dụng KIDMAP để phân tích 2.2.4. File *.kid BAI TAP NHOM 1 ------------------------------ K I D M A P----------------------------------- Candidate: 1 ability: -1.29 group: all fit: 1.09 scale: nhom1 % score: 23.38 -----Harder Achieved --------------------------------Harder Not Achieved --------- || Vùng trả lời || || đúng ngoài dự kiến || Vùng trả lời | | 74(D) | | 39(D) sai trong dự kiến 35 | | || | | 38(B) 77(D) || | | 51(A) 54(C) 69(A) | | 19(B) 24(D) 28(D) 63(B) | | 76(B) | | 25(C) 34(B) 64(A) 67(A) 75(B) 59 31 16 || 72 | | 23(A) 27(B) 55(C) 70(A) | | 20(B) 21(D) 40(D) 45(C) 58(D) 53 26 | | 12(C) 14(B) 18(B) 73(D) 46 | | 11(A) 36(D) 43(B) 80(A) 52 | | 22(A) 41(D) | | 4(C) 5(B) 50(B) 62(A) 79 71 44 | | 10(C) 13(C) 49(C) 56(C) 57(D) 66(A) 78 | | 8(D) 9(B) 29 17 | | 42(D) 61 | | 68(D) | | 7(A) 15(A) | | 30(A) 47(C) .................................. 33(B) 48(A) 65(B) || || 32 | | 37 |XXX| | | 6(C) || .................................................... Vùng trả lời || đúng trong dự kiến || Vùng trả lời | | 60(A) || sai ngoài dự kiến || || || || -----Easier Achieved ------------------------------------Easier Not Achieved ----- ================================================================================== Học viên: Lê Thị Ngọc Anh Trang 25
Kiểm tra đánh giá trong giáo dục 3. Thực hiện phân tích bằng phần mềm CONQUEST 3.1 Các bước thực hiện - Bước 1: Lưu file dữ liệu gốc *.dat và phần mềm CONQUEST vào cùng 1 thư mục - Bước 2: Xây dựng tập tin điều khiển + Cách 1: Tạo tập tin điều khiển bằng notepad → Lưu file *.cqc vào cùng thư mục với CONQUEST → mở CONQUEST → File → Open → Chọn tập tin điều khiển vừa tạo Title BAI TAP NHOM 1; datafile nhom1.dat; format V1 1-4 responses 5-84; key CCCACBBAABCBBABAADDDBDDCDBCAABDADCAADDCBAAADAABCBCBBDBDDAADBCBC- CCDBADDABCCCCCDBD ! 1; Model item; Estimate; Show ! estimates=latent>> nhom1.shw; Itanal >> nhom1.itn; Vẽ đồ thị (cú pháp tương ứng với từng loại đồ thị Plot mcc ! legend=yes; mong muốn) + Cách 2: Mở phần mềm CONQUEST → Nhập công thức (tương tự như trên) vào vùng INPUT INPUT: Vùng góc mã lệnh OUTPUT: Vùng hiển thị Trang 26 kết quả Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục → Sau khi nhập công thức ta được màn hình như sau - Bước 3: Run → Run all Học viên: Lê Thị Ngọc Anh Trang 27
Kiểm tra đánh giá trong giáo dục - Chờ chương trình chạy ra kết quả (Lưu ý: nên tắt các chương trình không cần thiết trước khi chạy chương trình để tối ưu quá trình thực hiện của chương trình) - Bước 4: Lưu các đồ thị thành file hình ảnh: Image → Save All As PNGs 3.2. Các lệnh vẽ đồ thị Trang 28 Cú pháp chung Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục Plot <tenloaibieudo> ! legend = yes; 3.2.1. Đường cong đặc trưng câu hỏi (dựa vào điểm số) - Cú pháp: Plot icc ! legend = yes; - Hình dạng biểu đồ - Phân tích: + Xác định điểm uốn của đường cong để xác định độ khó câu hỏi (nếu hướng lên: câu hỏi dễ hay hướng xuống: câu hỏi khó) + Delta(s) trong lý thuyết IRT là đại lượng đặc trưng cho độ khó của câu hỏi và delta càng lớn thì độ khó càng cao (ngược với lý thuyết cổ điển) - Ví dụ: + Câu 60 là câu dễ nhất (có độ khó delta bằng -1.91) nên xác suất trả lời đúng câu hỏi này rất cao, và không đánh giá được năng lực các thí sinh lớn hơn 0 (thang đo logistic) nên cần được chỉnh sửa lại Học viên: Lê Thị Ngọc Anh Trang 29
Kiểm tra đánh giá trong giáo dục + Câu 74 là câu khó nhất (có độ khó delta bằng 1.37), có xác suất trả đúng câu này rất thấp đánh giá tốt nhất đối với nhóm thí sinh có năng lực cao 3.2.2. Đường cong đặc trưng câu hỏi (dựa vào nhóm các phương án trả lời) - Cú pháp: Plot mcc ! legend = yes; - Hình dạng biểu đồ Càng rộng → tỉ lệ đoán mò càng cao - Phân tích: Trang 30 Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục + Dựa vào legend để xác định đây là câu trắc nghiệm có bao nhiêu sự lựa chọn (chỉ có 4 phương án là A, B, C và D) hoặc đa lựa chọn (có nhiều phương án) + Sử dụng đường cong nét đứt để đánh giá xác suất của các phương án lựa chọn như thế nào. - Ví dụ: Dựa vào thông tin legend của câu hỏi 1, ta thấy đây là câu hỏi trắc nghiệm với 4 phương án lựa chọn A, B, C, D. Câu 1 có Delta(s) = 0.02, là 1 câu hỏi trung bình. Dựa vào đường nét đứt ta thấy đáp án C có xác suất lựa chọn ở nhóm thí sinh có năng lực cao (Latent Trait > 0) lớn hơn xác suất lựa chọn ở nhóm thí sinh có năng lực thấp và trung bình 3.2.3. Đường cong đặc trưng cho cả đề thi - Cú pháp: Plot tcc ! legend = yes; - Hình dạng biểu đồ - Phân tích: + Dựa vào điểm uốn của đường cong ta có thể thấy đề thi hơi khó. 3.2.4. Đường cong thông tin cho từng câu hỏi - Cú pháp: Plot iinfo ! legend = yes; - Hình dạng biểu đồ Học viên: Lê Thị Ngọc Anh Trang 31
Kiểm tra đánh giá trong giáo dục - Phân tích: Dựa vào giá trị Delta(s) = -1.36 < 0 ta thấy câu 6 là một câu hỏi dễ. Giá trị điểm cực đại của đường cong khi đối chiếu xuống trục hoành mang giá trị âm chứng tỏ đề thi này đánh giá rất tốt cho nhóm thí sinh có năng lực thấp. Ngược lại câu 39 lại là một câu khó Delta(s) = 1.25 > 0, và đánh giá nhóm thí sinh có năng lực cao. Học viên: Lê Thị Ngọc Anh Trang 32
Kiểm tra đánh giá trong giáo dục 3.2.5. Đường cong thông tin cho cả đề thi - Cú pháp: Plot tinfo ! legend = yes; - Hình dạng biểu đồ - Phân tích: Dựa vào điểm cực đại của đường cong ta có thể thấy đề thi đánh giá tốt học sinh có năng lực ở mức trung bình 3.3. Đọc kết quả 3.3.1. File *itn BAI TAP NHOM 1 Mon Aug 16 13:10 2021 GENERALISED ITEM ANALYSIS ============================================================================= Item 1 Số thí sinh trả lời câu hỏi Độ phân biêt – 0.25 → 0.75 ------ item:1 (1) Cases for this item 329 Discrimination 0.28 Item Threshold(s): 0.02 Weighted MNSQ 1.00 Item Delta(s): 0.02 Độ khó – càng lớn càng khó ----------------------------------------------------------------------------- Label Score Count % of tot Pt Bis t (p) PV1Avg:1 PV1 SD:1 ----------------------------------------------------------------------------- A 0.00 71 21.58 -0.18 -3.22(.001) -0.86 0.42 B 0.00 69 20.97 0.02 0.30(.768) -0.70 0.48 C 1.00 111 33.74 0.28 5.23(.000) -0.54 0.55 D 0.00 78 23.71 -0.15 -2.83(.005) -0.79 0.48 Hệ số Đáp án Tần suất Tần số tương quan Học viên: Lê Thị Ngọc Anh Trang 33
Kiểm tra đánh giá trong giáo dục 3.3.2. File *shw ============================================================================= BAI TAP NHOM 1 Mon Aug 16 13:10 2021 TABLES OF RESPONSE MODEL PARAMETER ESTIMATES ============================================================================= TERM 1: item Giá trị oufit Giá trị oufit -V-AR--I-AB-L-E--S-----------củ-a--c-â-u-h-ỏ-i--------U-N--WE--IG-H--T-ED---F-IT--------------W-E-I-GH-T--ED---F-IT----của câu hỏi -------- ESTIMATE ERROR^ -M-N-S-Q--T-h-u-ộ--c-C-I---------T- -------------------------- item MNSQ Thuộc CI T ------------------------------------------------------------------------------------ 11 0.022 0.085 1.00 ( 0.85, 1.15) 0.0 1.00 ( 0.91, 1.09) -0.1 22 0.599 0.089 1.23 ( 0.85, 1.15) 2.8 1.13 ( 0.86, 1.14) 1.7 33 -0.074 0.084 0.92 ( 0.85, 1.15) -1.0 0.93 ( 0.92, 1.08) -1.8 44 -0.245 0.083 0.88 ( 0.85, 1.15) -1.6 0.89 ( 0.93, 1.07) -3.4 55 -0.225 0.083 0.90 ( 0.85, 1.15) -1.4 0.90 ( 0.93, 1.07) -2.9 66 -1.359 0.084 0.90 ( 0.85, 1.15) -1.3 0.94 ( 0.92, 1.08) -1.6 77 -0.653 0.082 0.96 ( 0.85, 1.15) -0.4 0.97 ( 0.95, 1.05) -1.3 88 -0.359 0.083 0.88 ( 0.85, 1.15) -1.5 0.89 ( 0.94, 1.06) -3.7 99 -0.368 0.083 1.09 ( 0.85, 1.15) 1.1 1.08 ( 0.94, 1.06) 2.4 10 10 -0.279 0.083 0.96 ( 0.85, 1.15) -0.5 0.96 ( 0.93, 1.07) -1.3 ============================================================================= - Cột Estimate ính toán độ khó của từng câu hỏi. Cột “UNWEIGHTED FIT/OUTFIT” và cột “WEIGHTED FIT/INFIT” tính toán giá trị misfit của câu hỏi. Thông thường ta sẽ hi vọng các giá trị MNSQ sẽ nằm trong trong khoảng tự tin (CI – Confidence Interval), nếu giá trị MNSQ (của cả infit và outfit) nằm ngoài khoảng tự tin chứng tỏ có bất thường xảy ra đối với câu hỏi đó. Khả năng lớn là câu hỏi có nội dung dễ gây hiểu nhầm hoặc đáp án của câu hỏi sai → cần phải xem xét lại (Vd 10 Câu hỏi trên không có câu nào bất thường) ============================================================================= BAI TAP NHOM 1 Mon Aug 16 13:10 2021 MAP OF LATENT DISTRIBUTIONS AND RESPONSE MODEL PARAMETER ESTIMATES ============================================================================= Terms in the Model (excl Step terms) +item ----------------------------------------------------------------------------- |74 | |39 | || XXX|35 | |38 | 1 |77 | || |54 | X|69 | XXX|19 51 | X|24 28 63 | X|2 76 | X|25 34 64 67 75 | XX|16 31 59 | XXXXXX| | XXXXX|27 55 70 72 | XXX|23 58 | XXXXXXXX|18 20 21 40 45 | XXXXXXXX|12 14 26 53 | XXXXXXXXXXXXXX|1 11 73 | 0 XXXXXXXXXXXXX|36 43 46 80 | XXXXXXXXXXXXX|3 22 41 52 | Học viên: Lê Thị Ngọc Anh Trang 34
Kiểm tra đánh giá trong giáo dục XXXXXXXXXXXXXXXXXXXXX|50 62 | XXXXXXXXXXXXXXXXX|4 5 13 71 79 | XXXXXXXXXXXXXXXXXXX|10 44 56 57 66 | XXXXXXXXXXXXXXXXXX|8 9 49 78 | XXXXXXXXXXXXXXXXXXXXXXXXXXX|42 | XXXXXXXXXXXXXXXXXXXXXXXXXXX|17 29 | XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|61 68 | XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|7 | XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|15 | XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|30 47 | XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|33 48 | XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX|65 | -1 XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX| | XXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXXX| | XXXXXXXXXXXXXXXXXXXXXXXXXXX| | XXXXXXXXXXXXXXXXXXXXX|32 | XXXXXXXXXXXXXXXXX| | XXXXXXXXXXXXXXXX|6 37 | XXXXXXXXXX| | XXXXXXXXX| | XXXXXXX| | XXXX| | XX| | X| | XX| | XX|60 | -2 | | XX| | || || ============================================================================= Each 'X' represents 0.5 cases ============================================================================= BAI TAP NHOM 1 Mon Aug 16 13:10 2021 MAP OF LATENT DISTRIBUTIONS AND THRESHOLDS ============================================================================= Generalised-Item Thresholds ----------------------------------------------------------------------------- |74 |39 | X|35 |38 1| |77 |54 |69 X|19 51 |24 28 63 |2 76 |25 34 64 67 75 |16 31 59 XX| X|27 55 70 72 X|23 58 XX|14 18 20 21 40 45 XX|12 26 53 XXXX|1 11 73 0 XXX|36 43 46 80 XXX|3 22 41 52 XXXXX|50 62 XXXX|4 5 13 71 79 XXXXX|10 44 49 56 57 66 XXXXX|8 9 78 XXXXXXX|42 XXXXXXX|17 29 XXXXXXXX|61 68 Học viên: Lê Thị Ngọc Anh Trang 35
Kiểm tra đánh giá trong giáo dục XXXXXXXX|7 XXXXXXXX|15 47 XXXXXXXX|30 XXXXXXXX|33 48 XXXXXXXXXX|65 -1 XXXXXXXXX| XXXXXXXXXX| XXXXXXX| XXXXX|32 XXXX| XXXX|6 37 XXX| XX| XX| X| | | X| X|60 -2 | | | ============================================================================= Each 'X' represents 2.2 cases The labels for thresholds show the levels of item, and step, respectively ============================================================================= - Cách đọc 2 biểu đồ trên → xem phần hướng dẫn 2.2.1. 4. Thực hiện phân tích kết quả bằng phần mềm SPSS 4.1. Các bước thực hiện - Bước 1: Sử dụng file *.cas được tạo ra từ phần mềm QUEST → Mở file → Xóa các dòng thừa ở phía trên → Lưu file (Save as) 1 File không có chữ a Delete 2 Học viên: Lê Thị Ngọc Anh Trang 36
Kiểm tra đánh giá trong giáo dục 3 4 - Bước 2: Mở Excel → Open → All file → Chọn file *.cas vừa mới lưu → Open → Làm theo các bước như hình vẽ dưới 5 7 6 8 Trang 37 Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục 9 10 11 12 - Bước 3: Chọn cột D (là cột năng lực của thí sinh) → Copy 13 14 Học viên: Lê Thị Ngọc Anh Trang 38
Kiểm tra đánh giá trong giáo dục - Bước 4: Mở SPSS → Variable View → Tạo biến Nangluc, Diem như hình bên dưới → Dán dữ liệu vừa copy ở excel vào cột Nangluc → Dán dữ liệu điểm của thí sinh đã được làm tròn vào cột Diem 18 17 - Bước 5: Phân tích đơn biến “Nangluc”: Analyze → Descriptive Statistics → Explore Lưu ý: Biến năng lực Estimate là biến tỉ lệ (liên tục) nên phân tích bằng Explore. Nếu là biến rời rạc thì phân tích bằng Frequencies) Học viên: Lê Thị Ngọc Anh Trang 39
Kiểm tra đánh giá trong giáo dục 18 19 20 - Bước 6: Chọn Nangluc → Dependent List → Statistics → Chọn những đại lượng cần thiết → Continue → OK 23 27 24 21 31 22 25 26 34 29 28 30 32 Học viên: Lê Thị Ngọc Anh 33 Trang 40
Kiểm tra đánh giá trong giáo dục * Giải thích một số lệnh: + Ở hộp lệnh Exlore - Các biến trong tập dữ liệu xuất hiện trong hộp bên trái - Chọn một hay nhiều biến đưa vào ô Dependent list, Các biến cần quan sát sẽ được liệt kê trong ô này - Chúng ta cũng có thể tách các quan sát thành các nhóm nhỏ riêng biệt để kiểm tra dựa và các giá trị của các biếm kiểm soát sẽ được đưa vào ô Factor List (Vd: Quan sát biến Diem theo từng lớp – biến Lop thì biến Diem sẽ được đưa vào ô Dependent list, biến Lop sẽ được đưa vào ô Factor List) - Có thể lần ra các quan sát này bằng cách gán nhãn cho nó bằng giá trị của một biến nào đó, biến này sẽ được đưa vào trong ô Label Cases by - Ô Display, cho phép chúng ta chọn cách hiển thị kết quả, các tham số thống kê (Statistic), hoặc đồ thị (Plot), SPSS mặc định là hiển thị cả hai (Both) + Ở hộp lệnh Explore: Statistics - Descriptives: Cho phép ta hiển thị các giá trị thống kê như giá trị trung bình, khoảng tin cậy, trung vị, trung bình giãn lược, giá trị nhỏ nhất, lớn nhất, khoảng biến thiên, các bách phân vị - M-estimators: Hiển thị giá trị trung bình theo trọng số (gán các trọng số khác nhau cho các giá trị quan sát tùy theo khoảng cách của nó đến giá trị trung bình, càng xa trọng số càng nhỏ) - Outliers: Hiển thị các quan sát với 5 giá trị nhỏ nhất và 5 giá trị lớn nhất, gọi là Extreme Values - Percentiles: Hiển thị các giá trị vi phân - Confidence Interval for Mean: Độ tin cậy + Ở hộp thoại Explore: Plots - Boxplots: Điều kiện hiển thị của Boxplots là ta phải đang quang sát nhiều hơn một biến thụ thuộc, Factor levels together đưa ra hiển thị riêng biệt cho mỗi biến phụ thuộc, trong phạm vi một hiển thị, Boxplots được hiển thị cho mỗi một nhóm được phân ra theo giá trị của biến điều khiển, Dependents together đưa Học viên: Lê Thị Ngọc Anh Trang 41
Kiểm tra đánh giá trong giáo dục ra một hiển thị riêng biệt theo mỗi nhóm được phân theo các giá trị trong biến điều khiển, trong phạm vi một hiển thị, Boxplots được đưa ra lần lượt cho mỗi biến phụ thuộc - Descriptive: Cho phép lựa chọn hiển thị dạng đồ thị Histogram hay dạng cành lá (Stem-and-leaf plots) - Normality plots with tests: Đưa ra các dạng đồ thị về phân phối chuẩn. Đồng thời cung cấp một kiểm nghiệm thống kê Kolmogorov-Smirnov statistic, với mức tin cậy Lilliefors dùng để kiểm nghiện tính chuẩn của phân phối mẫu đang quan sát. + Ở hộp thoại Explore: Options - Exclude cases listwise: Những trường hợp có giá trị bị thiếu (missing) ở bất kì một biến nào trong các biến được đưa vào Dependent list hay Factor List ở hộp thoại Explore đều bị bỏ qua trong tất cả các phép tính toán và đồ thị. Đây là lựa chọn mặc định - Exxclude cases pairrwise: khi lựa chọn cách này, mỗi phép toán thống kê hay đồ thị sẽ sử dụng tất cả các trường hợp không có thông tin bị thiếu tại các biến cần cho việc tính toán chung. Các trường hợp - Bước 7: Phân tích nhị biến: Nangluc và Diem: Analyza → Correlate → Bivariate → Đưa 2 biến Nangluc và Diem vào ô Variables → Options → lựa chọn các giá trị cần thiết → OK Lưu ý: Đây là 2 biến liên tục – tỷ lệ (Diem TS càng cao thì Nangluc TS càng cao). Do đó ta dùng lệnh Correlate → Bivariate để phần tích 35 37 40 38 39 36 43 Học viên: Lê Thị Ngọc Anh Trang 42
Kiểm tra đánh giá trong giáo dục 41 42 - Bước 8: Vẽ đồ thị biểu diễn mối tương quan: Graphs → Chart Builder → OK → Scatter/Dot trong Gallery (Nếu vẽ những loại đồ thị khác thì chọn loại đồ thị tương ứng trong mục Gallery) → Chọn đồ thị thích hợp → Kéo thả chuột lên vùng vẽ đồ thị → Đưa biến Nangluc và biến Diem vào trục tương ứng bằng cách kéo thả chuột → OK 44 45 46 48 Trang 43 47 Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục 49 50 51 4.2. Định dạng đồ thị - Nháy đúp chuột vào đồ thị hiển thị ở cửa sổ Output → Cửa sổ Chart Editor hiện ra Học viên: Lê Thị Ngọc Anh Trang 44
Kiểm tra đánh giá trong giáo dục Màu đồ thị Đường viên ngoài của đồ thị Nháy đúp chuột vào hình hộp Chọn màu cho hộp Kích thước đường viền hộp Học viên: Lê Thị Ngọc Anh Kiểu đường viền hộp Sau khi chọn xong → Apply để thay đổi Trang 45
Kiểm tra đánh giá trong giáo dục Thay đổi kích thước của đồ thị Kích thước Thay đổi hình của hộp dáng hộp Kiểu của hộp Trang 46 Học viên: Lê Thị Ngọc Anh
Kiểm tra đánh giá trong giáo dục Định dạng trên Xóa hoặc thêm các trục tọa độ lưới cho đồ thị Giá trị cực đại trên trục Giá trị cực tiểu trên trục Độ chia nhỏ nhất trên trục Copy đồ thị ở cửa sổ Output để làm báo cáo Học viên: Lê Thị Ngọc Anh Trang 47
Kiểm tra đánh giá trong giáo dục 4.3. Đọc kết quả 4.3.1. Bảng thống kê mô tả Tổng số TS Số TS không đánh giá năng lực Phần vị thứ 25: -1.11 Phần vị thứ 50: -0.79 = Median Phần vị thứ 75: -0.32 Hay 25% TS có năng lực dưới -1.11 Hay 25% TS có năng lực trên -0.32 BẢNG THỐNG KÊ MÔ TẢ - Mean: giá trị trung bình - 95% Confidence interval for Mean: khoảng ước lựng của giá trị trung bình với độ tin cậy 95% (Lower Bound <= mean <= Upper Bound) - 5% Trimmed Mean: giá trị trung bình của mẫu khi 5% số liệu có giá trị cao nhất và 5% giá trị thấp nhất được loại ra khỏi mẫu - Meadian: số trung vị - Variance: phương sai - Std. Deviation: độ lệch chuẩn - Minnimum: giá trị nhỏ nhất - Maximum: giá trị lớn nhất - Range: độ biến thiên (Range = max – min) - Interquartile Range: độ trải giữa (IQR = 0.3 – 0.1) - Skewness: hệ số độ nhọn - Kurtosis: hệ số bất đối xứng Học viên: Lê Thị Ngọc Anh Trang 48
Kiểm tra đánh giá trong giáo dục 4.3.2. Sơ đồ Stem-and-Leaf Plots Lá cây: Chỉ phần thập phân Thân cây: chỉ phần nguyên Số thí sinh Ví dụ: ở hàng số 4 có 21 thí sinh, trong đó có 15 thí sinh có năng lực -1.4 và có 6 thí sinh có năng lực -1.5 21.00 -1 . 444444444444444555555 Học viên: Lê Thị Ngọc Anh Trang 49
Search
