Tổng quan nghiên cứu

Trong bối cảnh công nghiệp hóa và hiện đại hóa đất nước, Nghị quyết của Chính phủ về đổi mới cơ bản và toàn diện giáo dục đại học Việt Nam giai đoạn 2006-2020 đã khẳng định định hướng mở rộng quy mô đào tạo phải đi đôi với nâng cao chất lượng thực chất, trong đó đổi mới phương thức kiểm tra và đánh giá kết quả học tập là khâu then chốt. Đối với hệ thống giáo dục nghề nghiệp, môn học Dung sai kỹ thuật đo là môn cơ sở cốt lõi thuộc chương trình đào tạo ngành Khai thác sửa chữa thiết bị cơ khí và Chế tạo máy với thời lượng 30 tiết (tương đương 2 đơn vị học trình). Môn học giữ vai trò quyết định trong việc trang bị kiến thức về độ chính xác gia công, tính đổi lẫn chức năng và kỹ thuật đo kiểm cơ khí. Tuy nhiên, thực tế kiểm tra đánh giá tại các trường hiện nay cho thấy có tới 90,32% giảng viên vẫn sử dụng hình thức thi tự luận truyền thống. Phương pháp này bộc lộ nhiều hạn chế lớn như diện bao quát kiến thức hẹp, thiếu tính khách quan, dễ tạo tâm lý học tủ và điểm số bị chi phối mạnh bởi yếu tố chủ quan của người chấm.

Nhằm giải quyết triệt để những bất cập trên, luận văn xác định mục tiêu trọng tâm là xây dựng ngân hàng câu hỏi trắc nghiệm khách quan chuẩn hóa gồm 358 câu hỏi cho môn Dung sai kỹ thuật đo tại Trường Trung học Kỹ thuật Thực hành trực thuộc Trường Đại học Sư phạm Kỹ thuật Thành phố Hồ Chí Minh. Nghiên cứu được triển khai trong thời gian 8 tháng (từ tháng 8/2012 đến tháng 3/2013), hướng tới phục vụ quy mô đào tạo gần 1.000 học sinh thuộc 6 chuyên ngành kỹ thuật của nhà trường. Kết quả nghiên cứu có ý nghĩa thực tiễn to lớn khi cung cấp bộ công cụ khảo thí có độ tin cậy cao, kiểm soát chỉ số độ khó tối ưu trong khoảng 25% đến 75% và chỉ số phân biệt đạt chuẩn từ 0,30 trở lên, góp phần nâng cao chất lượng dạy và học cũng như bảo đảm chuẩn đầu ra đáp ứng yêu cầu của doanh nghiệp.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Nghiên cứu được phát triển dựa trên nền tảng lý thuyết đo lường và đánh giá giáo dục hiện đại của GS. Trần Bá Hoành, GS. Dương Thiệu Tống, kết hợp các quan điểm khoa học của Millman (1984) và Choppin (1981) về tiêu chuẩn định cỡ ngân hàng câu hỏi thi. Khung phân loại 6 cấp độ nhận thức của Benjamin Bloom (Biết, Hiểu, Áp dụng, Phân tích, Tổng hợp, Đánh giá) cùng mô hình thiết lập mục tiêu SMART được vận dụng đồng bộ để lượng hóa toàn bộ chuẩn đầu ra của chương trình đào tạo.

Hệ thống khái niệm cốt lõi được làm rõ bao gồm: kiểm tra đánh giá thành quả học tập, trắc nghiệm khách quan và ngân hàng câu hỏi định cỡ. Nghiên cứu ứng dụng lý thuyết khảo thí cổ điển (Classical Test Theory) để thiết kế 4 dạng thức câu hỏi trắc nghiệm khách quan với mức độ may rủi kỳ vọng được kiểm soát chặt chẽ: câu hỏi nhiều lựa chọn (4 lựa chọn, tỷ lệ may rủi kỳ vọng 25%), câu hỏi đúng sai (tỷ lệ may rủi 50%), câu hỏi ghép hợp (tỷ lệ may rủi dưới 5%), và câu hỏi điền khuyết (tỷ lệ may rủi 0%). Chất lượng của từng câu hỏi được định lượng thông qua 3 tham số kỹ thuật then chốt: độ khó P, độ phân cách D và sức hấp dẫn của các phương án mồi nhử.

Phương pháp nghiên cứu

Nghiên cứu sử dụng nguồn dữ liệu khảo sát thực trạng từ 31 giảng viên chuyên ngành cơ khí tại 5 cơ sở đào tạo cao đẳng, trung cấp trên địa bàn Thành phố Hồ Chí Minh và dữ liệu thực nghiệm sư phạm từ 95 học sinh trung cấp chuyên nghiệp ngành Khai thác sửa chữa thiết bị cơ khí. Phương pháp chọn mẫu mục đích (purposive sampling) được áp dụng cho nhóm giảng viên nhằm thu thập đánh giá chuyên sâu từ những người trực tiếp giảng dạy; đồng thời phương pháp chọn mẫu cụm theo lớp được sử dụng cho nhóm học sinh thực nghiệm nhằm phản ánh trung thực năng lực tiếp thu trong điều kiện đào tạo thực tế.

Phương pháp phân tích số liệu kết hợp phương pháp chuyên gia và thống kê toán học. Mô hình phân tích cổ điển tách 27% nhóm điểm cao nhất và 27% nhóm điểm thấp nhất được lựa chọn vì tính chính xác và khả năng ứng dụng thực tiễn cao trong việc xác định độ khó P và độ phân biệt D mà không phụ thuộc vào các phần mềm phức tạp. Tiến trình nghiên cứu diễn ra xuyên suốt trong 8 tháng (từ tháng 8/2012 đến tháng 3/2013), trải qua 7 bước tuần tự từ phân tích đề cương chi tiết môn học, lập ma trận hai chiều, soạn thảo câu hỏi, xin ý kiến chuyên gia, tổ chức thử nghiệm thực tế đến xử lý số liệu thống kê và hoàn thiện ngân hàng đề thi.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

Khảo sát thực trạng kiểm tra đánh giá môn Dung sai kỹ thuật đo tại các trường cao đẳng, trung cấp mang lại những con số đáng chú ý. Có tới 87,1% số trường được khảo sát (27/31 phiếu) chưa có ngân hàng câu hỏi trắc nghiệm khách quan cho môn học, 9,67% (3 giảng viên) đang trong quá trình xây dựng và chỉ 3,2% (1 giảng viên) đã có ngân hàng câu hỏi nhưng chưa qua bước lập dàn bài trắc nghiệm hay thẩm định chuyên gia. Xét về phương pháp kiểm tra, 90,32% giảng viên sử dụng hình thức thi tự luận, trong khi chỉ có 9,68% từng áp dụng trắc nghiệm khách quan.

Khảo sát về việc thực hiện quy trình xây dựng câu hỏi trắc nghiệm cũng chỉ ra sự thiếu sót lớn về kỹ thuật khảo thí: 100% giáo viên có phân tích nội dung bài giảng và 66,7% có xác định mục tiêu môn học, nhưng có tới 0% giáo viên lập dàn bài trắc nghiệm ma trận hai chiều và 0% tiến hành lấy ý kiến chuyên gia hoặc phân tích thử nghiệm định cỡ câu hỏi.

Trên cơ sở khắc phục các hạn chế trên, tác giả đã biên soạn thành công 358 câu hỏi trắc nghiệm khách quan bao quát 100% kiến thức qua 6 chương của môn học 30 tiết. Kết quả thử nghiệm trên mẫu 95 học sinh cho thấy độ khó trung bình của bộ câu hỏi đạt từ 45% đến 65% (phù hợp năng lực học sinh trung cấp), và chỉ số phân biệt D của đa số câu hỏi đạt mức tốt từ 0,30 đến trên 0,40 sau khi đã loại bỏ các câu có độ phân cách âm và chỉnh sửa các phương án mồi nhử chưa đạt yêu cầu.

Thảo luận kết quả

Nguyên nhân chủ yếu khiến hơn 90% giáo viên phụ thuộc vào hình thức tự luận là do thiếu kỹ năng đo lường giáo dục, việc biên soạn câu hỏi trắc nghiệm tốn nhiều công sức và chưa có quy trình chuẩn hóa hỗ trợ. Kết quả này tương đồng với các công trình nghiên cứu của Đỗ Văn Trường (2011) khi xây dựng 210 câu hỏi nghề điện và Hoàng Thị Hằng (2010) với 205 câu hỏi nghề may, khẳng định việc xây dựng ngân hàng câu hỏi chuẩn mực là đòi hỏi tất yếu của quá trình đổi mới giáo dục nghề nghiệp.

Dữ liệu của luận văn được thể hiện trực quan qua biểu đồ phân bố điểm kiểm tra thực nghiệm (đạt dạng đường cong chuẩn đối xứng), bảng ma trận hai chiều phân bổ câu hỏi giữa 6 cấp độ nhận thức Bloom và 6 chương nội dung, cùng đồ thị phân tán thể hiện mối tương quan chặt chẽ giữa độ khó P và độ phân cách D. Việc ứng dụng ngân hàng 358 câu hỏi đã giúp triệt tiêu hoàn toàn hiện tượng học vẹt, học tủ, bảo đảm tính công bằng tuyệt đối khi chấm thi và tiết kiệm hơn 80% thời gian chấm bài so với thi tự luận truyền thống.

Đề xuất và khuyến nghị

Dựa trên kết quả nghiên cứu thực nghiệm, luận văn đề xuất 4 giải pháp trọng tâm nhằm nâng cao chất lượng kiểm tra đánh giá:

Thứ nhất, chuẩn hóa quy trình biên soạn đề thi bằng ma trận hai chiều. Ban Giám hiệu và Bộ môn Cơ khí máy chỉ đạo 100% giảng viên áp dụng khung phân loại Bloom kết hợp mô hình SMART để thiết lập ma trận đề thi cho 6 chương học phần, hoàn thành áp dụng trong 3 tháng đầu của năm học mới.

Thứ hai, triển khai phần mềm quản lý và định cỡ câu hỏi tự động. Phòng Quản lý Đào tạo phối hợp cùng Tổ Công nghệ thông tin tích hợp phần mềm khảo thí vào hệ thống quản lý đào tạo trong quý 2 năm học, bảo đảm kiểm soát tự động 100% các câu hỏi duy trì độ khó P trong khoảng 25% đến 75% và độ phân cách D đạt từ 0,30 trở lên cho toàn bộ 358 câu hỏi.

Thứ ba, tổ chức tập huấn chuyên sâu về kỹ thuật đo lường giáo dục. Phòng Đào tạo tổ chức khóa bồi dưỡng 30 tiết về phương pháp thiết kế mồi nhử và phân tích chỉ số trắc nghiệm cổ điển cho 100% cán bộ giảng dạy trong thời hạn 6 tháng.

Thứ tư, đổi mới cơ cấu đánh giá học phần theo hướng tích hợp. Bộ môn Cơ khí máy điều chỉnh cơ cấu điểm tổng kết, kết hợp 70% trọng số điểm thi trắc nghiệm khách quan với 30% điểm bài tập thực hành đo kiểm thực tế, áp dụng đồng bộ cho hơn 500 học sinh tuyển sinh hàng năm.

Đối tượng nên tham khảo luận văn

Nội dung luận văn mang lại giá trị học thuật và giải pháp ứng dụng thiết thực cho 4 nhóm đối tượng:

  1. Giảng viên và giáo viên bộ môn Cơ khí máy: Trực tiếp khai thác ngân hàng 358 câu hỏi đã được định cỡ tham số và khung ma trận hai chiều để tổ chức kiểm tra định kỳ, thi kết thúc học phần Dung sai kỹ thuật đo 30 tiết, giúp tiết kiệm 70% thời gian ra đề và nâng cao độ chính xác khi đánh giá.

  2. Cán bộ quản lý đào tạo và trung tâm khảo thí: Áp dụng quy trình chuẩn 8 bước xây dựng và thẩm định ngân hàng đề thi để nhân rộng cho hơn 10 môn học kỹ thuật khác, phục vụ công tác kiểm định chất lượng cho quy mô hơn 1.000 học sinh sinh viên trong toàn trường.

  3. Học viên cao học và nhà nghiên cứu giáo dục nghề nghiệp: Tham khảo phương pháp luận khoa học về đo lường giáo dục, kỹ thuật xử lý mồi nhử và phương pháp phân tích 27% nhóm điểm cực trị trong việc định cỡ ngân hàng câu hỏi trắc nghiệm chuyên ngành kỹ thuật.

  4. Học sinh, sinh viên ngành Cơ khí chế tạo máy: Sử dụng bộ câu hỏi phong phú gồm 4 dạng thức để tự ôn tập, củng cố 100% kiến thức nền tảng về dung sai lắp ghép và kỹ năng sử dụng dụng cụ đo chính xác.

Câu hỏi thường gặp

Ngân hàng câu hỏi trắc nghiệm môn Dung sai kỹ thuật đo gồm những dạng thức nào? Ngân hàng gồm 358 câu hỏi được biên soạn theo 4 dạng thức chính: trắc nghiệm 4 lựa chọn, trắc nghiệm đúng sai, trắc nghiệm ghép hợp và trắc nghiệm điền khuyết. Sự kết hợp này giúp đánh giá toàn diện cả khả năng nhận biết khái niệm, tư duy tính toán sai lệch giới hạn và kỹ năng đọc bản vẽ lắp ráp.

Vì sao cần phân tích độ khó và độ phân biệt cho từng câu trắc nghiệm? Phân tích độ khó P và độ phân cách D giúp loại bỏ các câu hỏi quá khó (dưới 24%), quá dễ (trên 76%) hoặc có độ phân cách kém (dưới 0,19). Quy trình này bảo đảm đề thi phân loại chính xác 100% các nhóm năng lực học sinh giỏi, khá và trung bình.

Tỷ lệ may rủi kỳ vọng giữa các dạng câu hỏi trắc nghiệm khác biệt như thế nào? Theo lý thuyết đo lường, tỷ lệ may rủi kỳ vọng thay đổi theo từng dạng câu hỏi: câu hỏi đúng sai có xác suất đoán mò là 50%, câu hỏi 4 lựa chọn là 25%, câu hỏi ghép hợp giảm xuống dưới 5% và dạng câu hỏi điền khuyết đạt mức may rủi bằng 0%.

Tại sao cần thiết lập ma trận hai chiều khi xây dựng đề thi trắc nghiệm? Ma trận hai chiều kết hợp 6 cấp độ nhận thức Bloom với 6 chương nội dung giúp phân bổ số lượng câu hỏi cân đối, tránh hiện tượng ra đề lệch tủ vào một vài bài học. Phương pháp này bảo đảm 100% chuẩn đầu ra của môn học 30 tiết được kiểm tra đầy đủ.

Quy trình chuẩn để xây dựng ngân hàng câu hỏi trắc nghiệm gồm những bước nào? Quy trình chuẩn gồm 8 bước khép kín: phân tích nội dung môn học, xác định mục tiêu đào tạo, lập dàn bài ma trận trắc nghiệm, biên soạn câu hỏi thô, xin ý kiến chuyên gia, tổ chức thử nghiệm trên nhóm mẫu 95 học sinh, phân tích tham số thống kê và nhập ngân hàng lưu trữ chính thức.

Kết luận

  • Luận văn đã hệ thống hóa cơ sở lý luận về đo lường giáo dục và xây dựng thành công ngân hàng 358 câu hỏi trắc nghiệm khách quan chuẩn hóa cho môn Dung sai kỹ thuật đo 30 tiết.
  • Kết quả khảo sát thực trạng chỉ ra 87,1% cơ sở đào tạo chưa có ngân hàng trắc nghiệm và 90,32% giáo viên phụ thuộc vào thi tự luận, khẳng định tính cấp thiết của đề tài.
  • Dữ liệu thực nghiệm trên 95 học sinh chứng minh bộ câu hỏi có độ khó tối ưu từ 45% đến 65% và độ phân cách D đạt chuẩn trên 0,30, bảo đảm độ tin cậy khảo thí cao.
  • Đóng góp chính của đề tài là hoàn thiện quy trình 8 bước xây dựng ngân hàng câu hỏi khoa học từ lập ma trận hai chiều đến định cỡ mồi nhử, phục vụ đào tạo cho 6 chuyên ngành kỹ thuật.
  • Trong giai đoạn 12 tháng tiếp theo, nhà trường cần số hóa 100% ngân hàng câu hỏi lên phần mềm khảo thí điện tử; các cơ sở giáo dục nghề nghiệp nên chủ động ứng dụng mô hình này để đổi mới căn bản công tác kiểm tra đánh giá.