Tổng quan nghiên cứu

Trong bối cảnh thực hiện Nghị quyết của Chính phủ về đổi mới căn bản và toàn diện giáo dục đào tạo, việc chuyển đổi phương thức kiểm tra đánh giá giữ vai trò đòn bẩy nhằm nâng cao chất lượng đào tạo nguồn nhân lực kỹ thuật. Thực trạng tại nhiều cơ sở giáo dục nghề nghiệp cho thấy hoạt động đánh giá kết quả học tập môn Dung sai kỹ thuật đo vẫn chủ yếu dựa vào phương pháp thi tự luận truyền thống, bộc lộ nhiều hạn chế về tính bao quát kiến thức và độ khách quan.

Đề tài luận văn thạc sĩ chuyên ngành Phương pháp và lý luận dạy kỹ thuật của tác giả Lưu Thị Lan Anh, dưới sự hướng dẫn khoa học của Phó Giáo sư, Tiến sĩ Võ Thị Xuân tại Trường Đại học Sư phạm Kỹ thuật Thành phố Hồ Chí Minh, đã tập trung giải quyết bài toán cấp thiết này. Mục tiêu cốt lõi của nghiên cứu là xây dựng hoàn chỉnh ngân hàng câu hỏi trắc nghiệm khách quan chuẩn hóa cho môn Dung Sai Kỹ Thuật Đo (thời lượng 2 tín chỉ, tương đương 30 tiết lý thuyết) thuộc chương trình đào tạo ngành Khai thác sửa chữa thiết bị cơ khí.

Phạm vi nghiên cứu được triển khai thực nghiệm trực tiếp tại Trường Trung học Kỹ thuật Thực hành, kết hợp khảo sát thực trạng đối sánh tại 5 cơ sở giáo dục nghề nghiệp trên địa bàn Thành phố Hồ Chí Minh trong giai đoạn từ tháng 8 năm 2012 đến tháng 3 năm 2013. Kết quả nghiên cứu đã biên soạn thành công 358 câu hỏi trắc nghiệm đa dạng và chuẩn hóa 104 câu hỏi qua thực nghiệm sư phạm. Công trình mang ý nghĩa thực tiễn sâu sắc, cung cấp bộ công cụ đo lường đáng tin cậy với độ khó kiểm soát từ 25% đến 75% và độ phân cách đạt chuẩn, giúp giảm thiểu hiện tượng học tủ, nâng cao tính công bằng và tối ưu hóa chuẩn đầu ra cho học sinh trung cấp chuyên nghiệp.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Nghiên cứu xây dựng trên nền tảng lý luận đo lường giáo dục hiện đại kết hợp các quan điểm kinh điển của các chuyên gia khảo thí như Millman (1984), Choppin (1981), Giáo sư Trần Bá Hoành và Giáo sư Dương Thiệu Tống. Hệ thống lý thuyết trọng tâm bao gồm:

Thứ nhất, thang phân loại mục tiêu nhận thức của Benjamin Bloom với 6 cấp độ tư duy từ thấp đến cao: Biết, Hiểu, Áp dụng, Phân tích, Tổng hợp và Đánh giá. Khung phân loại này định hướng phân bổ tỷ trọng câu hỏi nhằm đảm bảo bài kiểm tra đánh giá toàn diện năng lực học sinh, từ ghi nhớ thuật ngữ đến giải quyết bài toán chuỗi kích thước phức tạp.

Thứ hai, mô hình thiết lập mục tiêu dạy học SMART, bảo đảm các tiêu chí: cụ thể, đo lường được, có thể đạt được, mang tính thực tế và có giới hạn thời gian. Mô hình này giúp chuyển hóa chuẩn kiến thức kỹ năng môn học thành các chỉ báo hành vi tường minh.

Hệ thống khái niệm nền tảng được chuẩn hóa gồm: kiểm tra đánh giá, trắc nghiệm khách quan, ngân hàng câu hỏi trắc nghiệm định cỡ, độ khó của câu hỏi ($P$), độ phân cách ($D$) và chỉ số phân tích mồi nhử.

Phương pháp nghiên cứu

Nghiên cứu áp dụng quy trình khảo thí chuẩn hóa với các thông số phương pháp luận chặt chẽ:

  • Nguồn dữ liệu và cỡ mẫu: Mẫu khảo sát chuyên gia gồm các giảng viên giàu kinh nghiệm thuộc bộ môn Cơ khí máy; mẫu thực nghiệm sư phạm gồm 95 học sinh trung học chuyên nghiệp hệ chính quy tại Trường Trung học Kỹ thuật Thực hành. Phương pháp chọn mẫu chỉ tiêu thuận tiện được lựa chọn nhằm đảm bảo tính đại diện cho đối tượng người học trung cấp nghề cơ khí.
  • Phương pháp thu thập và phân tích: Tác giả phối hợp phương pháp phân tích tổng hợp tài liệu chuyên môn, phương pháp chuyên gia lấy ý kiến đánh giá ma trận đề và phương pháp thực nghiệm với 3 mã đề thi chuẩn hóa (Đề 01, Đề 02, Đề 03).
  • Lý do lựa chọn phương pháp phân tích: Nghiên cứu ứng dụng Lý thuyết trắc nghiệm cổ điển (Classical Test Theory) xử lý trên phần mềm Microsoft Excel. Phương pháp phân tích nhóm tương phản 27% điểm cao nhất ($C$) và 27% điểm thấp nhất ($T$) của Giáo sư Dương Thiệu Tống được sử dụng để xác định chỉ số $D = (C - T)/n$ và phân tích tính hiệu quả của các phương án mồi nhử. Đây là giải pháp tối ưu cho quy mô lớp học nghề, mang lại độ chính xác cao và thuận tiện triển khai trong thực tế.
  • Kế hoạch nghiên cứu: Toàn bộ tiến trình được thực hiện trong 8 tháng (từ tháng 8 năm 2012 đến tháng 3 năm 2013) qua 8 bước khép kín từ lập đề cương, thiết kế ma trận, biên soạn, thử nghiệm đến hoàn thiện ngân hàng lưu trữ.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

Nghiên cứu đã đạt được các kết quả định lượng cụ thể, đóng góp thiết thực cho công tác khảo thí chuyên ngành cơ khí:

Thứ nhất, xây dựng hoàn chỉnh ngân hàng gồm 358 câu hỏi trắc nghiệm khách quan phủ kín 6 chương của chương trình môn học Dung Sai Kỹ Thuật Đo (bao gồm: Khái niệm cơ bản, Hệ thống dung sai lắp ghép bề mặt trơn, Dung sai các mối ghép thông dụng, Chuỗi kích thước, Cơ sở đo lường kỹ thuật và Dụng cụ đo thông dụng). Hệ thống câu hỏi được cấu trúc theo 4 định dạng: trắc nghiệm 4 lựa chọn (chiếm trên 60%), đúng - sai, ghép hợp và điền khuyết.

Thứ hai, tổ chức thử nghiệm sư phạm và định cỡ thành công 104 câu hỏi trắc nghiệm thông qua 3 đề thi thực nghiệm trên 95 học sinh. Kết quả phân tích cho thấy độ khó trung bình của bộ đề thi dao động trong khoảng 50% đến 65%, tiệm cận sát với độ khó kỳ vọng lý tưởng (62.5% đối với trắc nghiệm 4 lựa chọn và 50% đối với câu điền khuyết/ghép hợp).

Thứ ba, về độ phân biệt ($D$), hơn 40% số câu hỏi đạt mức phân cách rất tốt ($D \ge 0.40$), khoảng 35% câu hỏi đạt mức khá tốt ($D$ từ 0.30 đến 0.39), chỉ có dưới 15% câu hỏi có chỉ số phân cách kém ($D < 0.20$) cần tiến hành điều chỉnh nội dung hoặc mồi nhử.

Thảo luận kết quả

Dữ liệu nghiên cứu được lượng hóa trực quan qua hệ thống bảng ma trận hai chiều (nội dung kiến thức đối sánh với các cấp độ nhận thức Bloom) và các biểu đồ phân bố tần số độ khó, độ phân cách. Biểu đồ phân bố độ khó phản ánh đường cong chuẩn dạng chuông, minh chứng đề thi có tính phân loại rõ rệt giữa các nhóm học lực giỏi, khá, trung bình và yếu.

Nguyên nhân dẫn đến một số câu hỏi có độ phân cách thấp hoặc mang giá trị âm chủ yếu xuất phát từ cấu trúc câu dẫn chứa từ ngữ gây hiểu lầm, hoặc các phương án mồi nhử chưa đủ sức hấp dẫn đối với nhóm học sinh yếu kém. Sau khi phân tích định tính từng phương án lựa chọn, tác giả đã tái cấu trúc các phương án gây nhiễu nhằm nâng cao chỉ số tin cậy.

So sánh với các công trình liên quan trong cùng lĩnh vực như nghiên cứu của Đỗ Văn Trường (2011) với 210 câu hỏi modul Thực hành trang bị điện hay Hoàng Thị Hằng (2010) với 205 câu hỏi môn Âu phục nam, ngân hàng 358 câu hỏi môn Dung sai kỹ thuật đo thể hiện quy mô dữ liệu lớn hơn, tính đa dạng về hình thức câu hỏi cao hơn và bám sát đặc thù tính toán kỹ thuật chính xác của ngành chế tạo máy.

Đề xuất và khuyến nghị

Nhằm phát huy tối đa giá trị thực tiễn của ngân hàng câu hỏi, nghiên cứu đưa ra 4 nhóm giải pháp trọng tâm:

  • Số hóa và tích hợp ngân hàng câu hỏi vào phần mềm thi trắc nghiệm: Ban Giám hiệu cùng Bộ môn Cơ khí máy cần phối hợp với bộ phận công nghệ thông tin để chuyển đổi toàn bộ 358 câu hỏi vào hệ thống quản lý thi trực tuyến trước quý 4 năm học, giúp rút ngắn 70% thời gian ra đề và chấm thi tự động.
  • Hiệu chỉnh định kỳ các câu hỏi có độ phân cách kém: Tổ chuyên môn Dung sai cần rà soát và viết lại phương án mồi nhử cho khoảng 15% số câu hỏi có chỉ số $D < 0.20$ trong vòng 6 tháng, đảm bảo 100% câu hỏi trong ngân hàng đạt độ phân cách từ 0.30 trở lên.
  • Mở rộng quy mô thử nghiệm định cỡ: Phòng Đào tạo cần tạo điều kiện triển khai thử nghiệm mở rộng ngân hàng câu hỏi trên ít nhất 200 học sinh, sinh viên các hệ cao đẳng nghề và liên thông đại học trong vòng 1 năm nhằm làm giàu thêm tham số thống kê độ khó cho từng câu hỏi.
  • Bồi dưỡng năng lực khảo thí cho đội ngũ giảng viên: Khoa Cơ khí tổ chức các khóa tập huấn chuyên sâu về kỹ thuật viết câu hỏi trắc nghiệm theo chuẩn Bloom và phương pháp thiết kế ma trận đề thi hai chiều cho 100% giáo viên giảng dạy lý thuyết cơ khí trước mỗi kỳ học mới.

Đối tượng nên tham khảo luận văn

Công trình luận văn là tài liệu tham khảo giá trị cho 4 nhóm đối tượng chính:

  • Giảng viên và giáo viên bộ môn Cơ khí: Trực tiếp khai thác ngân hàng 358 câu hỏi để biên soạn đề kiểm tra 15 phút, kiểm tra giữa kỳ và đề thi kết thúc học phần môn Dung sai kỹ thuật đo, tiết kiệm thời gian soạn thảo đề thi chuẩn.
  • Cán bộ quản lý đào tạo và phòng khảo thí: Ứng dụng quy trình 8 bước chuẩn hóa ngân hàng câu hỏi để triển khai xây dựng ngân hàng đề thi cho các môn học kỹ thuật chuyên ngành khác trong toàn trường.
  • Học viên cao học và nhà nghiên cứu giáo dục nghề nghiệp: Tham khảo phương pháp luận kết hợp giữa lý thuyết khảo thí cổ điển, công thức tính độ phân cách $D$ và phương pháp phân tích mồi nhử trên mẫu thực nghiệm sư phạm.
  • Học sinh, sinh viên ngành Cơ khí chế tạo máy: Sử dụng bộ câu hỏi làm tài liệu ôn tập, tự đánh giá mức độ nắm vững các kiến thức về chuỗi kích thước, dung sai lắp ghép và phương pháp sử dụng dụng cụ đo chính xác.

Câu hỏi thường gặp

Ngân hàng câu hỏi trắc nghiệm môn Dung Sai Kỹ Thuật Đo gồm bao nhiêu câu và bao quát những nội dung nào?
Ngân hàng câu hỏi gồm 358 câu được biên soạn hoàn chỉnh, bao quát toàn bộ 30 tiết học lý thuyết của 6 chương trọng tâm như dung sai lắp ghép bề mặt trơn, chuỗi kích thước, dung sai then - then hoa và kỹ thuật sử dụng thước cặp, panme, đồng hồ so.

Lý thuyết khảo thí nào được ứng dụng để đánh giá chất lượng câu hỏi trắc nghiệm?
Tác giả áp dụng Lý thuyết trắc nghiệm cổ điển để tính toán độ khó ($P$), độ phân cách ($D$) và thang nhận thức 6 cấp độ của Benjamin Bloom kết hợp mô hình SMART nhằm lượng hóa chuẩn đầu ra và ma trận phân bố câu hỏi.

Chỉ số độ phân cách D được tính toán dựa trên cỡ mẫu thực nghiệm như thế nào?
Nghiên cứu phân tích bài làm của 95 học sinh thực nghiệm, tách lấy 27% bài thi điểm cao nhất ($C$) và 27% bài thi điểm thấp nhất ($T$), sau đó tính $D = (C - T)/n$. Các câu hỏi đạt $D \ge 0.30$ được xếp loại chất lượng tốt.

Tại sao cần thực hiện bước phân tích mồi nhử trong câu hỏi trắc nghiệm nhiều lựa chọn?
Phân tích mồi nhử giúp xác định xem các phương án sai có thu hút được học sinh yếu hay không. Một câu hỏi tốt phải đảm bảo học sinh nhóm giỏi chọn phương án đúng nhiều hơn nhóm yếu và phương án sai phải có sức hấp dẫn đồng đều.

Quy trình xây dựng ngân hàng câu hỏi trắc nghiệm của luận văn gồm những bước nào?
Quy trình gồm 8 bước chuẩn hóa: phân tích nội dung, xác định mục tiêu dạy học, lập ma trận trắc nghiệm, biên soạn câu hỏi, lấy ý kiến chuyên gia, tổ chức thi thử nghiệm, phân tích xử lý thống kê và phân loại lưu trữ vào ngân hàng.

Kết luận

  • Luận văn đã hệ thống hóa toàn diện cơ sở lý luận về khảo thí giáo dục và quy trình 8 bước chuẩn hóa xây dựng ngân hàng câu hỏi trắc nghiệm khách quan cho môn học kỹ thuật.
  • Biên soạn thành công 358 câu hỏi trắc nghiệm cho môn Dung Sai Kỹ Thuật Đo (thời lượng 30 tiết), phân bổ hợp lý theo 4 định dạng câu hỏi phổ biến.
  • Triển khai thực nghiệm sư phạm trên 95 học sinh trung học chuyên nghiệp, chuẩn hóa và định cỡ 104 câu hỏi với các chỉ số độ khó ($P$ từ 50% đến 65%) và độ phân cách ($D \ge 0.30$) đạt chuẩn khoa học.
  • Khẳng định tính khả thi của việc ứng dụng trắc nghiệm khách quan trong đánh giá kết quả học tập khối ngành kỹ thuật, góp phần nâng cao tính công bằng và chính xác.
  • Đề xuất lộ trình mở rộng quy mô định cỡ cho 200 người học và số hóa toàn bộ hệ thống câu hỏi lên phần mềm khảo thí trong vòng 6 đến 12 tháng tới.

Công trình là nguồn tư liệu khoa học hữu ích cho các cơ sở giáo dục nghề nghiệp trong quá trình đổi mới phương pháp kiểm tra đánh giá. Quý thầy cô và nhà nghiên cứu có thể ứng dụng ngay mô hình này để nâng cao chất lượng đào tạo kỹ thuật cơ khí.