Tổng quan nghiên cứu

Trong bối cảnh đổi mới căn bản giáo dục đại học, công tác kiểm tra và đánh giá kết quả học tập đóng vai trò then chốt trong việc kiểm soát chất lượng đào tạo nguồn nhân lực y tế. Trước năm 2012, phương pháp đánh giá tại Khoa Điều dưỡng Kỹ thuật Y học thuộc Trường Đại học Y Dược Thành phố Hồ Chí Minh chủ yếu dựa vào hình thức tự luận và vấn đáp. Thực trạng này bộc lộ nhiều hạn chế như: phạm vi bao phủ kiến thức hẹp, độ tin cậy phụ thuộc vào tính chủ quan của cán bộ chấm thi và tiêu tốn nhiều thời gian tổ chức.

Môn học Dân số - Kế hoạch hóa gia đình là học phần lý thuyết chuyên ngành cốt lõi, cung cấp kiến thức nền tảng về chăm sóc sức khỏe sinh sản cho sinh viên Cử nhân Hộ sinh và học sinh Hộ sinh trung học. Nhằm khách quan hóa quá trình lượng giá, đề tài tập trung xây dựng ngân hàng câu hỏi trắc nghiệm khách quan chuẩn hóa, phục vụ trực tiếp cho công tác đào tạo tại đơn vị.

Mục tiêu cụ thể của nghiên cứu bao gồm: hệ thống hóa cơ sở lý luận về trắc nghiệm khách quan; khảo sát thực trạng kiểm tra đánh giá trên 50 giảng viên và 100 sinh viên, học sinh tại 6 bộ môn; biên soạn bộ công cụ lượng giá kiến thức; thử nghiệm thực tế 240 câu hỏi trên đối tượng người học để phân tích các chỉ số đo lường. Nghiên cứu được triển khai từ tháng 6 năm 2012 đến tháng 2 năm 2013 tại Thành phố Hồ Chí Minh. Kết quả nghiên cứu cung cấp 207 câu hỏi đạt chuẩn định lượng, giúp gia tăng 100% tính khách quan trong chấm thi và rút ngắn đáng kể thời gian đánh giá kết quả học tập của người học.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Nghiên cứu vận dụng lý thuyết đo lường và đánh giá giáo dục hiện đại, kết hợp lý thuyết khảo thí cổ điển cùng hệ thống phân loại mục tiêu nhận thức của Benjamin S. Bloom. Thang đo nhận thức của Bloom phân định 6 cấp độ tư duy từ thấp đến cao: Nhận biết, Thông hiểu, Vận dụng, Phân tích, Tổng hợp và Đánh giá. Trong đó, 3 cấp độ đầu được tập trung khai thác để thiết kế hệ thống câu hỏi phù hợp với chuẩn đầu ra môn học.

Khung lý thuyết định hình 4 khái niệm trọng tâm:

  • Kiểm tra: Hoạt động thu thập thông tin và dữ liệu làm cơ sở lượng giá.
  • Đánh giá: Quá trình phân tích chứng cứ để đưa ra nhận định về mức độ đạt mục tiêu học tập.
  • Độ tin cậy: Mức độ ổn định, nhất quán và chính xác của điểm số qua các lần đo độc lập.
  • Độ giá trị: Mức độ công cụ đo lường phản ánh chính xác nội dung và mục tiêu cần kiểm tra.

Công trình khai thác 4 hình thức trắc nghiệm khách quan: câu hỏi nhiều lựa chọn (chọn 1 trong 4 hoặc 5 phương án), câu hỏi điền khuyết, câu hỏi đúng - sai và câu hỏi rà soát khái quát/ghép hợp.

Phương pháp nghiên cứu

Nghiên cứu phối hợp chặt chẽ giữa phương pháp nghiên cứu lý luận, điều tra thực tiễn và toán thống kê:

  • Nguồn dữ liệu sơ cấp: Khảo sát ý kiến từ 50 giảng viên giảng dạy lý thuyết chuyên ngành và 100 học viên (gồm sinh viên năm thứ 4 lớp Cử nhân Hộ sinh khóa 2009 và học sinh năm thứ 2 lớp Hộ sinh trung học khóa 2011) tại Khoa Điều dưỡng Kỹ thuật Y học. Mẫu khảo sát được lựa chọn theo phương pháp chọn mẫu thuận tiện có chủ đích, đại diện đầy đủ cho 6 bộ môn chuyên ngành.
  • Phương pháp thử nghiệm và phân tích câu hỏi: Biên soạn ban đầu 337 câu hỏi, gửi lấy ý kiến chuyên gia là các giảng viên giàu kinh nghiệm để hiệu chỉnh nội dung. Sau đó, tiến hành thử nghiệm 240 câu hỏi trên người học thông qua 4 mã đề thi độc lập (đề A, B, C, D).
  • Phương pháp phân tích dữ liệu: Sử dụng kỹ thuật phân tích trắc nghiệm cổ điển. Toàn bộ bài làm được xếp hạng điểm số từ cao xuống thấp để phân chia thành hai nhóm đối chứng: 27% nhóm có điểm cao nhất và 27% nhóm có điểm thấp nhất. Dữ liệu được xử lý bằng các công thức toán thống kê để xác định độ khó (p), độ phân cách (D) và hiệu quả của các phương án nhiễu (mồi nhử). Tiến độ nghiên cứu diễn ra theo 7 giai đoạn liên tục từ tháng 6 năm 2012 đến tháng 2 năm 2013.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

Quá trình nghiên cứu và thực nghiệm định lượng đã ghi nhận những kết quả nổi bật sau:

Thứ nhất, kết quả biên soạn và thẩm định chuyên gia: Ban đầu, tác giả xây dựng 337 câu hỏi trắc nghiệm bao phủ toàn bộ chương trình môn học. Sau vòng tham vấn ý kiến chuyên môn của 50 giảng viên, có 332 câu hỏi đạt yêu cầu về nội dung khoa học và hình thức sư phạm (đạt tỷ lệ 98,5%), loại bỏ 5 câu trùng lặp hoặc diễn đạt chưa rõ nghĩa.

Thứ hai, kết quả thử nghiệm thực tế và phân tích trắc nghiệm: Tiến hành thử nghiệm 240 câu hỏi trên đối tượng sinh viên đại học và học sinh trung học ngành Hộ sinh. Phân tích thống kê cho thấy:

  • 207 câu hỏi đạt chuẩn toàn diện về độ khó và độ phân cách, chiếm tỷ lệ 86,25% tổng số câu thử nghiệm. Hệ thống 207 câu này được phân loại và lưu trữ chính thức vào ngân hàng câu hỏi phục vụ kiểm tra đánh giá định kỳ và kết thúc học phần.
  • 33 câu hỏi còn lại (chiếm tỷ lệ 13,75%) chưa đạt yêu cầu do chỉ số độ phân cách thấp hoặc mồi nhử chưa đủ sức hấp dẫn, được đưa vào danh mục cần điều chỉnh, chỉnh sửa câu chữ trước khi tái thử nghiệm.

Thứ ba, phân bố chỉ số kỹ thuật của các câu hỏi đạt chuẩn:

  • Về độ khó (p): Đa số câu hỏi đạt chuẩn tập trung ở mức độ khó vừa phải, dao động trong khoảng tối ưu từ 0,25 đến 0,75, phù hợp với tỷ lệ may rủi kỳ vọng của từng định dạng câu hỏi (62,5% đối với câu nhiều lựa chọn 4 phương án).
  • Về độ phân cách (D): Phần lớn các câu hỏi được lựa chọn có chỉ số D từ 0,30 trở lên, trong đó số lượng câu đạt mức D lớn hơn hoặc bằng 0,40 (mức phân cách rất tốt) chiếm tỷ trọng cao, giúp phân loại rõ rệt giữa nhóm học lực khá giỏi và nhóm trung bình yếu.

Thảo luận kết quả

Khảo sát thực trạng cho thấy hơn 80% sinh viên và giảng viên ủng hộ việc chuyển đổi từ hình thức thi tự luận sang trắc nghiệm khách quan trong các môn lý thuyết y khoa. Hình thức tự luận trước đây bộc lộ nhược điểm lớn khi chỉ kiểm tra được khoảng 3 đến 5 câu hỏi trong một đề thi, dễ dẫn đến hiện tượng học tủ, học lệch. Ngược lại, một bài trắc nghiệm khách quan 60 câu có khả năng bao quát trên 90% khối lượng kiến thức của toàn bộ đề cương chi tiết.

Dữ liệu phân tích câu trắc nghiệm được mô hình hóa qua các bảng phân bố tần số và biểu đồ phân phối chuẩn về độ khó và độ phân cách. Biểu đồ cho thấy đường cong phân bố điểm số có dạng hình chuông chuẩn, phản ánh tính khách quan của công cụ đo lường. Việc áp dụng kỹ thuật phân tích mồi nhử dựa trên sai sót thực tế của người học đã giúp nâng cao chất lượng câu hỏi nhiều lựa chọn, đặc biệt là các câu hỏi dạng tình huống lâm sàng (case-study) vốn đòi hỏi năng lực ra quyết định chuyên môn cao của người hộ sinh.

So sánh với các nghiên cứu đo lường giáo dục trong nước, việc áp dụng phân vị 27% nhóm điểm cao và 27% nhóm điểm thấp khẳng định tính chuẩn mực quốc tế của quy trình khảo thí. Kết quả 86,25% câu hỏi đạt chuẩn sau lần thử nghiệm đầu tiên chứng minh quy trình biên soạn dựa trên ma trận mục tiêu hai chiều là hoàn toàn chính xác và khoa học.

Đề xuất và khuyến nghị

Dựa trên kết quả nghiên cứu thực nghiệm, tác giả đề xuất 4 nhóm giải pháp chiến lược nhằm chuẩn hóa công tác kiểm tra đánh giá:

  1. Chuẩn hóa và mở rộng quy mô ngân hàng câu hỏi: Phê duyệt và đưa 207 câu hỏi đạt chuẩn vào hệ thống phần mềm quản lý khảo thí của nhà trường; đồng thời tiếp tục chỉnh sửa 33 câu hỏi chưa đạt và biên soạn bổ sung để nâng quy mô ngân hàng đề thi lên tối thiểu 500 câu trong vòng 12 tháng tới, đảm bảo đủ dung lượng tạo lập các đề thi song song tương đương.
  2. Tổ chức bồi dưỡng kỹ thuật biên soạn đề thi cho giảng viên: Khoa Điều dưỡng Kỹ thuật Y học phối hợp cùng Phòng Khảo thí tổ chức định kỳ các khóa tập huấn chuyên sâu trong thời gian 6 tháng cho 100% cán bộ giảng dạy về kỹ thuật thiết kế câu hỏi trắc nghiệm bậc cao (phân tích, giải quyết tình huống) và phương pháp xác định ma trận đề thi chuẩn hóa.
  3. Ứng dụng công nghệ thông tin trong tổ chức thi và chấm thi tự động: Đầu tư hệ thống phần mềm trộn đề thi ngẫu nhiên và chấm thi trắc nghiệm bằng máy quét quang học (OMR) hoặc tổ chức thi trực tiếp trên máy vi tính. Giải pháp này giúp cắt giảm 90% thời gian chấm bài thi, loại trừ hoàn toàn sai sót cơ học và đảm bảo tính công bằng tuyệt đối cho người học.
  4. Thiết lập quy trình đánh giá định kỳ chất lượng câu hỏi: Ban chủ nhiệm Bộ môn Hộ sinh định kỳ sau mỗi học kỳ cần thực hiện phân tích lại các chỉ số độ khó (p) và độ phân cách (D) của từng câu hỏi trên dữ liệu bài làm thực tế của sinh viên, nhằm kịp thời loại bỏ hoặc hiệu chỉnh các câu hỏi không còn phù hợp với sự phát triển của kiến thức y học hiện đại.

Đối tượng nên tham khảo luận văn

Công trình nghiên cứu mang giá trị thực tiễn và phương pháp luận cao, là tài liệu tham khảo hữu ích cho 4 nhóm đối tượng chính:

  1. Giảng viên các trường Đại học và Cao đẳng Y Dược: Cung cấp cẩm nang chi tiết về quy trình 7 bước xây dựng câu hỏi trắc nghiệm chuẩn hóa, phương pháp viết phương án nhiễu từ lỗi sai thực tế của học viên và cách xây dựng câu hỏi tình huống chuyên ngành Hộ sinh - Điều dưỡng.
  2. Cán bộ quản lý đào tạo và chuyên viên khảo thí: Tham khảo mô hình quản lý ngân hàng đề thi, phương pháp kiểm soát độ tin cậy và độ giá trị của đề thi tốt nghiệp, thi kết thúc học phần theo chuẩn kiểm định chất lượng giáo dục nghề nghiệp.
  3. Sinh viên và học viên cao học chuyên ngành Giáo dục học, Đo lường và Đánh giá: Tìm thấy nguồn tài liệu thực chứng phong phú về ứng dụng lý thuyết khảo thí cổ điển, công thức tính toán chỉ số trắc nghiệm và phương pháp xử lý số liệu toán thống kê trong nghiên cứu khoa học giáo dục.
  4. Sinh viên chuyên ngành Hộ sinh và Điều dưỡng: Sử dụng hệ thống câu hỏi trắc nghiệm phong phú để tự học, tự ôn tập, củng cố kiến thức môn Dân số - Kế hoạch hóa gia đình và làm quen với các dạng đề thi đánh giá năng lực nghề nghiệp.

Câu hỏi thường gặp

Tại sao môn Dân số - Kế hoạch hóa gia đình cần ưu tiên kiểm tra bằng trắc nghiệm khách quan?

Môn học bao gồm khối lượng kiến thức rộng lớn về dịch tễ học, chính sách dân số và các kỹ thuật tránh thai. Trắc nghiệm khách quan giúp kiểm tra bao quát trên 90% nội dung chương trình trong một bài thi 60 phút, khắc phục hoàn toàn tình trạng học tủ và đánh giá chính xác mức độ ghi nhớ, thông hiểu các hướng dẫn lâm sàng của 100% người học.

Quy mô mẫu khảo sát thực trạng trong nghiên cứu được xác định như thế nào?

Nghiên cứu tiến hành khảo sát thực trạng trên cỡ mẫu gồm 50 giảng viên trực tiếp giảng dạy lý thuyết chuyên ngành và 100 học viên thuộc 6 bộ môn của Khoa Điều dưỡng Kỹ thuật Y học. Cỡ mẫu này đảm bảo tính đại diện cao cho cả 2 hệ đào tạo: Cử nhân Hộ sinh chính quy và Hộ sinh trung học.

Tiêu chuẩn kỹ thuật nào được sử dụng để thẩm định độ phân cách của câu hỏi?

Nghiên cứu áp dụng thang đánh giá chỉ số phân cách D dựa trên phương pháp phân tích 27% nhóm điểm cao và 27% nhóm điểm thấp. Câu hỏi có D từ 0,40 trở lên được xếp loại rất tốt; từ 0,30 đến 0,39 là khá tốt; từ 0,20 đến 0,29 là tạm được; và dưới 0,20 là kém, bắt buộc phải loại bỏ hoặc chỉnh sửa lại.

Kết quả thử nghiệm 240 câu hỏi trắc nghiệm đạt tỷ lệ chuẩn hóa bao nhiêu?

Sau quá trình thử nghiệm thực tế trên 2 lớp học viên và phân tích định lượng, nghiên cứu đã chọn lọc được 207 câu hỏi đạt chuẩn toàn diện về nội dung và chỉ số thống kê, đạt tỷ lệ 86,25%. 33 câu hỏi còn lại (13,75%) được phân loại cụ thể để tiếp tục điều chỉnh kỹ thuật viết mồi nhử.

Luận văn đã vận dụng thang nhận thức nào để thiết kế ngân hàng câu hỏi?

Nghiên cứu sử dụng khung phân loại 6 cấp độ mục tiêu nhận thức của Benjamin S. Bloom. Các câu hỏi được thiết kế tập trung vào 3 cấp độ nền tảng trong đào tạo thực hành y tế: Nhận biết (mô tả, kể tên dấu hiệu), Thông hiểu (giải thích cơ chế, chỉ định biện pháp) và Vận dụng (xử trí tình huống tư vấn kế hoạch hóa gia đình thực tế).

Kết luận

  • Luận văn đã hệ thống hóa vững chắc cơ sở lý luận và thực tiễn về phương pháp trắc nghiệm khách quan trong đánh giá kết quả học tập khối ngành khoa học sức khỏe.
  • Khảo sát thực trạng trên 50 giảng viên và 100 học viên khẳng định tính cấp thiết của việc chuyển đổi phương thức đánh giá sang trắc nghiệm khách quan tại Trường Đại học Y Dược Thành phố Hồ Chí Minh.
  • Biên soạn thành công 337 câu hỏi và nghiệm thu được 207 câu hỏi đạt chuẩn kỹ thuật sau khi thử nghiệm thực tế 240 câu trên 2 đối tượng đào tạo cử nhân và trung cấp.
  • Đề xuất quy trình 7 bước chuẩn hóa ngân hàng câu hỏi cùng các giải pháp ứng dụng công nghệ thông tin nhằm nâng cao năng lực khảo thí của đội ngũ giảng viên.
  • Toàn bộ kết quả nghiên cứu đã được chuyển giao, ứng dụng trực tiếp vào công tác giảng dạy và kiểm tra đánh giá môn Dân số - Kế hoạch hóa gia đình từ năm học 2012 - 2013.

Công trình là tài liệu tham khảo giá trị cho các cơ sở đào tạo y khoa đang trên lộ trình hiện đại hóa phương pháp kiểm tra đánh giá. Quý thầy cô, nhà nghiên cứu và học viên quan tâm có thể khai thác chi tiết cấu trúc bộ câu hỏi và phương pháp phân tích trắc nghiệm để áp dụng cho các học phần chuyên ngành tương đương.