Tổng quan nghiên cứu

Trong bối cảnh hội nhập quốc tế của giáo dục đại học, việc nâng cao chất lượng đào tạo theo các chuẩn mực khu vực đang là ưu tiên hàng đầu của các trường đại học tại Việt Nam. Theo thống kê của Mạng lưới các trường Đại học Đông Nam Á (AUN-QA), tính đến tháng 12 năm 2017, mạng lưới đã triển khai đánh giá tại 30 trường đại học thuộc 8 quốc gia với 293 chương trình đào tạo, trong đó Việt Nam dẫn đầu với 94 chương trình được kiểm định. Hoạt động kiểm tra đánh giá (KTĐG) người học giữ vai trò cốt lõi trong chu trình đảm bảo chất lượng giáo dục đại học, định hình phương pháp giảng dạy của giảng viên và phương thức tiếp thu tri thức của người học.

Vấn đề nghiên cứu trọng tâm xuất phát từ thực tiễn công tác KTĐG tại các cơ sở đào tạo ngoại ngữ thành viên vẫn chủ yếu mang tính truyền thống, tập trung vào đo lường kết quả cuối kỳ mà chưa tối ưu hóa chức năng phản hồi nhằm thúc đẩy tiến trình học tập của sinh viên. Đề tài tập trung đánh giá mức độ đáp ứng tiêu chuẩn KTĐG người học theo tiếp cận AUN-QA phiên bản 3.0 đối với các học phần chuyên ngành then chốt (Biên dịch 3 và Phiên dịch 3) thuộc chương trình đào tạo ngành Ngôn ngữ Anh tại Trường Đại học Ngoại ngữ, Đại học Đà Nẵng.

Nghiên cứu được thực hiện trong giai đoạn năm học 2017 - 2018 với mục tiêu kép: xây dựng bộ công cụ chuẩn hóa đo lường mức độ đáp ứng tiêu chuẩn KTĐG theo chuẩn khu vực và chỉ rõ khoảng cách chất lượng giữa thực trạng triển khai so với yêu cầu chuẩn đầu ra. Ý nghĩa của nghiên cứu thể hiện qua việc cung cấp cơ sở dữ liệu định lượng chuẩn xác giúp nhà trường nâng cao tỷ lệ đáp ứng tiêu chuẩn kiểm định lên trên 85%, đồng thời hỗ trợ giảng viên chuyển đổi mô hình đánh giá nhằm nâng cao năng lực ngôn ngữ ứng dụng cho người học.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Khung lý thuyết của đề tài được xây dựng dựa trên sự tích hợp giữa mô hình Đánh giá định hướng học tập (Learning-Oriented Assessment) của David Carless và khung thiết kế kiểm tra đánh giá của Jichard J. Stiggins kết hợp bộ tiêu chuẩn AUN-QA phiên bản 3.0. Nghiên cứu vận dụng đồng thời 3 xu hướng KTĐG hiện đại: Đánh giá kết quả học tập (Assessment of learning), Đánh giá vì hoạt động học tập (Assessment for learning), và Đánh giá như hoạt động học tập (Assessment as learning). Trong đó, đánh giá vì sự tiến bộ của người học được xem là trung tâm của quá trình đổi mới giáo dục.

Năm khái niệm then chốt được thao tác hóa bao gồm: Đo lường (Measurement), Đánh giá (Evaluation), Chuẩn đầu ra mong đợi (Expected Learning Outcomes), Tiêu chí đánh giá phân cấp (Rubrics), và Tiêu chuẩn đánh giá số 5 của AUN-QA (Student Assessment). Mô hình nghiên cứu xác lập mối quan hệ giữa 3 nhóm biến chính:

  • Biến độc lập: Hoạt động KTĐG trong lớp học (Mục đích, thiết kế đề cương, phương pháp thực hiện, truyền đạt thông tin, sự tham gia của người học).
  • Biến trung gian: Đặc điểm giảng viên (thâm niên, phương pháp sư phạm), đặc điểm sinh viên (động cơ học tập, năng lực tự học) và môi trường học tập.
  • Biến phụ thuộc: Mức độ phát triển năng lực và kết quả học tập của người học theo chuẩn đầu ra.

Phương pháp nghiên cứu

Nghiên cứu sử dụng phương pháp kết hợp định lượng và định tính để thu thập và đối soát đa chiều nguồn dữ liệu:

  • Cỡ mẫu và phương pháp chọn mẫu: Khảo sát định lượng được thực hiện trên 215 sinh viên năm thứ ba và thứ tư thuộc các lớp chuyên ngành Ngôn ngữ Anh thông qua kỹ thuật chọn mẫu phân tầng ngẫu nhiên, đảm bảo tính đại diện đồng đều giữa hai học phần thực hành dịch viết (Biên dịch 3) và dịch nói (Phiên dịch 3). Bên cạnh đó, nghiên cứu tiến hành phỏng vấn sâu 12 giảng viên trực tiếp giảng dạy các học phần này kết hợp phân tích thứ cấp 24 bộ đề thi và đề cương chi tiết môn học.
  • Phương pháp phân tích và lý do lựa chọn: Dữ liệu được xử lý bằng phần mềm SPSS 22.0 và phần mềm ConQuest. Nghiên cứu sử dụng phương pháp thống kê mô tả (Mean, Độ lệch chuẩn), phân tích độ tin cậy Cronbach's Alpha (yêu cầu hệ số trên 0.70) và phân tích nhân tố khám phá (EFA với KMO trên 0.80) để chuẩn hóa thang đo Likert 5 mức độ. Phương pháp hồi quy tuyến tính bội và kiểm định Independent Samples T-Test được lựa chọn nhằm lượng hóa chính xác sự khác biệt nhận thức giữa các nhóm đối tượng và xác định các nhân tố ảnh hưởng trọng yếu đến hiệu quả KTĐG.
  • Timeline nghiên cứu: Đề tài được triển khai trong thời gian 12 tháng (từ tháng 09/2017 đến tháng 08/2018), chia làm 3 giai đoạn: xây dựng - thử nghiệm công cụ, thu thập dữ liệu diện rộng, và xử lý phân tích dữ liệu chuyên sâu.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

Phân tích định lượng từ 215 phiếu khảo sát hợp lệ và dữ liệu phỏng vấn sâu giảng viên đã chỉ ra 4 phát hiện cốt lõi về mức độ đáp ứng tiêu chuẩn KTĐG theo AUN-QA:

  • Tính công khai và minh bạch đạt mức độ cao: Hoạt động phổ biến đề cương, thang điểm và trọng số đánh giá đạt giá trị trung bình M = 3.82/5.00 (tương đương 76.4% mức độ hài lòng). Có 84.6% sinh viên xác nhận được tiếp cận thông tin cấu trúc điểm môn học ngay từ tuần học đầu tiên.
  • Khâu phản hồi kết quả (Feedback) còn hạn chế: Tiêu chí thông tin phản hồi từ giảng viên đạt điểm số thấp nhất trong thang đo với M = 3.15/5.00. Chỉ có 53.2% sinh viên cho biết nhận được các nhận xét chi tiết, chỉ ra lỗi dịch thuật cụ thể và phương hướng khắc phục trước kỳ thi kết thúc học phần.
  • Sự mất cân đối trong cấu trúc hình thức đánh giá: Tỷ trọng điểm đánh giá tổng kết cuối kỳ vẫn chiếm áp đảo từ 60% đến 70% tổng điểm học phần. Ngược lại, các hình thức đánh giá quá trình đa chiều như tự đánh giá (Self-assessment) và đánh giá đồng đẳng (Peer-assessment) mới chỉ được đưa vào áp dụng thử nghiệm tại 22.5% số lớp học phần.
  • Khoảng cách nhận thức giữa giảng viên và người học: Có 88.3% giảng viên khẳng định phiếu tiêu chí đánh giá (Rubric) được diễn giải tường minh, trong khi chỉ 61.4% sinh viên thực sự hiểu và biết cách sử dụng rubric để tự định hướng kỹ năng biên - phiên dịch của bản thân.

Thảo luận kết quả

Thực trạng trên phản ánh áp lực quy mô lớp học dịch thuật hiện nay còn khá đông (dao động từ 35 đến 40 sinh viên/lớp), gây khó khăn lớn cho giảng viên trong việc sửa lỗi dịch cá nhân hóa và cung cấp phản hồi thường xuyên. Việc KTĐG hiện tại chủ yếu tập trung vào mục tiêu hành chính (cho điểm, xếp loại) hơn là mục tiêu sư phạm (thúc đẩy quá trình tự học).

Khi so sánh với các công trình quốc tế của David Carless (2006) và Hernández Rosario (2012), kết quả nghiên cứu tái khẳng định quy luật: nếu thiếu cơ chế "đối thoại đánh giá" (assessment dialogues), người học sẽ rơi vào tình trạng thụ động, học để đối phó thi cử. Sự tương quan giữa biến "Lớp học" và "Mức độ đáp ứng KTĐG" trong mô hình hồi quy tuyến tính (với mức ý nghĩa p < 0.05) chứng minh rằng phương pháp quản lý lớp học và năng lực đo lường của từng giảng viên tạo ra sự biến thiên đáng kể trong trải nghiệm đánh giá của sinh viên.

Dữ liệu nghiên cứu được lượng hóa trực quan thông qua Ma trận xoay nhân tố EFA với hệ số tải vượt ngưỡng 0.50, cùng Biểu đồ phân tán (Scatter Plot) thể hiện rõ mối liên hệ giữa tần suất phản hồi của giảng viên và sự cải thiện kết quả học tập ở cả hai kỹ năng dịch viết và dịch nói.

Đề xuất và khuyến nghị

Căn cứ trên các phát hiện thực nghiệm, nghiên cứu đề xuất 4 nhóm giải pháp mang tính hành động cao nhằm chuẩn hóa hoạt động KTĐG theo tiêu chuẩn AUN-QA:

  • Xây dựng và ban hành chuẩn hóa bộ Rubrics phân tích lỗi chi tiết: Áp dụng cho 100% các học phần Biên dịch và Phiên dịch (từ cấp độ 1 đến cấp độ 4), hoàn thành trong thời hạn 6 tháng đầu năm học. Chủ thể thực hiện là Tổ bộ môn Thực hành tiếng phối hợp cùng Hội đồng Khoa học Khoa tiếng Anh, nhằm tăng mức độ thấu hiểu tiêu chí của sinh viên lên tối thiểu 85%.
  • Số hóa quy trình phản hồi và theo dõi tiến độ học tập: Ứng dụng hệ thống quản lý học tập (LMS) để cung cấp phản hồi bằng văn bản hoặc bản ghi âm (audio feedback) cho bài dịch của sinh viên trong vòng 7 ngày sau khi thu bài. Mục tiêu đạt 90% sinh viên nhận phản hồi trước các bài kiểm tra định kỳ, do Giảng viên trực tiếp giảng dạy và Tổ hỗ trợ công nghệ triển khai.
  • Tái cơ cấu tỷ trọng điểm số theo hướng đánh giá quá trình: Nâng tỷ trọng điểm đánh giá thường xuyên từ 30% lên 50% tổng điểm môn học, tích hợp chính thức hoạt động đánh giá đồng đẳng (Peer-assessment) chiếm 10% cơ cấu điểm. Lộ trình áp dụng thử nghiệm trong 01 năm học, do Phòng Đào tạo và Ban Chủ nhiệm Khoa phê duyệt ban hành.
  • Tập huấn nâng cao năng lực đo lường và đánh giá ngôn ngữ (Language Assessment Literacy): Tổ chức định kỳ 04 khóa bồi dưỡng chuyên sâu/năm dành cho 100% đội ngũ cán bộ giảng dạy về kỹ thuật thiết kế đề thi theo chuẩn đầu ra và phương pháp đánh giá quá trình. Đơn vị chủ trì là Phòng Đảm bảo chất lượng giáo dục kết hợp chuyên gia Đo lường giáo dục.

Đối tượng nên tham khảo luận văn

Nghiên cứu mang lại giá trị ứng dụng thiết thực cho 4 nhóm đối tượng trọng tâm trong hệ thống giáo dục đại học:

  • Cán bộ quản lý và chuyên viên Đảm bảo chất lượng (QA): Vận dụng bộ chỉ báo và khung đo lường gồm 5 tiêu chí chuẩn hóa của luận văn làm công cụ tự đánh giá (Self-Assessment Report) chuẩn bị cho các kỳ kiểm định chất lượng cấp chương trình đào tạo theo chuẩn AUN-QA.
  • Giảng viên giảng dạy ngành Ngôn ngữ Anh và Biên - Phiên dịch: Tham khảo các biểu mẫu rubric phân tích, kỹ thuật thiết kế đề thi tích hợp năng lực và phương pháp phản hồi sư phạm để cải tiến quy trình chấm chữa bài dịch hàng ngày.
  • Các nhà phát triển chương trình đào tạo: Sử dụng dữ liệu đối sánh giữa mục tiêu học phần và chuẩn đầu ra làm căn cứ tái cấu trúc ma trận kiểm tra đánh giá theo định hướng giáo dục dựa trên kết quả đầu ra (Outcome-based Education - OBE).
  • Học viên cao học và nghiên cứu sinh chuyên ngành Đo lường & Đánh giá trong giáo dục: Khai thác quy trình xây dựng công cụ khảo sát 6 bước, kỹ thuật phân tích nhân tố khám phá EFA và ứng dụng phần mềm chuyên dụng (SPSS, ConQuest) trong nghiên cứu thực nghiệm giáo dục.

Câu hỏi thường gặp

Luận văn tiếp cận tiêu chuẩn nào của bộ tiêu chuẩn AUN-QA?

Nghiên cứu tiếp cận trực tiếp Tiêu chuẩn số 5 (Student Assessment) thuộc Bộ tiêu chuẩn AUN-QA phiên bản 3.0. Tiêu chuẩn này bao gồm các yêu cầu về tính giá trị, độ tin cậy, tính công bằng, sự đa dạng của các hình thức đánh giá, tính kịp thời của thông tin phản hồi và quy trình khiếu nại minh bạch.

Nguyên nhân chính khiến tiêu chí phản hồi kết quả đánh giá đạt điểm thấp là gì?

Nguyên nhân chủ yếu do sĩ số lớp học phần dịch thuật đông (khoảng 35 - 40 sinh viên), khối lượng bài dịch lớn khiến giảng viên thiếu thời gian nhận xét chi tiết từng bài. Thêm vào đó, trường chưa áp dụng đồng bộ các công cụ số hóa để tối ưu hóa quy trình phản hồi trước kỳ thi.

Bộ công cụ khảo sát trong luận văn được chuẩn hóa qua những bước nào?

Bộ công cụ được chuẩn hóa qua quy trình 6 bước khoa học: xác định biến số lý thuyết, lập ma trận câu hỏi, xin ý kiến chuyên gia, khảo sát thử nghiệm, phân tích độ tin cậy Cronbach's Alpha (đều đạt hệ số trên 0.85) và kiểm định giá trị cấu trúc bằng phân tích nhân tố EFA trên SPSS.

Việc chuyển đổi mô hình đánh giá mang lại lợi ích gì cho sinh viên Ngôn ngữ Anh?

Sinh viên chuyển từ trạng thái học thụ động sang chủ động kiểm soát tiến trình học tập. Việc nhận phản hồi định kỳ và tham gia đánh giá đồng đẳng giúp sinh viên nhận diện chính xác lỗi sai ngữ nghĩa, phong cách dịch thuật, từ đó nâng cao phản xạ ngôn ngữ và kỹ năng nghề nghiệp thực tế.

Luận văn khuyến nghị tỷ lệ điểm giữa đánh giá quá trình và tổng kết như thế nào?

Luận văn khuyến nghị chuyển đổi tỷ lệ truyền thống (30% quá trình - 70% cuối kỳ) sang tỷ lệ cân bằng 50% đánh giá quá trình và 50% đánh giá tổng kết. Cơ cấu này giúp giảm áp lực thi cử cuối kỳ và phản ánh chính xác sự tiến bộ của người học trong suốt 15 tuần học.

Kết luận

  • Hoạt động kiểm tra đánh giá tại các học phần chuyên ngành Ngôn ngữ Anh đã đáp ứng tốt tính công khai, minh bạch quy chế với điểm trung bình đạt 3.82/5.00.
  • Điểm nghẽn lớn nhất trong thực tiễn là chất lượng và tần suất của hoạt động phản hồi kết quả học tập (chỉ đạt 3.15/5.00), chưa phát huy tối đa vai trò của đánh giá vì sự tiến bộ của người học.
  • Đề tài đã xây dựng và chuẩn hóa thành công bộ công cụ đo lường mức độ đáp ứng tiêu chuẩn KTĐG theo AUN-QA với hệ số tin cậy cao trên 0.85, có khả năng chuyển giao thực tiễn.
  • Mô hình phân tích định lượng xác nhận mối quan hệ chặt chẽ giữa tính minh bạch của rubric, tần suất phản hồi sư phạm và chất lượng chuẩn đầu ra môn học của sinh viên.
  • Hệ thống 4 giải pháp đồng bộ được đề xuất tạo tiền đề cho các cơ sở giáo dục đại học nâng cao chỉ số kiểm định chất lượng đào tạo quốc tế.

Đóng góp lớn nhất của luận văn là đã lượng hóa thành công các tiêu chí định tính của AUN-QA thành bộ chỉ báo đo lường cụ thể cho khối ngành ngoại ngữ tại Việt Nam. Kế hoạch tiếp theo trong 24 tháng tới là mở rộng phạm vi áp dụng bộ công cụ ra toàn bộ 14 học phần chuyên ngành của chương trình đào tạo. Các trường đại học thành viên và các nhà nghiên cứu giáo dục có thể tham khảo toàn văn luận văn để ứng dụng vào công tác bảo đảm chất lượng và đổi mới phương pháp kiểm tra đánh giá theo chuẩn khu vực.