Tổng quan nghiên cứu

Trong bối cảnh hội nhập quốc tế và chính sách mở cửa giáo dục tại Việt Nam, năng lực ngoại ngữ đã trở thành yêu cầu bắt buộc đối với sinh viên mọi khối ngành. Trường Đại học Công nghiệp Hà Nội (HaUI), tiền thân là Trường Cao đẳng Công nghiệp Hà Nội được chính thức nâng cấp thành trường đại học vào tháng 12 năm 2005, là cơ sở đào tạo quy mô lớn cung cấp hàng ngàn kỹ sư và cử nhân kỹ thuật mỗi năm cho thị trường lao động. Nhằm đáp ứng mục tiêu nâng cao chất lượng đầu ra và gia tăng cơ hội việc làm cho sinh viên, công tác giảng dạy và đánh giá môn Tiếng Anh không chuyên đã được nhà trường đặc biệt chú trọng. Tuy nhiên, hoạt động khảo thí học phần Tiếng Anh cấp độ 2 (General English 2 - GE2) dành cho sinh viên không chuyên trong giai đoạn này còn bộc lộ nhiều điểm nghẽn nghiêm trọng.

Vấn đề nghiên cứu cốt lõi xuất phát từ thực trạng khâu thiết kế đề thi kết thúc học phần GE2 chưa được nghiên cứu bài bản, tạo ra khoảng cách lớn giữa nội dung giảng dạy trên lớp và nội dung kiểm tra. Nhiều phần kiến thức xuất hiện trong đề thi chưa từng được giảng dạy, trong khi đề thi dành cho trình độ tiền trung cấp (pre-intermediate) lại được áp dụng cho sinh viên có trình độ sơ cấp (elementary), gây mất cân bằng về độ khó và làm suy giảm độ giá trị cũng như độ tin cậy của kỳ thi. Thêm vào đó, việc tái sử dụng các bộ đề thi cũ qua nhiều học kỳ và tình trạng giảng viên phải ra đề thi gấp trong thời gian ngắn mà không qua khâu thử nghiệm thực địa (pre-test) đã khiến kết quả đánh giá không phản ánh chính xác năng lực thực tế của người học.

Mục tiêu cụ thể của luận văn là khảo sát, đánh giá toàn diện thực trạng khảo thí học phần GE2 tại Đại học Công nghiệp Hà Nội dựa trên ý kiến phản hồi của 25 giảng viên và 125 sinh viên; từ đó đề xuất quy trình xây dựng ma trận đề thi đo lường thành quả (Achievement Test) chuẩn hóa và thiết kế bài thi mẫu (Sample Test) minh họa cho trình độ tiền trung cấp. Phạm vi nghiên cứu được thực hiện tại 8 khoa chuyên ngành của nhà trường trong năm 2010. Nghiên cứu mang ý nghĩa thực tiễn to lớn khi trực tiếp góp phần cải thiện hiệu ứng tác động ngược (backwash effect), nâng cao tính công bằng và tạo động lực học tập cho hơn 10.000 sinh viên không chuyên theo học tại trường mỗi năm.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Nghiên cứu được xây dựng dựa trên nền tảng các lý thuyết khảo thí ngôn ngữ kinh điển trên thế giới. Trước hết, tác giả vận dụng khung phân loại bài thi của Alderson, Krahnke và Stansfield (1987), trong đó phân định rõ 4 loại hình đánh giá cơ bản trong giáo dục ngôn ngữ: bài thi năng lực chung (proficiency test), bài thi xếp lớp (placement test), bài thi chẩn đoán (diagnostic test) và bài thi thành quả (achievement test). Trong đó, bài thi thành quả giữ vai trò trung tâm trong việc đo lường mức độ người học đạt được các mục tiêu cụ thể của một chương trình học sau một khoảng thời gian xác định, đồng thời cung cấp thông tin phản hồi quan trọng để điều chỉnh tài liệu và chiến lược giảng dạy.

Bên cạnh đó, nghiên cứu tích hợp lý thuyết Kiểm tra Đánh giá Ngôn ngữ Giao tiếp (Communicative Language Testing) và mô hình Phẩm chất Bài thi Hữu ích (Test Usefulness) do Bachman và Palmer đề xuất. Mô hình này xác lập 6 phẩm chất cốt lõi của một bài kiểm tra chuẩn mực bao gồm: độ tin cậy (reliability), độ giá trị cấu trúc (construct validity), tính xác thực (authenticity), tính tương tác (interactiveness), tác động xã hội và giáo dục (impact) và tính khả thi (practicality). Luận văn cũng làm sâu sắc thêm các khái niệm then chốt như: hiệu ứng tác động ngược của bài thi đối với hoạt động dạy và học (backwash/washback effect theo nghiên cứu của Nga năm 1997), đánh giá theo tiêu chuẩn chương trình (criterion-referenced testing) đối lập với đánh giá theo chuẩn phân phối nhóm (norm-referenced testing), cũng như sự phối hợp cân đối giữa các câu hỏi kiểm tra kỹ năng tiếp nhận (receptive test items) và kỹ năng sản sinh (productive test items) trong bối cảnh sử dụng ngôn ngữ mục tiêu (Target Language Use - TLU).

Phương pháp nghiên cứu

Nghiên cứu sử dụng phương pháp hỗn hợp (mixed-methods research) kết hợp chặt chẽ giữa phân tích định lượng và phân tích định tính nhằm đảm bảo tính khách quan và độ tin cậy khoa học cao nhất.

Về nguồn dữ liệu và cỡ mẫu: Nghiên cứu thu thập dữ liệu sơ cấp từ hai nhóm khách thể chính tại Trường Đại học Công nghiệp Hà Nội. Nhóm thứ nhất gồm 25 giảng viên thuộc Khoa Tiếng Anh tham gia khảo sát bằng bảng hỏi về thực trạng đề thi, thời lượng làm bài và quy trình ra đề. Nhóm thứ hai gồm 125 sinh viên không chuyên đại diện cho 8 khoa đào tạo chuyên ngành khác nhau trong trường. Ngoài ra, bài thi mẫu đề xuất được tổ chức thử nghiệm thực tế trên mẫu gồm 70 sinh viên trình độ tiền trung cấp tại 8 lớp học thuộc 8 khoa nói trên.

Về phương pháp chọn mẫu: Tác giả áp dụng phương pháp chọn mẫu phân tầng kết hợp chọn mẫu thuận tiện (stratified and convenience sampling). Việc lựa chọn 8 khoa chuyên ngành đại diện cho các khối kỹ thuật, công nghệ và kinh tế của nhà trường giúp phản ánh đa dạng và chính xác bức tranh năng lực ngoại ngữ của toàn bộ sinh viên không chuyên tại trường.

Về phương pháp phân tích và lý do lựa chọn: Dữ liệu định lượng từ bảng hỏi và kết quả thi được xử lý bằng các kỹ thuật thống kê mô tả, phân tích tần số, tỷ lệ phần trăm và lập bảng chéo (cross-tabulation). Phương pháp này được lựa chọn vì cho phép lượng hóa chính xác thái độ của giảng viên và sinh viên, đồng thời đo lường sự khác biệt có ý nghĩa thống kê giữa kết quả bài thi cũ và bài thi mẫu mới. Dữ liệu định tính được thu thập qua các buổi thảo luận học thuật chính thức và bán chính thức với giảng viên, phỏng vấn nhóm sinh viên, kết hợp quan sát trực tiếp quá trình làm bài tại phòng thi và đọc phản biện tài liệu.

Timeline nghiên cứu: Toàn bộ quy trình từ xây dựng công cụ, khảo sát thực địa, thiết kế ma trận, tổ chức thi mẫu và xử lý số liệu được tiến hành trong khoảng 9 tháng, hoàn thành và nghiệm thu trong năm 2010 trong khuôn khổ chương trình đào tạo Thạc sĩ chuyên ngành Lý luận và Phương pháp giảng dạy tiếng Anh (TEFL) tại Đại học Quốc gia Hà Nội.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

Phân tích dữ liệu thực nghiệm đã chỉ ra 4 phát hiện cốt lõi về thực trạng khảo thí môn Tiếng Anh 2 tại Trường Đại học Công nghiệp Hà Nội:

Thứ nhất, tồn tại sự bất cập lớn giữa nội dung đề thi hiện hành và mục tiêu chương trình đào tạo. Có khoảng 76% giảng viên Khoa Tiếng Anh được khảo sát khẳng định đề thi kết thúc học phần GE2 hiện tại chưa phản ánh đúng chuẩn đầu ra của môn học. Khoảng 60% giáo viên cho rằng các câu hỏi kiểm tra quá chú trọng vào ngữ pháp rời rạc mà bỏ quên các kỹ năng giao tiếp thực hành, tạo nên sự thiếu liên kết giữa những gì được dạy trên lớp và nội dung đánh giá trong đề thi.

Thứ hai, sinh viên gặp áp lực nặng nề về độ khó và thời gian làm bài. Khoảng 68% trong tổng số 125 sinh viên cho biết họ gặp khó khăn lớn khi giải quyết các dạng bài đọc hiểu và viết do độ khó vượt quá trình độ tiền trung cấp. Đáng chú ý, có tới khoảng 64% sinh viên và hơn 70% giảng viên cùng chung nhận định rằng thời lượng phân bổ cho đề thi hiện tại là không hợp lý, dẫn đến hệ quả là chỉ có khoảng 32% sinh viên hoàn thành được toàn bộ bài thi trong thời gian quy định.

Thứ ba, quy trình xây dựng đề thi bộc lộ nhiều lỗ hổng nghiêm trọng về bảo mật và kiểm định. 100% giảng viên xác nhận các đề thi kết thúc học phần đều được biên soạn trong thời gian rất ngắn trước kỳ thi dưới danh nghĩa bảo mật, hoàn toàn không trải qua khâu thử nghiệm trước (pre-test). Việc tái sử dụng đề thi qua nhiều năm đã dẫn đến tình trạng khoảng 45% sinh viên có thể tiếp cận trước đáp án từ các khóa trước, làm triệt tiêu tính công bằng và làm sai lệch chỉ số độ tin cậy của bài thi.

Thứ tư, bài thi mẫu đề xuất mang lại kết quả tích cực vượt trội khi thử nghiệm trên 70 sinh viên. Điểm số bài thi mẫu ghi nhận mức trung bình đạt khoảng 6,8/10, phân phối điểm theo đường cong chuẩn với độ phân hóa rõ rệt giữa các nhóm học lực. Tỷ lệ sinh viên hoàn thành toàn bộ bài thi đúng hạn tăng vọt từ 32% ở đề thi cũ lên mức khoảng 88% ở bài thi mới, nhận được sự đồng thuận cao từ cả người học và giáo viên chấm thi.

Thảo luận kết quả

Các phát hiện thực nghiệm trên đã phản ánh rõ nét nguyên nhân gốc rễ của cuộc khủng hoảng chất lượng khảo thí tại nhà trường: đó là sự thiếu vắng một ma trận đặc tả kỹ thuật đề thi (test specifications) chuẩn hóa và quy trình kiểm định chất lượng chuyên nghiệp. Việc thiếu ngân hàng đề thi được thẩm định khiến việc ra đề mang tính cảm tính, phụ thuộc hoàn toàn vào nhận định chủ quan của từng cá nhân giảng viên.

Khi đối chiếu với các nghiên cứu của Alderson (1987) và lý thuyết tác động ngược của Nga (1997), kết quả này minh chứng rằng một đề thi kém chất lượng sẽ tạo ra hiệu ứng tác động ngược tiêu cực (negative washback). Giáo viên có xu hướng chuyển từ giảng dạy phát triển năng lực giao tiếp sang luyện mẹo làm bài thi trắc nghiệm ngữ pháp, còn sinh viên rơi vào trạng thái học đối phó, triệt tiêu động lực tiếp thu ngôn ngữ tự nhiên.

Dữ liệu nghiên cứu này có thể được trực quan hóa rất rõ ràng thông qua hệ thống bảng biểu và biểu đồ học thuật. Điển hình, một biểu đồ cột kép so sánh mức độ hài lòng về thời lượng làm bài giữa đề thi cũ và đề thi đề xuất (tương ứng với Biểu đồ 5 và Biểu đồ 6 trong luận văn) sẽ thể hiện rõ sự chuyển dịch từ 64% bất mãn xuống chỉ còn dưới 12%. Đồng thời, các bảng thống kê phân loại khó khăn của sinh viên (tương tự Bảng 2 và Bảng 6 trong tài liệu gốc) giúp phân tách rành mạch tỷ lệ sai sót giữa các kỹ năng ngôn ngữ, cho thấy kỹ năng đọc hiểu và hoàn thành câu chiếm tới hơn 55% tổng số lỗi sai của người học.

Ý nghĩa học thuật của phát hiện này khẳng định rằng việc thiết kế một bài thi thành quả chuẩn hóa không chỉ đơn thuần là thay đổi cấu trúc câu hỏi, mà là một biện pháp can thiệp sư phạm then chốt nhằm tái định hình chất lượng dạy và học ngoại ngữ trong toàn bộ hệ thống nhà trường.

Đề xuất và khuyến nghị

Dựa trên kết quả phân tích thực trạng và kiểm chứng bài thi mẫu, luận văn đề xuất 4 nhóm giải pháp chiến lược nhằm chuẩn hóa công tác khảo thí Tiếng Anh không chuyên:

  1. Xây dựng và ban hành ma trận đặc tả kỹ thuật đề thi chuẩn hóa (Test Specification Matrix): Ban Chủ nhiệm Khoa Ngoại ngữ cùng Tổ Khảo thí cần chủ trì thiết lập ma trận đề thi chi tiết cho học phần GE2 trong quý đầu tiên của năm học. Ma trận này phải quy định cụ thể tỷ trọng đánh giá: phân bổ 40% cho kỹ năng tiếp nhận (Nghe và Đọc), 30% cho kiến thức ngôn ngữ tích hợp (Ngữ pháp và Từ vựng theo ngữ cảnh) và 30% cho kỹ năng sản sinh (Viết câu và đoạn văn ngắn), cam kết nâng độ tin cậy đo lường của đề thi đạt mức chuẩn trên 85%.

  2. Triển khai quy trình tiền thử nghiệm (Pre-testing) và xây dựng ngân hàng câu hỏi độc lập: Đội ngũ giảng viên bộ môn cần tiến hành biên soạn tối thiểu 300 mục câu hỏi thi đạt chuẩn trong thời hạn 6 tháng. Tất cả các câu hỏi trước khi đưa vào ngân hàng đề thi chính thức bắt buộc phải trải qua bước thử nghiệm thực địa trên mẫu đại diện tối thiểu 100 sinh viên để tính toán chỉ số độ khó (Facility Value trong khoảng 0,3 - 0,7) và chỉ số phân biệt (Discrimination Index > 0,3), chấm dứt hoàn toàn tình trạng ra đề thi đột xuất không kiểm định.

  3. Điều chỉnh thời lượng thi và đa dạng hóa định dạng câu hỏi: Hội đồng Khảo thí nhà trường cần phê duyệt điều chỉnh thời gian làm bài thi hết học phần từ 60 phút lên mức hợp lý khoảng 75 đến 90 phút kể từ học kỳ tới. Cấu trúc đề thi cần cắt giảm ít nhất 50% các câu hỏi trắc nghiệm ngữ pháp cô lập, thay thế bằng các bài tập điền khuyết dựa trên ngữ cảnh thực tế, đọc hiểu văn bản ứng dụng và viết lại câu giao tiếp.

  4. Thiết lập cơ chế đánh giá phản hồi định kỳ và hậu kiểm sư phạm: Ban Giám hiệu nhà trường chỉ đạo Trung tâm Đảm bảo chất lượng phối hợp với Khoa Ngoại ngữ thực hiện khảo sát ý kiến định kỳ của ít nhất 90% giảng viên và sinh viên ngay sau mỗi đợt thi trong vòng 14 ngày. Kết quả phân tích thống kê điểm thi và phản hồi của người học sẽ là căn cứ bắt buộc để hiệu chỉnh giáo trình, phương pháp giảng dạy và ngân hàng câu hỏi cho các học kỳ tiếp theo.

Đối tượng nên tham khảo luận văn

Nội dung và khung giải pháp của luận văn mang giá trị ứng dụng cao cho 4 nhóm đối tượng chính:

  1. Cán bộ quản lý đào tạo và chuyên viên khảo thí đại học: Cung cấp quy trình bài bản để tái cấu trúc hệ thống kiểm tra đánh giá ngoại ngữ, chuẩn hóa ma trận đề thi và thiết lập quy trình kiểm định chất lượng khảo thí cho quy mô từ 10.000 đến 20.000 sinh viên tại các trường đại học đa ngành.

  2. Giảng viên giảng dạy Tiếng Anh không chuyên và Tiếng Anh chuyên ngành (GE/ESP): Tài liệu cung cấp hướng dẫn thực hành chi tiết về cách thiết kế câu hỏi kiểm tra kỹ năng giao tiếp tích hợp, cách cân đối thời lượng làm bài và kỹ thuật xây dựng rubric chấm điểm khách quan, giúp nâng cao hiệu ứng tác động tích cực trong giảng dạy hàng ngày.

  3. Học viên cao học và nghiên cứu sinh chuyên ngành TEFL / Ngôn ngữ học ứng dụng: Là tài liệu tham khảo mẫu mực về phương pháp nghiên cứu hỗn hợp (mixed-methods), quy trình thiết kế bảng hỏi khảo sát, kỹ thuật xử lý số liệu bảng chéo và phương pháp luận thiết kế bài thi chuẩn hóa trong môi trường giáo dục đại học tại Việt Nam.

  4. Lãnh đạo các trường đại học kỹ thuật, trường cao đẳng nghề: Cung cấp mô hình tham chiếu thực tiễn để giải quyết bài toán chuẩn hóa năng lực tiếng Anh đầu ra cho sinh viên khối kỹ thuật, giúp thu hẹp khoảng cách giữa năng lực đào tạo trong nhà trường và nhu cầu tuyển dụng thực tế của doanh nghiệp.

Câu hỏi thường gặp

1. Luận văn giải quyết vấn đề bất cập lớn nhất nào trong khâu khảo thí tại Đại học Công nghiệp Hà Nội?

Luận văn tập trung giải quyết sự mất cân đối nghiêm trọng giữa nội dung giảng dạy và nội dung thi môn GE2. Thực trạng trước nghiên cứu cho thấy khoảng 76% giảng viên phản ánh đề thi không bám sát chuẩn đầu ra, đề thi quá khó so với trình độ tiền trung cấp và hoàn toàn thiếu quy trình kiểm định thực địa, dẫn đến việc đánh giá sai lệch năng lực của người học.

2. Vì sao việc tái sử dụng đề thi cũ qua nhiều năm lại gây hậu quả tiêu cực cho chất lượng đào tạo?

Việc tái sử dụng đề thi cũ mà không đổi mới dẫn đến nguy cơ lộ bí mật đề thi, khi khoảng 45% sinh viên có thể nắm trước dạng đề và đáp án từ các khóa trước. Điều này triệt tiêu động lực học tập thực chất, tạo ra sự bất công bằng giữa các nhóm sinh viên và biến kỳ thi thành cuộc kiểm tra khả năng ghi nhớ máy móc thay vì đánh giá năng lực ngôn ngữ.

3. Mô hình bài thi mẫu (Sample Test) trong luận văn có điểm gì vượt trội so với đề thi cũ?

Bài thi mẫu được thiết kế dựa trên ma trận đặc tả chuẩn, cân đối 40% kỹ năng tiếp nhận và 30% kỹ năng sản sinh, phân bổ thời gian hợp lý cho trình độ tiền trung cấp. Khi thử nghiệm trên 70 sinh viên, tỷ lệ hoàn thành bài thi đúng hạn đạt khoảng 88% (so với 32% của đề cũ) và điểm số phản ánh chính xác phân phối chuẩn của lớp học.

4. Phương pháp chọn mẫu trong nghiên cứu có bảo đảm tính đại diện cho sinh viên toàn trường không?

Nghiên cứu áp dụng phương pháp chọn mẫu phân tầng kết hợp thuận tiện trên 125 sinh viên và 25 giảng viên trải rộng khắp 8 khoa chuyên ngành kỹ thuật và kinh tế tại Đại học Công nghiệp Hà Nội. Quy mô mẫu này phản ánh đầy đủ các đặc trưng về trình độ, tâm lý và khó khăn học tập của cộng đồng sinh viên không chuyên tại trường.

5. Khái niệm hiệu ứng tác động ngược (backwash effect) được thể hiện như thế nào trong nghiên cứu này?

Hiệu ứng tác động ngược thể hiện ở mối quan hệ hai chiều giữa thi cử và dạy học. Khi đề thi cũ tập trung vào ngữ pháp rời rạc, giáo viên chỉ dạy mẹo làm bài; ngược lại, khi bài thi mẫu chuyển hướng sang đánh giá năng lực giao tiếp tích hợp, cả giảng viên và sinh viên đều chuyển biến tích cực sang rèn luyện kỹ năng thực hành ngôn ngữ toàn diện.

Kết luận

  • Đã khảo sát và làm rõ toàn diện thực trạng bất cập của kỳ thi kết thúc học phần Tiếng Anh 2 tại Trường Đại học Công nghiệp Hà Nội thông qua ý kiến của 25 giảng viên và 125 sinh viên.
  • Xác định nguyên nhân cốt lõi gây suy giảm độ tin cậy và độ giá trị của đề thi là do thiếu ma trận đặc tả kỹ thuật, không thử nghiệm trước và thời lượng làm bài chưa hợp lý.
  • Xây dựng thành công khung ma trận thiết kế bài thi thành quả (Achievement Test) chuẩn hóa và biên soạn bài thi mẫu cho trình độ tiền trung cấp bám sát lý thuyết khảo thí giao tiếp hiện đại.
  • Thử nghiệm thực địa bài thi mẫu trên 70 sinh viên thuộc 8 khoa chuyên ngành, chứng minh sự vượt trội với tỷ lệ hoàn thành đúng giờ đạt xấp xỉ 88% và độ phân hóa điểm số chuẩn mực.
  • Đóng góp hệ thống 4 nhóm khuyến nghị thực tiễn có lộ trình rõ ràng, giúp nhà trường chuyển đổi phương thức khảo thí từ cảm tính sang quy trình chuẩn hóa chất lượng cao.

Về lộ trình tiếp theo, nhà trường cần hoàn thiện ngân hàng 300 câu hỏi thi chuẩn hóa trong 6 tháng tới và mở rộng áp dụng mô hình ma trận này cho toàn bộ các học phần Tiếng Anh cấp độ 1 và cấp độ 3 trong vòng 12 tháng. Kính mời các nhà nghiên cứu, cán bộ quản lý giáo dục và quý thầy cô tham khảo toàn văn luận văn để ứng dụng hiệu quả khung ma trận đề thi này vào công tác khảo thí tại đơn vị.