Tổng quan về luận án

Trong bối cảnh hội nhập quốc tế sâu rộng và sự hình thành của Cộng đồng Kinh tế ASEAN (AEC), ngành du lịch Việt Nam đứng trước đòi hỏi cấp bách về việc nâng cao chất lượng nguồn nhân lực, đặc biệt là năng lực thực hành nghề nghiệp bằng ngoại ngữ. Luận án tiến sĩ chuyên ngành Đo lường và Đánh giá trong Giáo dục (Mã số: 62 14 01 20) của tác giả Hoàng Văn Thái, thực hiện tại Viện Đảm bảo Chất lượng Giáo dục – Đại học Quốc gia Hà Nội dưới sự hướng dẫn khoa học của PGS.TS. Ngô Doãn Đãi và TS. Nguyễn Thị Thu Hương (Hà Nội, 2017), mang tiêu đề: "Nghiên cứu đổi mới đánh giá kết quả học tập ngoại ngữ chuyên ngành của sinh viên các trường Cao đẳng Du lịch ở Việt Nam". Đây là công trình khoa học tiên phong giải quyết bài toán giao thoa giữa khoa học đo lường giáo dục hiện đại và phương pháp giảng dạy tiếng Anh chuyên ngành (English for Specific Purposes - ESP) trong hệ thống giáo dục nghề nghiệp.

Nghiên cứu bắt nguồn từ định hướng chiến lược của Đảng và Nhà nước tại Nghị quyết Hội nghị Trung ương 8 khóa XI (Nghị quyết số 29-NQ/TW) về đổi mới căn bản, toàn diện giáo dục và đào tạo: “Đổi mới căn bản hình thức và phương pháp, thi kiểm tra và đánh giá kết quả giáo dục, đảm bảo trung thực, khách quan... Phối hợp sử dụng kết quả đánh giá trong quá trình học với đánh giá cuối kỳ, cuối năm học; đánh giá của người dạy với tự đánh giá của người học”, đồng thời quán triệt Quyết định số 1400/QĐ-TTg về Đề án dạy và học ngoại ngữ trong hệ thống giáo dục quốc dân.

Khoảng trống nghiên cứu (research gap) mà luận án xác định xuất phát từ thực trạng nghịch lý: Các trường cao đẳng du lịch tại Việt Nam đào tạo theo phương châm “Luôn hướng kỹ năng thực hành nghiệp vụ và giao tiếp ngoại ngữ tới mọi cấp học”, nhưng hoạt động đánh giá kết quả học tập (KQHT) ngoại ngữ chuyên ngành (NNCN) vẫn bị trói buộc trong tiếp cận nội dung (content-based) và lý thuyết hành vi (behaviorism). Hoạt động kiểm tra đánh giá chủ yếu đo lường khả năng ghi nhớ từ vựng, ngữ pháp đơn lẻ thông qua các bài kiểm tra viết truyền thống hoặc trắc nghiệm rời rạc, hoàn toàn tách rời các tình huống nghề nghiệp thực tế của ngành du lịch - khách sạn.

Để giải quyết triệt để khoảng trống này, luận án xây dựng hệ thống câu hỏi nghiên cứu và giả thuyết khoa học chặt chẽ:

  • Câu hỏi nghiên cứu 1 (RQ1): Cơ sở khoa học nào cho việc đổi mới đánh giá KQHT ngoại ngữ chuyên ngành của sinh viên các trường cao đẳng du lịch ở Việt Nam theo tiếp cận năng lực (TCNL)?
  • Câu hỏi nghiên cứu 2 (RQ2): Thực trạng công tác đánh giá KQHT ngoại ngữ chuyên ngành của sinh viên các trường cao đẳng du lịch ở Việt Nam hiện nay diễn ra như thế nào trên các bình diện chuẩn đầu ra, phương pháp và công cụ đánh giá?
  • Câu hỏi nghiên cứu 3 (RQ3): Cần thực hiện những giải pháp đồng bộ nào để đổi mới đánh giá KQHT ngoại ngữ chuyên ngành của sinh viên các trường cao đẳng du lịch theo tiếp cận năng lực và hiệu quả thực nghiệm của các giải pháp đó ra sao?
  • Giả thuyết khoa học (H1): Việc đánh giá KQHT ngoại ngữ chuyên ngành của sinh viên các trường cao đẳng du lịch hiện còn nhiều bất cập về nội dung, phương pháp, công cụ và quy trình triển khai. Nếu xây dựng và áp dụng đồng bộ hệ thống chuẩn đầu ra năng lực tích hợp, phát triển công cụ đánh giá xác thực (authentic assessment) được chuẩn hóa bằng mô hình đo lường hiện đại (Mô hình Rasch) và tích hợp đánh giá vào quá trình dạy học, chất lượng kiểm tra đánh giá và năng lực hành nghề của sinh viên sẽ được nâng cao rõ rệt.

Khung lý thuyết của công trình tích hợp đa tầng giữa: Lý thuyết năng lực ngôn ngữ giao tiếp của Bachman & Palmer (1996, 2010), lý thuyết kiểm tra ngôn ngữ chuyên ngành của Douglas (2000), mô hình dạy học tích hợp chuyên ngành và ngôn ngữ (CLIL - Coyle et al., 2010), cùng các lý thuyết hiện đại về đánh giá giáo dục (McMillan, 2007; Nitko, 2001; O'Malley & Pierce, 1996). Phạm vi nghiên cứu bao quát khảo sát thực trạng tại toàn bộ 8 trường Cao đẳng Du lịch công lập thuộc Bộ Văn hóa, Thể thao và Du lịch trên cả nước (Hà Nội, Hải Phòng, Huế, Đà Nẵng, Nha Trang, Đà Lạt, Vũng Tàu, Cần Thơ), đi sâu nghiên cứu và thực nghiệm tại môn tiếng Anh chuyên ngành Quản trị khách sạn (QTKS) ở Trường Cao đẳng Du lịch Hà Nội.

Literature Review và Positioning

Tổng quan y văn trong nước và quốc tế cho thấy sự dịch chuyển sâu sắc của các mô hình đánh giá giáo dục qua các thời kỳ:

Trường phái thứ nhất tập trung vào Đánh giá xác thực (Authentic Assessment) và Đánh giá thực hiện (Performance Assessment). James McMillan (2007) và Nitko (2001) khẳng định các phương pháp truyền thống chỉ đo lường được nhận thức bậc thấp (biết, hiểu), trong khi đánh giá thực hiện yêu cầu người học huy động kỹ năng tư duy bậc cao, giải quyết vấn đề trong bối cảnh thực tiễn. O'Malley & Pierce (1996) cùng Brown (2004) phát triển quy trình thiết kế công cụ đánh giá ngôn ngữ xác thực qua hồ sơ học tập (portfolio), phỏng vấn, trình diễn nghiệp vụ và rubrics phân tích. Tại Việt Nam, các học giả như Nguyễn Đức Chính (2008), Đặng Bá Lãm & Nguyễn Thành Nhân (2012), Nguyễn Công Khanh và cộng sự (2014) đã đặt nền móng cho việc ứng dụng đánh giá xác thực vào giáo dục đại học.

Trường phái thứ hai nhấn mạnh Đánh giá vì mục đích học tập (Assessment for Learning - AfL) và Đánh giá là hoạt động học tập (Assessment as Learning - AaL) (Black & Wiliam, 1998; Stiggins, 2002; Genesee & Upshur, 1996; Nunan, 2004). Luận án tổng hợp bảng so sánh bản chất giữa ba hình thái: Đánh giá thành tích học tập (Assessment of Learning - nhằm xác nhận, tổng kết), Đánh giá vì mục đích học tập (hướng tới cung cấp thông tin phản hồi thường xuyên để điều chỉnh quá trình dạy và học) và Đánh giá là hoạt động học tập (kích hoạt vai trò tự đánh giá và đánh giá đồng đẳng của người học).

Trong lĩnh vực ngôn ngữ chuyên ngành (ESP/LSP), Dan Douglas (2000) định nghĩa kiểm tra NNCN là một dạng thức đặc biệt của kiểm tra ngôn ngữ giao tiếp, đòi hỏi tính xác thực cao của nhiệm vụ giao tiếp chuyên môn và sự tương tác giữa kiến thức chuyên ngành với năng lực ngôn ngữ. Tiếp cận dạy học tích hợp chuyên ngành và ngôn ngữ (CLIL - Content and Language Integrated Learning) của Coyle, Hood & Marsh (2010) và Dalton-Puffer (2007) đặt ra thách thức: đánh giá trong CLIL mang mục tiêu kép, đòi hỏi đánh giá đồng thời cả kiến thức chuyên ngành du lịch và kỹ năng ngôn ngữ.

So sánh với các nghiên cứu và chuẩn quốc tế:

  1. Hệ thống đánh giá telc GmbH (CHLB Đức): Cung cấp chuẩn tiếng Anh nghề nghiệp cho nhân viên khách sạn - nhà hàng dựa trên Khung tham chiếu Châu Âu (CEFR), nhưng được thiết kế độc lập như một kỳ thi chuẩn hóa bên ngoài, không gắn liền với tiến trình dạy học học phần trong nhà trường.
  2. Hệ thống Accueil (Thụy Sĩ): Tập trung vào đánh giá kỹ năng giao tiếp ngành khách sạn theo các tiêu chuẩn vận hành nghiệp vụ cao cấp, nhưng thiên về đánh giá kỹ năng thực hành nghề (performance) hơn là cấu trúc năng lực ngôn ngữ tương tác.
  3. Tiêu chuẩn nghề Du lịch ASEAN (ACCSTP/CATC) và Tiêu chuẩn VTOS (Việt Nam): Xác định các đơn vị năng lực tiếng Anh nghề nghiệp (COS4, GES16) gắn với kiến thức, kỹ năng, thái độ thực tiễn, song các đặc tả kỹ năng còn mang tính mô tả chung, thiếu liên kết với các bậc năng lực của Khung ngoại ngữ 6 bậc dùng cho Việt Nam (KNLNNVN).

Vị trí học thuật của luận án: Công trình đã định vị chính xác điểm nghẽn của hệ thống giáo dục nghề nghiệp du lịch Việt Nam, thiết lập nhịp cầu khoa học kết nối KNLNNVN (dựa trên CEFR), Tiêu chuẩn kỹ năng nghề du lịch (VTOS/ASEAN) và mô hình trắc lượng hiện đại (Rasch measurement), tạo nên một khung đánh giá tích hợp chuẩn mực và khả thi.

Đóng góp lý thuyết và khung phân tích

Đóng góp cho lý thuyết

Luận án mở rộng khung lý thuyết năng lực ngôn ngữ giao tiếp của Bachman & Palmer (1996, 2010) và Douglas (2000) vào bối cảnh đặc thù của giáo dục nghề nghiệp du lịch tại các nước đang phát triển. Năng lực ngoại ngữ chuyên ngành của sinh viên cao đẳng du lịch được tái định nghĩa và cấu trúc hóa thành một chỉnh thể thống nhất gồm 3 trụ cột:

$$\text{Năng lực NNCN Du lịch} = f(\text{Năng lực Ngôn ngữ}, \text{Năng lực Chiến lược}, \text{Năng lực Chuyên ngành})$$

Theo tác giả: “Đánh giá KQHT ngoại ngữ chuyên ngành của SV các trường cao đẳng du lịch theo TCNL được hiểu là quá trình tập hợp và phân tích thông tin dựa trên cơ sở lý thuyết nhất định nhằm đưa ra những nhận định về khả năng sử dụng phối hợp kiến thức, kĩ năng, thái độ nghề nghiệp, động cơ, năng lực... của sinh viên trong quá trình học tập môn NNCN để thực hiện hiệu quả một nhiệm vụ phức hợp của môn học trong bối cảnh nghề nghiệp thực tế hoặc giả định bằng ngoại ngữ đang được học, từ đó đạt được các mục tiêu năng lực cần thiết của môn NNCN, góp phần hình thành năng lực nghề nghiệp của sinh viên theo CĐR của ngành, nghề du lịch mà sinh viên đang theo học”.

Đóng góp mang tính chuyển biến hệ hình (paradigm shift) của luận án là chuyển đổi quan niệm đánh giá từ đo lường ghi nhớ tri thức ngôn ngữ tĩnh sang đánh giá năng lực hành động giao tiếp nghề nghiệp động thông qua biến ẩn (latent trait) được bộc lộ qua các hành vi quan sát được (observable indicators).

Khung phân tích độc đáo

Khung phân tích của luận án tích hợp nhuần nhuyễn 3 cấu phần:

  1. Mô hình năng lực giao tiếp chuyên ngành: Tích hợp năng lực ngôn ngữ (ngữ pháp, ngôn bản, hành ngôn, ngôn ngữ xã hội) với năng lực chuyên ngành quản trị khách sạn theo chuẩn Bậc 3 của KNLNNVN (tương đương B1 - CEFR) và tiêu chuẩn VTOS.
  2. Tiếp cận quản lý chất lượng liên tục (PDCA/ADDIE): Vận dụng chu trình Plan (Lập kế hoạch chuẩn đầu ra) - Do (Tổ chức đánh giá tích hợp) - Check (Kiểm tra chất lượng đo lường bằng trắc lượng học) - Act/Adjust (Cải tiến chương trình và phương pháp dạy học).
  3. Tiếp cận chuẩn hóa và trắc lượng Rasch: Ứng dụng mô hình Logistic 1 tham số (1-PL Item Response Theory - Rasch Model) để chuẩn hóa câu hỏi trắc nghiệm khách quan (MCQ) và rubrics đánh giá kỹ năng nói, viết, dự án.

Điều kiện biên (boundary conditions): Khung phân tích được thiết kế tối ưu cho trình độ cao đẳng khối ngành du lịch - khách sạn, nhưng sở hữu tính tương thích cao để mở rộng sang các chuyên ngành kỹ thuật và dịch vụ khác trong hệ thống giáo dục nghề nghiệp (VET).

Phương pháp nghiên cứu tiên tiến

Thiết kế nghiên cứu

Luận án áp dụng lập trường nhận thức luận hiện thực phản biện (critical realism) kết hợp phương pháp nghiên cứu hỗn hợp (mixed methods research) đan kết chặt chẽ giữa nghiên cứu định tính (qualitative) và định nghiên cứu lượng (quantitative).

Thiết kế nghiên cứu đa tầng (multi-level design) được triển khai qua 3 cấp độ:

  • Cấp độ vĩ mô (Macro-level): Đối chiếu chính sách đổi mới giáo dục, KNLNNVN (Thông tư 01/2014/TT-BGDĐT), tiêu chuẩn VTOS và Khung trình độ quốc gia Việt Nam (VQF).
  • Cấp độ trung mô (Meso-level): Đánh giá chương trình đào tạo, ma trận đề thi và thực trạng khảo thí tại 8 trường Cao đẳng Du lịch thuộc Bộ VHTTDL.
  • Cấp độ vi mô (Micro-level): Khảo sát chi tiết nhận thức của giảng viên, sinh viên, ý kiến chuyên gia/nhà tuyển dụng khách sạn và thử nghiệm bài thi trên sinh viên chuyên ngành Quản trị khách sạn tại Trường CĐDL Hà Nội.

Quy trình nghiên cứu rigorous

Quy trình nghiên cứu trải qua 5 bước nghiêm ngặt:

  1. Nghiên cứu cơ sở lý luận: Hệ thống hóa các khái niệm năng lực, chuẩn đầu ra, đánh giá thực, AfL, mô hình CLIL và đo lường Rasch.
  2. Khảo sát thực trạng quy mô toàn quốc: Sử dụng bảng hỏi khảo sát trên mẫu đại diện gồm 100% các trường CĐDL trực thuộc Bộ VHTTDL trên toàn lãnh thổ Việt Nam; kết hợp phỏng vấn sâu cán bộ quản lý, giảng viên và chuyên gia doanh nghiệp khách sạn.
  3. Đề xuất hệ thống giải pháp: Thiết kế quy trình xác định chuẩn đầu ra môn học, quy trình phát triển công cụ đánh giá (MCQ, câu hỏi mở, nhiệm vụ giao tiếp đóng vai - role-play, dự án - project work) và quy trình tích hợp đánh giá vào giảng dạy.
  4. Thiết kế công cụ và ngân hàng đề thi thực nghiệm: Xây dựng bộ chuẩn đầu ra năng lực tiếng Anh chuyên ngành QTKS và 5 bài thi gốc kết thúc học phần bao gồm đầy đủ 4 kỹ năng: Nghe, Nói, Đọc, Viết kết hợp kiến thức nghiệp vụ.
  5. Thử nghiệm thực chứng và phân tích trắc lượng: Thử nghiệm bài thi trên sinh viên CĐDL Hà Nội; đánh giá độ tin cậy, độ giá trị, độ phân biệt và độ khó bằng phần mềm chuyên dụng.

Data và phân tích

  • Mẫu khảo sát thực trạng: Bao gồm 8 cơ sở đào tạo cao đẳng du lịch trải dài từ Bắc vào Nam: CĐDL Hà Nội, CĐ Nghề Dịch vụ & Du lịch Hải Phòng, CĐ Nghề Du lịch Huế, CĐ Nghề Du lịch Đà Nẵng, CĐ Nghề Du lịch Nha Trang, CĐ Nghề Du lịch Đà Lạt, CĐ Nghề Du lịch Vũng Tàu, CĐ Nghề Du lịch Cần Thơ.
  • Mẫu thử nghiệm và tham vấn: Giảng viên tiếng Anh chuyên ngành du lịch, cán bộ quản lý đào tạo, chuyên gia Dự án Năng lực Du lịch EU-ESRT, nhân viên và nhà quản lý bộ phận Lễ tân - Buồng - F&B tại các khách sạn 3-5 sao trên địa bàn Hà Nội.
  • Kỹ thuật phân tích dữ liệu nâng cao:
    • Sử dụng phần mềm thống kê xử lý định lượng mô tả, tính toán hệ số tương quan, kiểm định giá trị trung bình.
    • Kiểm tra độ tin cậy thang đo thông qua hệ số Cronbach’s Alpha cho từng kỹ năng và cấu phần năng lực.
    • Ứng dụng Mô hình Rasch (Item Response Theory) qua phần mềm Quest: Phân tích độ khó của từng item ($b_i$) tương quan với năng lực của thí sinh ($\theta_n$), biểu diễn trên Bản đồ biến số (Item-Person Map / Wright Map).
    • Phân tích chỉ số độ khớp Infit Mean Square (Infit MNSQ) và Outfit MNSQ nhằm loại bỏ các câu hỏi có độ nhiễu hoặc không tương thích với mô hình đo lường đơn chiều (unidimensionality).

Phát hiện đột phá và implications

Những phát hiện then chốt

  1. Sự đứt gãy giữa mục tiêu đào tạo và công cụ đánh giá hiện hành: Khảo sát tại 8 trường CĐDL cho thấy trên 75% giảng viên và sinh viên thừa nhận các đề thi kết thúc học phần trước đây chủ yếu là bài thi viết ngữ pháp, đọc hiểu văn bản thông thường; thiếu vắng hoàn toàn việc kiểm tra trực tiếp kỹ năng Nói tương tác và Viết xử lý nghiệp vụ khách sạn. Đánh giá chủ yếu dừng lại ở "Đánh giá kết quả" (Assessment of Learning), bỏ quên chức năng "Đánh giá vì sự tiến bộ của người học" (Assessment for Learning).
  2. Đồng thuận cao về chuẩn đầu ra năng lực tích hợp: Khảo sát ý kiến giảng viên và các nhà quản lý khách sạn ghi nhận tỷ lệ nhất trí trên 88% đối với cấu trúc chuẩn đầu ra môn tiếng Anh QTKS do luận án xây dựng. Cụ thể, chuẩn hóa năng lực giao tiếp theo 4 lĩnh vực: Nghiệp vụ Lễ tân (Front Office), Nghiệp vụ Nhà hàng & Đồ uống (F&B), Nghiệp vụ Buồng (Housekeeping) và Kỹ năng xử lý tình huống/phàn nàn (Handling Complaints).
  3. Bằng chứng trắc lượng từ Mô hình Rasch: Phân tích 5 bài thi trắc nghiệm khách quan kết hợp ngôn ngữ và chuyên môn bằng phần mềm Quest chứng minh:
    • Phần lớn các câu hỏi có chỉ số Infit MNSQ nằm hoàn hảo trong khoảng cho phép ($0.77 \le \text{Infit MNSQ} \le 1.30$).
    • Phân bố độ khó của câu hỏi và năng lực của sinh viên trên bản đồ Wright Map có sự tương thích cao, thể hiện bài thi phân loại chính xác các mức độ năng lực từ yếu, trung bình đến khá, giỏi.
    • Hệ số tin cậy Cronbach’s Alpha của các bài thi đạt mức cao ($\alpha \ge 0.82$), khẳng định tính nhất quán nội tại của công cụ đo lường.
  4. Tác động dội ngược tích cực (Positive Washback Effect): Khi đưa các nhiệm vụ đánh giá thực tế (đóng vai lễ tân giải quyết check-in quá giờ, viết email xử lý sự cố dịch vụ buồng, thuyết trình dự án quảng bá tiện ích khách sạn) vào kiểm tra thường xuyên và định kỳ, mức độ hứng thú học tập và năng lực tự chủ của sinh viên tăng vọt; giảm thiểu triệt để tâm lý học vẹt để đối phó với thi cử.

Implications đa chiều

  • Về mặt lý thuyết: Chứng minh tính khả thi của việc tích hợp lý thuyết ngôn ngữ học chức năng, lý thuyết kiến tạo và trắc lượng học hiện đại vào việc xây dựng khung đánh giá cho các chương trình đào tạo nghề mang tính ứng dụng cao.
  • Về mặt phương pháp luận: Cung cấp bộ quy trình chuẩn hóa 5 bước để thiết kế công cụ đánh giá năng lực ngoại ngữ chuyên ngành có thể chuyển giao cho các ngành nghề khác như Hướng dẫn du lịch, Quản trị lữ hành, Kỹ thuật chế biến món ăn.
  • Về mặt thực tiễn (3 giải pháp cốt lõi):
    1. Giải pháp 1: Xây dựng chuẩn đầu ra năng lực ngoại ngữ chuyên ngành cho từng môn học dựa trên sự tương thích giữa KNLNNVN Bậc 3 và Tiêu chuẩn nghề VTOS.
    2. Giải pháp 2: Xây dựng hệ thống công cụ đánh giá đa dạng, kết hợp MCQ chuẩn hóa Rasch với các bài tập tình huống thực (Authentic Tasks), phiếu kiểm tra quan sát (Checklists) và bảng tiêu chí định lượng (Analytic Rubrics).
    3. Giải pháp 3: Tích hợp đánh giá thường xuyên vào quy trình dạy học trên lớp, biến hoạt động đánh giá thành cơ hội học tập thông qua tự đánh giá (Self-assessment) và đánh giá đồng đẳng (Peer-assessment).
  • Về mặt chính sách: Cung cấp căn cứ khoa học để Bộ Văn hóa, Thể thao và Du lịch cùng Tổng cục Giáo dục Nghề nghiệp (Bộ LĐ-TB&XH) ban hành quy định chuẩn đầu ra ngoại ngữ nghề nghiệp và quy chuẩn kiểm định chất lượng đào tạo du lịch toàn quốc.

Limitations và Future Research

Luận án nhìn nhận một cách khách quan các giới hạn khoa học:

  1. Giới hạn phạm vi thực nghiệm sâu: Do điều kiện thời gian và nguồn lực, quá trình tổ chức dạy học thực nghiệm và thẩm định công cụ đo lường Rasch mới được tiến hành tập trung tại môn tiếng Anh chuyên ngành Quản trị khách sạn tại Trường Cao đẳng Du lịch Hà Nội; chưa triển khai thực nghiệm đồng thời trên toàn bộ 6 nghề du lịch trọng điểm.
  2. Quy mô mẫu phân tích Item: Mặc dù mẫu khảo sát thực trạng bao quát toàn diện 8 trường cao đẳng, mẫu sinh viên tham gia làm bài thi thử nghiệm để chạy mô hình Quest đạt mức tiêu chuẩn cho mô hình Rasch 1-PL nhưng cần mở rộng cỡ mẫu lớn hơn nữa nếu muốn áp dụng các mô hình IRT phức tạp hơn (2-PL hoặc 3-PL).
  3. Độ trễ công nghệ: Nghiên cứu thực hiện năm 2017, khi việc ứng dụng công nghệ thông tin trong kiểm tra đánh giá chủ yếu dựa trên phần mềm trắc lượng offline, chưa tích hợp hệ thống kiểm tra thích ứng trên máy tính (Computerized Adaptive Testing - CAT) hoặc nền tảng trí tuệ nhân tạo chấm điểm nói/viết tự động.

Chương trình nghiên cứu tiếp nối (Future Research Agenda):

  • Mở rộng xây dựng chuẩn đầu ra và ngân hàng đề thi năng lực cho 5 nghề du lịch còn lại: Hướng dẫn du lịch, Quản trị nhà hàng, Kỹ thuật chế biến món ăn, Quản trị lữ hành, Điều hành tour.
  • Phát triển hệ thống kiểm tra thích ứng trên máy tính (CAT) dựa trên ngân hàng câu hỏi đã được định cỡ tham số Rasch.
  • Nghiên cứu theo dõi dọc (Longitudinal Study) để đánh giá tác động của phương thức đánh giá mới đến tỷ lệ có việc làm và mức độ hài lòng của các tập đoàn khách sạn quốc tế đối với sinh viên sau tốt nghiệp từ 3 đến 5 năm.

Tác động và ảnh hưởng

  • Tác động học thuật: Đặt nền móng học thuật vững chắc cho chuyên ngành Đo lường và Đánh giá trong Giáo dục tại Việt Nam ở mảng đào tạo ngoại ngữ chuyên ngành. Mở ra hướng tiếp cận đo lường hiện đại trong việc thẩm định chất lượng bài thi bằng mô hình Rasch thay thế cho lý thuyết trắc nghiệm cổ điển (CTT).
  • Tác động đối với ngành Du lịch - Khách sạn: Thu hẹp khoảng cách giữa nhà trường và doanh nghiệp. Hệ thống bài thi đánh giá thực giúp sinh viên tốt nghiệp đáp ứng ngay yêu cầu nghiệp vụ quốc tế tại các chuỗi khách sạn 4-5 sao (Marriott, Accor, InterContinental...) mà không cần đào tạo lại về kỹ năng giao tiếp tiếng Anh.
  • Tác động chính sách: Cung cấp tài liệu tham khảo cốt lõi cho Vụ Đào tạo (Bộ VHTTDL) trong việc quy hoạch lại chương trình khung và chuẩn đầu ra các môn ngoại ngữ chuyên ngành cho khối trường du lịch cả nước.
  • Lợi ích xã hội: Giúp sinh viên trang bị năng lực cạnh tranh vượt trội, tự tin dịch chuyển lao động tự do trong khối ASEAN theo Thỏa thuận Công nhận Lẫn nhau về Nghề Du lịch (MRA-TP).

Đối tượng hưởng lợi

  • Nghiên cứu sinh & Giới học thuật: Tiếp cận một mô hình nghiên cứu mẫu mực kết hợp giữa phương pháp luận giáo dục học, ngôn ngữ học ứng dụng và kỹ thuật trắc lượng giáo dục tiên tiến; tham khảo quy trình xử lý dữ liệu bằng phần mềm Quest.
  • Giảng viên các trường Cao đẳng/Đại học Du lịch: Sở hữu cẩm nang chi tiết về kỹ thuật thiết kế bảng kiểm (rubrics), ngân hàng câu hỏi tình huống, và phương pháp tổ chức đánh giá tích hợp trên lớp học.
  • Cán bộ quản lý & Chuyên viên khảo thí: Có được công cụ và quy trình chuẩn hóa để quản lý chất lượng đào tạo, tổ chức các kỳ thi kết thúc học phần và thi tốt nghiệp bảo đảm tính giá trị, độ tin cậy và sự công bằng.
  • Nhà tuyển dụng doanh nghiệp du lịch: Dễ dàng định vị chính xác năng lực thực tế của ứng viên thông qua bảng điểm mô tả năng lực chi tiết thay vì điểm số lý thuyết thuần túy.
  • Sinh viên chuyên ngành Du lịch - Khách sạn: Thụ hưởng phương pháp học tập tích cực, hiểu rõ tiêu chí đánh giá để chủ động tự học, tự rèn luyện kỹ năng nghề nghiệp thực tế.

Câu hỏi chuyên sâu

1. Đóng góp lý thuyết độc đáo nhất của luận án là gì và đã mở rộng lý thuyết nào?

Đóng góp lý thuyết độc đáo nhất của luận án là việc xây dựng thành công Mô hình cấu trúc năng lực ngoại ngữ chuyên ngành tích hợp cho sinh viên giáo dục nghề nghiệp. Luận án đã mở rộng mô hình Năng lực ngôn ngữ giao tiếp của Bachman & Palmer (1996) và Khung kiểm tra ngôn ngữ chuyên ngành của Douglas (2000) bằng cách nhất thể hóa ba thành phần: Năng lực ngôn ngữ, Năng lực chiến lược và Năng lực thực hiện chuyên môn du lịch trong khuôn khổ mô hình dạy học CLIL. Năng lực ở đây không còn là sự cộng dồn cơ học của các mảnh kiến thức, mà là một biến ẩn phức hợp thể hiện qua khả năng giải quyết các nhiệm vụ nghề nghiệp thực tế.

2. Điểm đổi mới đột phá về phương pháp luận nghiên cứu so với các công trình trước đây tại Việt Nam?

So với các nghiên cứu trước đây tại Việt Nam vốn chủ yếu dừng lại ở khảo sát định tính hoặc thống kê mô tả cổ điển (CTT), luận án đã tạo bước đột phá phương pháp luận khi ứng dụng Mô hình đo lường Rasch (Item Response Theory) thông qua phần mềm Quest để chuẩn hóa công cụ đánh giá. Phương pháp này cho phép định cỡ độ khó của câu hỏi và năng lực của người học trên cùng một thước đo logit tuyến tính, kiểm soát chỉ số độ khớp Infit/Outfit MNSQ, từ đó loại bỏ hoàn toàn tính chủ quan trong việc xây dựng đề thi và thiết lập bảng tiêu chí chấm điểm (rubrics) có độ tin cậy khoa học cao.

3. Phát hiện bất ngờ nhất từ dữ liệu thực nghiệm là gì?

Phát hiện bất ngờ và giàu giá trị thực tiễn nhất là tính không tương thích nghiêm trọng của các bài thi trắc nghiệm ngữ pháp truyền thống đối với năng lực thực hành nghề. Dữ liệu thực nghiệm chỉ ra rằng nhiều sinh viên đạt điểm số rất cao trong bài kiểm tra ngữ pháp/từ vựng rời rạc nhưng lại hoàn toàn lúng túng và thất bại khi thực hiện các nhiệm vụ giao tiếp nghiệp vụ thực tế (như xử lý tình huống khách phàn nàn qua điện thoại). Ngược lại, khi áp dụng công cụ đánh giá xác thực tích hợp rubric, khả năng phản xạ và xử lý nghiệp vụ của sinh viên được kích hoạt và phân loại chính xác theo chuẩn nghề nghiệp.

4. Luận án có cung cấp quy trình/giao thức chuẩn để tái lập (Replication Protocol) không?

Có. Luận án cung cấp bộ quy trình chi tiết, đóng gói hoàn chỉnh thành các cẩm nang chỉ dẫn bao gồm:

  • Quy trình 6 bước xác định chuẩn đầu ra năng lực NNCN môn học.
  • Quy trình 5 bước biên soạn câu hỏi trắc nghiệm khách quan MCQ chuyên ngành.
  • Quy trình 6 bước xây dựng nhiệm vụ giao tiếp đóng vai (Role-play) và dự án (Project).
  • Bảng đặc tả kỹ thuật (test specifications), ma trận đề thi và hệ thống Rubrics phân tích chi tiết cho 4 kỹ năng trong môn tiếng Anh Quản trị khách sạn, cho phép bất kỳ cơ sở đào tạo nào cũng có thể tái lập và áp dụng chính xác.

5. Chương trình nghị sự 10 năm tiếp theo được định hình như thế nào?

Chương trình nghiên cứu dài hạn hướng tới: (1) Số hóa toàn bộ ngân hàng câu hỏi chuẩn hóa Rasch để phát triển hệ thống khảo thí thích ứng trên máy tính (CAT - Computerized Adaptive Testing); (2) Mở rộng xây dựng chuẩn đánh giá sang các ngôn ngữ khác (tiếng Pháp, tiếng Trung, tiếng Hàn, tiếng Nhật chuyên ngành du lịch); (3) Xây dựng hệ thống liên kết đo lường giữa chuẩn đầu ra của nhà trường với hệ thống cấp chứng chỉ nghề quốc gia và khu vực ASEAN.

Kết luận

  1. Luận án đã giải quyết trọn vẹn và xuất sắc một vấn đề lý luận và thực tiễn cấp bách: Đổi mới căn bản hoạt động đánh giá kết quả học tập ngoại ngữ chuyên ngành theo tiếp cận năng lực cho hệ thống các trường Cao đẳng Du lịch ở Việt Nam.
  2. Công trình xác lập hệ thống cơ sở khoa học liên ngành vững chắc, kết hợp hài hòa giữa lý luận đo lường giáo dục hiện đại, ngôn ngữ học ứng dụng và tiêu chuẩn kỹ năng nghề du lịch quốc tế.
  3. Đánh giá toàn diện bức tranh thực trạng khảo thí tại 8 trường CĐDL trực thuộc Bộ VHTTDL trên toàn quốc, chỉ rõ các điểm nghẽn về nhận thức, công cụ và quy trình kiểm tra đánh giá.
  4. Đề xuất 3 nhóm giải pháp đồng bộ có tính khả thi và ứng dụng cao: Xây dựng chuẩn đầu ra tích hợp; Thiết kế công cụ đánh giá xác thực đa dạng; Triển khai đánh giá tích hợp trong quá trình dạy học.
  5. Xây dựng và chuẩn hóa thành công bộ chuẩn đầu ra cùng 5 bộ đề thi thực nghiệm môn tiếng Anh chuyên ngành Quản trị khách sạn tại Trường CĐDL Hà Nội, được kiểm định chất lượng khoa học bằng mô hình Rasch và phần mềm Quest.
  6. Mở ra 3 hướng nghiên cứu mới đầy tiềm năng: Đánh giá thích ứng trên máy tính cho giáo dục nghề nghiệp; Nghiên cứu tác động washback dài hạn đối với thị trường lao động; Mở rộng mô hình đánh giá tích hợp CLIL-Rasch sang các khối ngành kỹ thuật và dịch vụ khác trên phạm vi toàn quốc.