Tổng quan về luận án

Bối cảnh giáo dục thế kỷ XXI chứng kiến sự bùng nổ của tri thức khoa học kỹ thuật và công nghệ hiện đại, đặt ra yêu cầu cấp thiết về việc chuyển dịch từ mô hình giáo dục tiếp cận nội dung (hàn lâm, nặng về truyền thụ lý thuyết và tái hiện thông tin) sang mô hình giáo dục tiếp cận năng lực (phát triển phẩm chất, năng lực thực hành và giải quyết vấn đề thực tiễn). Tại Việt Nam, Nghị quyết số 29-NQ/TW của Hội nghị Trung ương 8 khóa XI đã khẳng định đổi mới căn bản hình thức, phương pháp thi, kiểm tra và đánh giá kết quả giáo dục, đào tạo theo hướng đánh giá năng lực người học là khâu đột phá chiến lược. Trong hệ thống giáo dục phổ thông, môn Công nghệ giữ vai trò cầu nối then chốt giữa lý thuyết khoa học với ứng dụng thực tiễn sản xuất, bao hàm các lĩnh vực kỹ thuật đa dạng như cơ khí, chế tạo, điện - điện tử và động cơ đốt trong. Tuy nhiên, hoạt động kiểm tra đánh giá môn học này trong nhiều thập kỷ vẫn mang nặng tính ghi nhớ tái hiện, thiếu các công cụ đo lường chuẩn hóa và chưa lượng hóa được đường phát triển năng lực của học sinh.

Khoảng trống nghiên cứu (research gap) cốt lõi nằm ở sự vắng bóng của một khung chuẩn năng lực kỹ thuật chuyên biệt và hệ thống công cụ đo lường dựa trên lý thuyết trắc lượng hiện đại (Modern Psychometrics) để đánh giá năng lực công nghệ bậc trung học phổ thông. Mặc dù các nghiên cứu quốc tế của Robert Glaser (1963) về đánh giá theo tiêu chí hay Benjamin Bloom (1956) về phân loại mục tiêu nhận thức đã đặt nền móng cho đo lường giáo dục, việc vận dụng các mô hình này vào môn Công nghệ - phần Công nghiệp tại Việt Nam vẫn chỉ dừng lại ở các đề xuất chung chung, thiếu căn cứ thực nghiệm chuẩn hóa. Luận án tiến sĩ "Đánh giá kết quả học tập trong dạy học môn Công nghệ bậc trung học phổ thông theo tiếp cận năng lực" của nghiên cứu sinh Ngô Văn Tới, dưới sự hướng dẫn khoa học của PGS. Trần Khánh Đức tại Trường Đại học Bách khoa Hà Nội (Chuyên ngành: Lý luận và phương pháp dạy học kỹ thuật, Mã số: 9140110), kế thừa một phần kết quả từ Đề tài khoa học cấp Bộ mã số B2015-01-112, đã giải quyết trực diện khoảng trống khoa học này.

Nghiên cứu xác lập hệ thống câu hỏi nghiên cứu và giả thuyết khoa học cụ thể:

  • Câu hỏi nghiên cứu 1 (RQ1): Cấu trúc năng lực công nghệ và đường phát triển các năng lực thành phần của học sinh trung học phổ thông trong môn Công nghệ - phần Công nghiệp được mô hình hóa như thế nào?
  • Câu hỏi nghiên cứu 2 (RQ2): Quy trình xác định chuẩn năng lực và thiết kế bộ công cụ trắc nghiệm đồ họa kết hợp mã hóa đa phân (polytomous scoring) theo Lý thuyết Ứng đáp Câu hỏi (Item Response Theory - IRT) có đạt độ tin cậy và độ giá trị chuẩn mực không?
  • Câu hỏi nghiên cứu 3 (RQ3): Việc ứng dụng bộ công cụ và quy trình kiểm tra đánh giá theo tiếp cận năng lực có tạo ra sự khác biệt mang ý nghĩa thống kê về kết quả học tập và năng lực thực hành công nghệ của học sinh so với phương pháp truyền thống?
  • Giả thuyết khoa học (H1): Nếu xác định được khung chuẩn năng lực, bộ tiêu chí, đường phát triển năng lực và quy trình đánh giá dựa trên mô hình trắc lượng hiện đại (Rasch Model/IRT), đồng thời tích hợp phương pháp trắc nghiệm đồ họa vào quá trình dạy học môn Công nghệ, sẽ đo lường chính xác mức độ phát triển năng lực và nâng cao rõ rệt chất lượng dạy học môn học này ở trường trung học phổ thông.

Khung lý thuyết của luận án tích hợp Lý thuyết Phát triển Năng lực của Glaser (1963), Thang đo Nhận thức cải tiến của Bloom-Anderson, Lý thuyết Ứng đáp Câu hỏi (IRT / Rasch 1-PL & Partial Credit Model), cùng lý luận dạy học kỹ thuật hiện đại. Đóng góp đột phá của luận án là chuẩn hóa 6 năng lực chuyên biệt môn Công nghệ, thiết lập ma trận năng lực 5 mức độ, ứng dụng phần mềm chuyên dụng Quest và ConQuest để cân bằng độ khó câu hỏi ($\beta$) với năng lực người học ($\theta$), và thực nghiệm thành công trên quy mô mẫu diện rộng tại 3 tỉnh đại diện miền Bắc (Nam Định, Vĩnh Phúc, Phú Thọ) trong giai đoạn 2015–2019.

Literature Review và Positioning

Lịch sử nghiên cứu đánh giá kết quả học tập trên thế giới trải qua hai bước chuyển dịch mang tính thời đại. Giai đoạn trước thập niên 1990 bị chi phối bởi tiếp cận nội dung và Lý thuyết Trắc nghiệm Cổ điển (Classical Test Theory - CTT). Các công trình tiên phong của Arkhalghelxki (1938), X. Ivanov và Krirosava tại Liên Xô (cũ) đã phân tích các nguyên tắc kiểm tra tính hệ thống, liên tục và khách quan trong việc chấm điểm tri thức của học sinh. Terman Lewis Madison (1916) với bài thi trắc nghiệm Stanford-Binet và Benjamin Bloom (1956) với hệ thống phân loại mục tiêu giáo dục (Nhận thức, Tâm vận, Tình cảm) đã hình thành các công cụ đo lường chuẩn hóa. Tuy nhiên, hạn chế cố hữu của trắc nghiệm cổ điển trong giai đoạn này là chỉ đánh giá khả năng ghi nhớ sự kiện đơn lẻ, phụ thuộc mẫu (sample-dependent), mang tính hàn lâm và không đo lường được khả năng ứng dụng tri thức vào các bối cảnh kỹ thuật phức tạp.

Bước ngoặt lý thuyết diễn ra khi Robert Glaser (1963) công bố công trình phân định ranh giới giữa kiểm tra tham chiếu tiêu chí (Criterion-Referenced Testing - CRT) và kiểm tra tham chiếu chuẩn mực (Norm-Referenced Testing - NRT). Glaser định nghĩa tiêu chí như một đường phát triển liên tục (continuum) phản ánh sự tiến bộ năng lực từ mức sơ cấp đến thuần thục. Song song đó, sự trỗi dậy của Lý thuyết Ứng đáp Câu hỏi (Item Response Theory - IRT) khởi xướng bởi Georg Rasch (1960) và phát triển bởi Wright & Masters (1982) đã cung cấp công cụ toán học tối ưu để giải phóng tham số độ khó câu hỏi khỏi phân phối mẫu, cho phép đo lường khách quan các cấu trúc tâm lý - năng lực tiềm ẩn (latent traits).

Tại Việt Nam, các nghiên cứu lý luận đánh giá giáo dục của Trần Bá Hoành (1995), Lâm Quang Thiệp (2011), Hà Thị Đức, Nguyễn Đình Chỉnh và Trần Khánh Đức (2014) đã hệ thống hóa các phương pháp đo lường, quy trình thiết kế đề kiểm tra và nhấn mạnh tính khách quan trong khảo thí. Tuy nhiên, tồn tại một cuộc tranh luận học thuật lớn giữa hai quan điểm:

  • Quan điểm 1: Đánh giá năng lực môn kỹ thuật chỉ có thể thực hiện thông qua quan sát thao tác thực hành trực tiếp tại xưởng hoặc phòng thí nghiệm, dẫn đến khó khăn trong việc chuẩn hóa diện rộng và tốn kém chi phí.
  • Quan điểm 2: Có thể đo lường năng lực công nghệ thông qua các bài kiểm tra viết tích hợp bối cảnh thực tiễn, bản vẽ kỹ thuật và mô hình hóa trực quan nếu sử dụng phương pháp trắc nghiệm đồ họa kết hợp thang đo Rasch đa phân.
[Tiếp cận Cổ điển / Nội dung (CTT)] ---> [Tranh luận Phương pháp] ---> [Tiếp cận Hiện đại / Năng lực (IRT)]
  Arkhalghelxki (1938), Bloom (1956)        Thao tác xưởng vs. Trắc nghiệm     Glaser (1963), Rasch (1960), Ngô Văn Tới (2019)

Luận án của Ngô Văn Tới định vị chính xác tại điểm giao thoa giữa Lý thuyết Trắc lượng Hiện đại (IRT) và Lý luận Dạy học Kỹ thuật Thực hành. So sánh với các khung đánh giá quốc tế như Tiêu chuẩn Năng lực Công nghệ (Standards for Technological Literacy - STL) của Hiệp hội Giáo dục Kỹ thuật và Công nghệ Quốc tế Hoa Kỳ (ITEEA) và khung đánh giá năng lực khoa học - kỹ thuật của PISA (OECD), luận án đã bản địa hóa xuất sắc các tiêu chí quốc tế vào chương trình Công nghệ lớp 11 (Vẽ kỹ thuật, Cơ khí, Động cơ đốt trong) và lớp 12 (Kỹ thuật điện, Điện tử) tại Việt Nam, lấp đầy khoảng trống giữa lý thuyết đo lường trừu tượng và thực tiễn lớp học phổ thông.

Đóng góp lý thuyết và khung phân tích

Đóng góp cho lý thuyết

Luận án đã mở rộng lý thuyết đánh giá tham chiếu tiêu chí của Robert Glaser (1963) và mô hình trắc lượng Rasch (1960) bằng việc xây dựng cấu trúc giải phẫu 6 năng lực chuyên biệt trong giáo dục công nghệ phổ thông:

  1. Năng lực nhận thức công nghệ: Khả năng nhận biết, giải thích nguyên lý, bản chất của các đối tượng kỹ thuật và sơ đồ công nghệ.
  2. Năng lực giao tiếp công nghệ: Khả năng đọc, phân tích, biểu diễn và truyền đạt thông tin kỹ thuật thông qua ngôn ngữ bản vẽ, ký hiệu quy ước và tài liệu kỹ thuật.
  3. Năng lực thiết kế kĩ thuật: Khả năng phát hiện vấn đề kỹ thuật, hình thành ý tưởng, tính toán thông số và lập bản vẽ thiết kế nguyên lý/kết cấu.
  4. Năng lực giải quyết vấn đề và sáng tạo công nghệ: Khả năng phân tích sự cố kỹ thuật, đề xuất các phương án cải tiến và tối ưu hóa giải pháp công nghệ.
  5. Năng lực sử dụng công nghệ: Khả năng khai thác, vận hành thiết bị kỹ thuật đúng quy trình, đảm bảo an toàn lao động và bảo trì định kỳ.
  6. Năng lực đánh giá và lựa chọn công nghệ: Khả năng so sánh, phản biện về tính năng, độ bền, hiệu quả kinh tế, tính thẩm mỹ và tác động môi trường để đưa ra quyết định lựa chọn sản phẩm kỹ thuật phù hợp.
+-----------------------------------------------------------------------------------+
|                        CẤU TRÚC NĂNG LỰC CÔNG NGHỆ THPT                           |
+-----------------------------------------------------------------------------------+
|  1. Nhận thức công nghệ         <--->  2. Giao tiếp công nghệ (Đọc/vẽ kỹ thuật)   |
|  3. Thiết kế kĩ thuật           <--->  4. Giải quyết vấn đề & Sáng tạo công nghệ  |
|  5. Sử dụng công nghệ           <--->  6. Đánh giá và Lựa chọn công nghệ          |
+-----------------------------------------------------------------------------------+

Hệ thống mệnh đề lý thuyết (Theoretical Propositions) được xác lập:

  • Mệnh đề 1 ($P_1$): Năng lực công nghệ là một cấu trúc đa chiều, phát triển theo tiến trình liên tục (continuum) gồm 5 mức độ tăng dần: (Mức 1) Nhận biết đơn lẻ $\rightarrow$ (Mức 2) Hiểu và xác định đặc tính $\rightarrow$ (Mức 3) Phân tích, so sánh cấu tạo và tác động $\rightarrow$ (Mức 4) Đánh giá tổng hợp và dự đoán xu thế $\rightarrow$ (Mức 5) Ra quyết định lựa chọn và sáng tạo giải pháp trong bối cảnh thực tiễn.
  • Mệnh đề 2 ($P_2$): Năng lực kỹ thuật của học sinh không tồn tại độc lập mà được phản ánh thông qua chuỗi chỉ số hành vi quan sát được (observable behavioral indicators) gắn liền với mạch nội dung môn học.
  • Mệnh đề 3 ($P_3$): Độ khó của nhiệm vụ nhận thức kỹ thuật và mức năng lực của học sinh có thể được định vị đồng mức trên cùng một thước đo khoảng (logit scale) thông qua hàm phân phối logistic của mô hình Rasch.

Khung phân tích độc đáo

Khung phân tích của luận án tích hợp 3 trụ cột lý thuyết: Lý thuyết Kiến tạo (Constructivism), Quy trình Thiết kế Kỹ thuật (Engineering Design Process) và Lý thuyết Trắc lượng Hiện đại (IRT). Tiếp cận phân tích độc đáo của nghiên cứu thể hiện qua phương pháp Trắc nghiệm đồ họa (Graphic-based Testing) kết hợp kỹ thuật mã hóa dữ liệu phản ứng đa phân (Polytomous Scoring).

Thay vì sử dụng các câu hỏi trắc nghiệm chữ truyền thống chỉ đo lường trí nhớ máy móc, trắc nghiệm đồ họa sử dụng sơ đồ mạch điện, bản vẽ cơ khí, sơ đồ động lực học máy xát gạo, cấu tạo hệ thống phun xăng điện tử (EFI) làm kích thích nhận thức (cognitive stimulus). Quy trình mã hóa phản ứng của học sinh được thiết lập chặt chẽ:

  • Mã 0: Hiểu sai bản chất, tiếp cận sai hướng hoặc không thực hiện;
  • Mã 1: Đạt mức nhận biết sơ cấp (xác định linh kiện, đọc thông số nhãn mác);
  • Mã 2: Đạt mức hiểu và phân tích trung cấp (giải thích nguyên lý, vẽ sơ đồ khối);
  • Mã 3: Đạt mức làm chủ và sáng tạo cao cấp (tối ưu hóa thiết kế, so sánh toàn diện về kinh tế - kỹ thuật - môi trường).

Điều kiện biên (boundary conditions) của khung phân tích được xác lập nghiêm ngặt: Áp dụng cho học sinh trung học phổ thông (lớp 11 và lớp 12) học phần Công nghiệp, trong điều kiện cơ sở vật chất phòng học và xưởng thực hành theo chuẩn phổ thông Việt Nam.

Phương pháp nghiên cứu tiên tiến

Thiết kế nghiên cứu

Luận án quán triệt thế giới quan thực chứng tiến bộ kết hợp thực tế phê phán (Pragmatic Critical Realism). Thiết kế nghiên cứu hỗn hợp giải thích tiếp nối (Sequential Explanatory Mixed-Methods Design) được triển khai qua hai giai đoạn lớn: Giai đoạn 1 (Định tính) xây dựng khung chuẩn năng lực thông qua phân tích tài liệu và phương pháp chuyên gia Delphi; Giai đoạn 2 (Định lượng) kiểm định công cụ đo lường và thực nghiệm sư phạm đối chứng (Quasi-experimental Pretest-Posttest Non-equivalent Control Group Design).

[Giai đoạn 1: Định tính] 
Nghiên cứu tài liệu -> Khung năng lực sơ bộ -> Chuyên gia Delphi -> Bộ chuẩn 6 năng lực
         |
         v
[Giai đoạn 2: Định lượng]
Thiết kế đề trắc nghiệm đồ họa -> Thử nghiệm mẫu -> Phân tích IRT (Quest/ConQuest) 
-> Thực nghiệm sư phạm (Lớp TN vs Lớp ĐC) -> Kiểm định t-test & Thước đo Logit

Thiết kế đa cấp độ (multi-level design) được kiểm soát nghiêm ngặt:

  • Cấp độ vĩ mô: Mục tiêu chương trình giáo dục phổ thông môn Công nghệ;
  • Cấp độ trung mô: Năng lực sư phạm và phương pháp giảng dạy của giáo viên tại các trường THPT;
  • Cấp độ vi mô: Mức năng lực, hành vi và phản ứng nhận thức của từng học sinh trước các câu hỏi kiểm tra.

Quy trình nghiên cứu rigorous

Quy trình nghiên cứu bao gồm các bước kiểm soát chất lượng dữ liệu:

  1. Chiến lược chọn mẫu: Sử dụng phương pháp chọn mẫu phân tầng cụm (Stratified Cluster Sampling) trên địa bàn 3 tỉnh miền Bắc đại diện cho các vùng kinh tế - xã hội: Nam Định (vùng đồng bằng ven biển), Vĩnh Phúc (vùng kinh tế công nghiệp phát triển), Phú Thọ (vùng trung du miền núi). Mẫu khảo sát thực trạng gồm 150 giáo viên và 600 học sinh; mẫu thực nghiệm sư phạm gồm các cặp lớp đối chứng (ĐC) và thực nghiệm (TN) tương đương về trình độ xuất phát.
  2. Giao thức thu thập dữ liệu: Sử dụng bộ phiếu hỏi chuẩn hóa, phiếu quan sát sư phạm giờ dạy, bảng kiểm Rubric và đề kiểm tra trắc nghiệm đồ họa được hiệu chỉnh qua 2 vòng thử nghiệm sơ bộ.
  3. Kỹ thuật Tam giác đạc (Triangulation): Kết hợp tam giác đạc phương pháp (Methodological Triangulation: phiếu hỏi + quan sát + bài kiểm tra năng lực), tam giác đạc nguồn dữ liệu (Data Triangulation: giáo viên + học sinh + chuyên gia giáo dục kỹ thuật), và tam giác đạc lý thuyết (Theory Triangulation: tâm lý học nhận thức + đo lường giáo dục).
  4. Độ giá trị và độ tin cậy: Độ giá trị cấu trúc (construct validity) được thẩm định qua phân tích nhân tố và bảng ma trận đặc tả năng lực. Độ tin cậy (reliability) của bài đo đạt hệ số Cronbach's $\alpha = 0.842$, chỉ số phân cách (Item Separation Index) đạt trên 2.0, chỉ số tin cậy mẫu (Person Reliability) đạt $0.81$.

Data và phân tích

Dữ liệu được xử lý bằng các công cụ toán thống kê và phần mềm trắc lượng chuyên dụng:

  • Phần mềm trắc lượng Quest và ConQuest: Ước lượng tham số độ khó của từng câu hỏi ($b_i$) và tham số năng lực của học sinh ($\theta_n$) theo mô hình Rasch. Các chỉ số thống kê phản ánh độ phù hợp (Fit Statistics) như giá trị trung bình bình phương phần dư chuẩn hóa (Infit MNSQ và Outfit MNSQ) của các câu hỏi đều nằm trong khoảng chấp nhận nghiêm ngặt từ $0.70$ đến $1.30$; chỉ số thống kê $t$ nằm trong khoảng $-2.0 \le t \le +2.0$.
  • Phần mềm SPSS 22.0: Xử lý thống kê mô tả, kiểm định phân phối chuẩn Kolmogorov-Smirnov, kiểm định tham số Independent Samples t-test và Paired Samples t-test giữa nhóm thực nghiệm (TN) và đối chứng (ĐC).
  • Phân tích kích thước ảnh hưởng (Effect Size): Đánh giá mức độ tác động của biện pháp can thiệp thông qua chỉ số Cohen's $d$ ($d = \frac{\bar{X}{TN} - \bar{X}{ĐC}}{SD_{pooled}}$) với độ tin cậy $95%$ (Confidence Intervals).
+------------------------------------------------------------------------------------+
|               THÔNG SỐ TRẮC LƯỢNG MÔ HÌNH RASCH (PHẦN MỀM QUEST/CONQUEST)          |
+----------------------+--------------------+---------------------+------------------+
| Chỉ số Trắc lượng    | Giá trị Chuẩn tắc  | Kết quả Thực nghiệm | Đánh giá         |
+----------------------+--------------------+---------------------+------------------+
| Infit MNSQ           | 0.70 - 1.30        | 0.85 - 1.18         | Hoàn hảo         |
| Outfit MNSQ          | 0.70 - 1.30        | 0.78 - 1.22         | Hoàn hảo         |
| Thống kê T           | -2.00 <= t <= 2.00 | -1.45 <= t <= 1.62  | Độ khớp tuyệt đối|
| Cronbach's Alpha     | > 0.80             | 0.842               | Độ tin cậy cao   |
| Dải độ khó (Logit)   | Trải đều           | -2.15 đến +1.20     | Phân hóa tối ưu  |
+----------------------+--------------------+---------------------+------------------+

Phát hiện đột phá và implications

Những phát hiện then chốt

Nghiên cứu mang lại 4 phát hiện thực nghiệm mang tính đột phá:

  • Phát hiện 1: Xác lập tính giá trị của đường phát triển năng lực 5 mức độ. Kết quả xử lý trắc lượng trên ConQuest chứng minh các câu hỏi kiểm tra có độ khó logit trải đều từ $-2.15$ đến $+1.20$, hoàn toàn tương thích với các mức năng lực giả định ban đầu. Dữ liệu thực nghiệm khẳng định học sinh không phát triển năng lực theo đường thẳng đơn giản mà theo mô hình nấc thang tích lũy, trong đó bước nhảy nhận thức từ Mức 3 (Phân tích/So sánh cấu tạo, nguyên lý) lên Mức 4 (Đánh giá hiệu quả, dự đoán xu thế công nghệ) là điểm nút có độ phân hóa cao nhất.

  • Phát hiện 2: Hiệu quả vượt trội của phương pháp trắc nghiệm đồ họa đối với năng lực tư duy kỹ thuật. Dữ liệu từ thực nghiệm cho thấy các câu hỏi trắc nghiệm đồ họa mô phỏng hệ thống phun xăng điện tử Future 125 FI (so sánh với bộ chế hòa khí), máy bóc vỏ lạc, máy xay xát gạo đạt chỉ số phân cách item $D > 0.45$. Phương pháp này giúp phát hiện chính xác các lỗi nhận thức về nguyên lý hoạt động và không gian kết cấu mà các câu hỏi trắc nghiệm chữ truyền thống hoàn toàn bỏ sót.

  • Phát hiện 3: Sự tiến bộ vượt bậc mang ý nghĩa thống kê của nhóm thực nghiệm. Trước thực nghiệm, kiểm định t-test giữa nhóm TN và ĐC cho thấy không có sự khác biệt có ý nghĩa thống kê ($p > 0.05, t_{calc} < t_{crit}$). Sau khi áp dụng quy trình kiểm tra đánh giá theo tiếp cận năng lực kết hợp phản hồi Rubric chi tiết, kết quả sau thực nghiệm ghi nhận điểm trung bình năng lực của nhóm TN cao hơn rõ rệt nhóm ĐC ($p < 0.001$, Cohen's $d = 0.78$, biểu thị mức độ tác động lớn).

Điểm Năng lực Trung bình:
Trước TN:  Nhóm TN: [====5.12====]  vs  Nhóm ĐC: [====5.08====]  (p = 0.68 > 0.05, Khác biệt không có ý nghĩa)
Sau TN:    Nhóm TN: [=======7.45=======]  vs  Nhóm ĐC: [=====5.82=====]  (p < 0.001, Khác biệt cực kỳ ý nghĩa)
  • Phát hiện 4: Phản ứng ngược (Counter-intuitive Result) về thói quen học tập. Một bộ phận học sinh có điểm số lý thuyết truyền thống cao (thuộc nhóm khá giỏi ghi nhớ) lại gặp khó khăn nghiêm trọng ở các câu hỏi đánh giá mức 4 và mức 5 khi yêu cầu ra quyết định lựa chọn thiết bị công nghệ gắn với ràng buộc ngân sách kinh tế và tác động môi trường. Điều này phản ánh thực trạng "học vẹt công nghệ" và khẳng định tính ưu việt của khung đánh giá mới trong việc đo lường năng lực hành động thực tế.

Implications đa chiều

  • Về mặt lý thuyết: Bổ sung vào hệ thống lý luận dạy học kỹ thuật một khung lý thuyết hoàn chỉnh về đánh giá năng lực công nghệ, cung cấp mô hình toán học trắc lượng Rasch đã được thực nghiệm hóa trong môi trường giáo dục phổ thông Việt Nam.
  • Về mặt phương pháp luận: Chuẩn hóa quy trình 5 bước thiết kế công cụ đo lường năng lực (Phát triển bản đồ năng lực $\rightarrow$ Thiết kế nhiệm vụ trắc nghiệm đồ họa $\rightarrow$ Xây dựng Rubric chấm điểm đa phân $\rightarrow$ Cân bằng tham số IRT $\rightarrow$ Chuẩn hóa đường phát triển), tạo tiền lệ khoa học cho việc đánh giá năng lực trong các môn học STEM khác.
  • Về mặt thực tiễn: Cung cấp cho giáo viên THPT bộ ngân hàng câu hỏi chuẩn hóa, các ma trận Rubric đánh giá năng lực và biểu mẫu báo cáo tiến trình phát triển năng lực của từng học sinh, giúp chuyển đổi việc đánh giá từ "chấm điểm tổng kết" sang "đánh giá vì sự tiến bộ học tập" (Assessment for Learning).
  • Về mặt chính sách: Cung cấp luận cứ khoa học thực chứng để Bộ Giáo dục và Đào tạo xây dựng chuẩn đánh giá môn Công nghệ trong Chương trình Giáo dục phổ thông 2018, định hướng phân luồng nghề nghiệp kỹ thuật sớm cho học sinh THPT.

Limitations và Future Research

Nghiên cứu thẳng thắn thừa nhận 4 giới hạn khoa học cần tiếp tục hoàn thiện:

  1. Giới hạn không gian chọn mẫu: Địa bàn thực nghiệm tập trung chủ yếu tại 3 tỉnh phía Bắc (Nam Định, Vĩnh Phúc, Phú Thọ). Mặc dù đã đại diện cho 3 vùng địa hình, tính đại diện cho học sinh các tỉnh phía Nam và Tây Nguyên cần được kiểm chứng thêm.
  2. Giới hạn về phương thức kiểm tra: Công cụ trắc nghiệm đồ họa trong luận án được triển khai chủ yếu trên giấy (Paper-and-Pencil Testing). Việc thiếu hệ thống kiểm tra thích ứng trên máy tính (Computerized Adaptive Testing - CAT) hạn chế khả năng tự động hóa điều chỉnh độ khó câu hỏi theo thời gian thực.
  3. Giới hạn về thiết bị xưởng thực hành: Một số chỉ số hành vi cấp cao của năng lực sử dụng công nghệ (thao tác vận hành máy móc thực tế) phải đo lường gián tiếp qua bảng kiểm quan sát và bài tập tình huống mô phỏng do hạn chế về trang thiết bị tại các trường phổ thông.

Chương trình nghiên cứu 10 năm tiếp theo (Future Research Agenda) định hướng:

  • Mở rộng ứng dụng mô hình Trắc nghiệm Thích ứng trên Máy tính (CAT) kết hợp thuật toán AI để tự động chẩn đoán điểm nghẽn nhận thức của học sinh;
  • Nghiên cứu tích hợp công nghệ thực tế ảo (VR) và thực tế tăng cường (AR) vào kiểm tra đánh giá kỹ năng thao tác kỹ thuật phức tạp;
  • Xây dựng chuẩn đánh giá năng lực liên môn STEM (Science, Technology, Engineering, Mathematics) dựa trên nền tảng trắc lượng IRT đa chiều (Multidimensional IRT).

Tác động và ảnh hưởng

Luận án tạo ra tác động lan tỏa sâu rộng trên nhiều bình diện:

  • Ảnh hưởng học thuật: Thiết lập chuẩn mực đo lường mới trong ngành Lý luận và Phương pháp Dạy học Kỹ thuật tại Việt Nam; mở ra hướng nghiên cứu ứng dụng trắc lượng học hiện đại vào giáo dục nghề nghiệp và kỹ thuật phổ thông với tiềm năng trích dẫn cao trên các tạp chí thuộc danh mục Scopus, DOAJ và tạp chí chuyên ngành quốc gia (Tạp chí Giáo dục, Tạp chí Khoa học Giáo dục Việt Nam).
  • Chuyển đổi giáo dục và đào tạo giáo viên: Cung cấp tài liệu đào tạo, bồi dưỡng phương pháp khảo thí năng lực cho hàng ngàn giảng viên, sinh viên các trường Đại học Sư phạm Kỹ thuật (ĐHSP Kỹ thuật Hà Nội, ĐHSP Hà Nội, ĐH Bách khoa Hà Nội) và giáo viên dạy môn Công nghệ trên toàn quốc.
  • Tác động chính sách: Đóng góp trực tiếp vào quá trình triển khai Nghị quyết 29-NQ/TW và việc thực thi Chương trình Giáo dục phổ thông 2018 của Bộ Giáo dục và Đào tạo, hỗ trợ quá trình đổi mới thi cử theo hướng đánh giá năng lực thực chất.
  • Lợi ích kinh tế - xã hội: Góp phần nâng cao chất lượng giáo dục hướng nghiệp, giúp học sinh THPT định hình rõ năng khiếu kỹ thuật, từ đó giảm tỷ lệ thất nghiệp và chọn sai ngành nghề khi bước vào bậc đại học kỹ thuật hoặc trường nghề.

Đối tượng hưởng lợi

  • Nghiên cứu sinh và Học viên cao học chuyên ngành Giáo dục học: Tiếp cận khung phương pháp luận trắc lượng học hiện đại (Rasch Model/IRT) và quy trình xử lý dữ liệu bằng Quest/ConQuest để ứng dụng vào các đề tài đo lường giáo dục.
  • Giảng viên và Nhà nghiên cứu Lý luận dạy học Kỹ thuật: Kế thừa bộ khung lý thuyết 6 năng lực công nghệ và hệ thống tiêu chí đánh giá để phát triển các giáo trình phương pháp dạy học chuyên ngành.
  • Giáo viên môn Công nghệ tại các trường THPT: Trực tiếp sử dụng ngân hàng đề kiểm tra trắc nghiệm đồ họa, các ma trận Rubric và phương pháp đánh giá quá trình để nâng cao chất lượng bài giảng và đánh giá học sinh chính xác.
  • Nhà quản lý giáo dục và Chuyên viên Sở/Phòng GD&ĐT: Sử dụng các biểu mẫu báo cáo phát triển năng lực để kiểm định chất lượng dạy học môn Công nghệ tại các cơ sở giáo dục.

Câu hỏi chuyên sâu

1. Đóng góp lý thuyết độc đáo nhất của luận án là gì và đã mở rộng lý thuyết nào? Đóng góp độc đáo nhất là việc mở rộng Lý thuyết Phát triển Năng lực của Robert Glaser (1963) và Mô hình Đo lường Rasch (1960) vào lĩnh vực giáo dục kỹ thuật phổ thông tại Việt Nam. Luận án đã cụ thể hóa khái niệm "đường phát triển năng lực" (competency continuum) trừu tượng thành 6 cấu trúc năng lực chuyên biệt với 5 mức độ nhận thức định lượng rõ ràng, giải quyết triệt để sự mơ hồ trong việc đo lường năng lực kỹ thuật.

2. Đổi mới phương pháp luận then chốt so với các nghiên cứu trước đây là gì? So với các nghiên cứu truyền thống của Arkhalghelxki (1938), Ivanov hay Bloom (1956) vốn dựa trên Lý thuyết Trắc nghiệm Cổ điển (CTT) và câu hỏi trắc nghiệm chữ, luận án đã tiên phong ứng dụng Trắc nghiệm đồ họa (Graphic-based testing) kết hợp Mã hóa phản ứng đa phân (Polytomous scoring) được chuẩn hóa qua mô hình IRT/Rasch. Điều này cho phép phân tích vi mô từng bước tư duy kỹ thuật của học sinh trên các bản vẽ và sơ đồ công nghệ.

3. Phát hiện bất ngờ nhất từ dữ liệu thực nghiệm là gì? Dữ liệu chỉ ra rằng học sinh đạt điểm số cao trong các bài kiểm tra lý thuyết truyền thống lại gặp sự sụt giảm nghiêm trọng khi đối mặt với các nhiệm vụ đánh giá Mức 4 và Mức 5 (đánh giá kinh tế - kỹ thuật và ra quyết định công nghệ trong bối cảnh thực tế). Điều này chứng minh phương pháp đánh giá cũ đã tạo ra "năng lực ảo" dựa trên trí nhớ ngắn hạn, trong khi bộ công cụ mới đo lường chính xác năng lực hành động thực tế.

4. Nghiên cứu có cung cấp giao thức tái lập (Replication Protocol) hoàn chỉnh không? Có. Luận án cung cấp giao thức chuẩn hóa 5 bước có thể tái lập hoàn toàn: (1) Bản đồ năng lực và ma trận hành vi; (2) Ngân hàng câu hỏi trắc nghiệm đồ họa kèm mã đề; (3) Hướng dẫn mã hóa chấm điểm chi tiết (Mã 0, 1, 2, 3, 8, 9); (4) Cú pháp (syntax) và thông số chạy phần mềm Quest/ConQuest; (5) Mẫu bảng kiểm Rubric và biểu mẫu báo cáo tiến trình phát triển năng lực của học sinh.

5. Lộ trình nghiên cứu 10 năm tới được phác thảo như thế nào? Lộ trình hướng tới 3 trụ cột: Chuyển đổi bộ công cụ trắc nghiệm đồ họa sang hệ thống Trắc nghiệm Thích ứng trên Máy tính (CAT); tích hợp công nghệ mô phỏng 3D/VR để đánh giá kỹ năng vận hành máy móc thời gian thực; và mở rộng mô hình trắc lượng IRT để đo lường năng lực giáo dục STEM tích hợp ở quy mô quốc gia.

Kết luận

Luận án tiến sĩ của NCS. Ngô Văn Tới đã hoàn thành xuất sắc các mục tiêu nghiên cứu với các giá trị cốt lõi:

  1. Xác lập hoàn chỉnh cơ sở lý luận và hệ thống 6 chuẩn năng lực chuyên biệt cho môn Công nghệ bậc trung học phổ thông.
  2. Tiên phong thiết kế và chuẩn hóa bộ công cụ đánh giá kết quả học tập bằng phương pháp trắc nghiệm đồ họa kết hợp mã hóa đa phân theo Lý thuyết Ứng đáp Câu hỏi (IRT).
  3. Chứng minh thực nghiệm tính giá trị và độ tin cậy của mô hình đo lường thông qua các chỉ số trắc lượng chuẩn mực trên phần mềm Quest và ConQuest (Infit/Outfit MNSQ từ $0.70$ đến $1.30$, dải độ khó logit từ $-2.15$ đến $+1.20$).
  4. Kiểm định thực nghiệm sư phạm khẳng định việc áp dụng quy trình kiểm tra đánh giá mới tạo ra sự tiến bộ vượt bậc, có ý nghĩa thống kê về năng lực công nghệ của học sinh ($p < 0.001$).
  5. Mở ra bước chuyển dịch mô hình (Paradigm shift) từ đánh giá nặng về kiến thức ghi nhớ sang đánh giá chuẩn hóa năng lực thực hành kỹ thuật, phục vụ trực tiếp công cuộc đổi mới căn bản, toàn diện giáo dục Việt Nam.