NGHIÊN CỨU GIÁ TRỊ XÁC THỰC ĐỐI VỚI QUÁ TRÌNH TƯ DUY CỦA THÍ SINH KHI THI PHẦN THI NÓI BÀI THI CHUẨN HÓA ĐÁNH GIÁ NĂNG LỰC TIẾNG ANH TỪ BẬC 3 ĐẾN BẬC 5 THEO KHUNG NĂNG LỰC NGOẠI NGỮ 6 BẬC DÙNG CHO VIỆT NAM (VSTEP.3-5)

• Tác giả: Nguyễn Thị Mai Hữu An
• Người hướng dẫn: Professor Hoa Nguyen
• Trường học: Vietnam National University, Hanoi University of Languages and International Studies
• Chuyên ngành: English Language Teaching Methodology
• Đề tài: An Investigation Into The Cognitive Validity Of The Speaking Section Of The Vietnamese Standardized Test Of English Proficiency (VSTEP.3-5)
• Loại tài liệu: Thesis
• Năm xuất bản: 2022
• Địa điểm: Hanoi

• STATEMENT OF AUTHORSHIP
• ACKNOWLEDGEMENT
• ABSTRACT
• CONTENTS
• 1. CHAPTER I: INTRODUCTION
• 1.1. Objectives of the study
• 1.2. Significance of the study
• 1.3. Scope of the study
• 1.4. Organization of the study
• 2. CHAPTER II: LITERATURE REVIEW
• 2.1. The concept of validity
• 2.2. Validation in language testing
• 2.3. The concept of cognitive validity
• 2.4. Cognitive validity and testing speaking
• 2.5. Cognitive validity in assessing speaking
• 2.6. A framework for establishing the cognitive validity in testing speaking
• 2.7. The socio-cognitive framework in different studies
• 3. CHAPTER III: THE VIETNAMESE STANDARDIZED TEST OF ENGLISH PROFICIENCY VSTEP.3-5
• 3.1. Decision to provide the VSTEP.3-5 test taker characteristics
• 3.2. The construct of the VSTEP.3-5 item writer training
• 3.3. Marking, grading and reporting results
• 4. CHAPTER IV: RESEARCH METHODOLOGY
• 4.1. Selection of participants
• 4.2. Data collection instruments
• 4.3. Test format and related documents
• 4.4. Speaking test form
• 4.5. Stimulated-recall interviews
• 5. CHAPTER V: THE COGNITIVE PROCESSES SUPPOSEDLY REPRESENTED IN THE VSTEP.3-5
• 5.1. The cognitive processes presented in the VSTEP.3-5 test development reports and related documents
• 5.2. Focus group interviews
• 5.3. Phonetic encoding, articulation
• 6. CHAPTER VI: THE CALIBRATION OF COGNITIVE DEMANDS IN THE VSTEP.3-5 SPEAKING RATING SCALE
• 6.1. Many-facet Rasch Model
• 6.2. Descriptor difficulty arrangement
• 7. CHAPTER VII: THE SPEAKING COGNITIVE PROCESSES IN VSTEP.3-5 SPEAKING TEST AND NON-TEST CONDITIONS
• 7.1. General information about the survey and stimulated recalls
• 7.2. The cognitive processes in VSTEP.3-5 speaking test and non-test conditions
• 7.3. Stimulated Recall Interviews
• 8. CHAPTER VIII: CONCLUSION
• 8.1. Summary of the findings
• 8.2. Cognitive processes that the VSTEP.3-5 test takers are supposed to experience
• 8.3. Calibration of cognitive demands across different levels of the VSTEP.3-5
• 8.4. Similarities between cognitive processes in VSTEP.3-5 speaking test and non-test conditions
• 8.5. Implications to VSTEP.3-5 speaking section administration, new language test development and validation, and Weir‘s socio cognitive framework development and administration
• 8.6. Language test development and validation
• 8.7. Weir‘s socio cognitive framework
• 8.8. Limitations and further studies
• THESIS RELATED PUBLICATIONS
• Appendix 2: Stimulated-recall interview protocol
• Appendix 3: Discussion points–Focus group of VSTEP.3-5 speaking test designers
• Appendix 4: Discussion points – Focus group of VSTEP.
• Appendix 5: Discussion points – Focus group of VSTEP.
• Appendix 6: Survey questionnaires with 288 VSTEP.
• Appendix 7: Stimulated recall interview questions
• Appendix 8: VSTEP.
• Appendix 9: VSTEP.3-5 speaking mark sheet
• Appendix 10: Summary of transcripts – Focus group of VSTEP.3-5 speaking test designers
• Appendix 11: Summary of transcripts–Focus group of VSTEP.
• Appendix 12: Summary of transcripts–Focus group of VSTEP.3-5 oral examiners
• Appendix 13: Stimulated recall session transcripts
• Appendix 14: Consent form
• LIST OF TABLES
• LIST OF FIGURES

I. Tổng Quan Giá Trị Tư Duy Trong VSTEP Speaking Nghiên Cứu

Bài thi VSTEP Speaking không chỉ đánh giá khả năng sử dụng ngôn ngữ mà còn là thước đo giá trị tư duy của thí sinh. Việc hiểu rõ giá trị tư duy này giúp thí sinh chuẩn bị tốt hơn, đồng thời giúp nhà quản lý giáo dục và người biên soạn đề thi cải thiện chất lượng đánh giá. Nghiên cứu chuyên sâu này tập trung vào việc khám phá các khía cạnh tư duy phản biện, tư duy logic, khả năng phân tích, giải quyết vấn đề và đánh giá thông tin được thể hiện trong bài thi. Mục tiêu là làm sáng tỏ giá trị tư duy mà bài thi VSTEP Speaking mang lại, từ đó nâng cao hiệu quả luyện thi VSTEP Speaking và công nhận kết quả thi một cách công bằng.

1.1. Tầm quan trọng của giá trị tư duy trong kỳ thi VSTEP Speaking

Bài thi VSTEP Speaking không chỉ là kiểm tra khả năng kỹ năng nói VSTEP mà còn đánh giá khả năng ứng dụng tư duy phản biện VSTEP Speaking và tư duy logic VSTEP Speaking. Các thí sinh cần thể hiện khả năng phân tích bài thi VSTEP Speaking và đưa ra các lập luận thuyết phục. Theo nghiên cứu của Nguyễn Thị Mai Hữu An (2022), việc đánh giá giá trị tư duy giúp xác định mức độ thành thạo ngôn ngữ thực sự của thí sinh trong các tình huống giao tiếp thực tế. Việc này cũng đảm bảo tính công bằng và toàn diện trong quá trình đánh giá VSTEP Speaking.

1.2. Mục tiêu của nghiên cứu về giá trị tư duy VSTEP Speaking

Nghiên cứu này tập trung vào việc đánh giá giá trị tư duy một cách hệ thống và khách quan trong bài thi VSTEP Speaking. Các mục tiêu chính bao gồm xác định các loại tư duy cần thiết, đánh giá mức độ thể hiện tư duy của thí sinh trong từng phần thi, và đề xuất các phương pháp cải thiện luyện thi VSTEP Speaking để phát triển tư duy. Nghiên cứu này cũng hướng đến việc xây dựng một khung đánh giá giá trị tư duy chuẩn hóa, giúp người chấm thi đánh giá chính xác và công bằng hơn.

II. Thách Thức Trong Đánh Giá Giá Trị Tư Duy VSTEP Speaking

Việc đánh giá giá trị tư duy trong bài thi VSTEP Speaking đối mặt với nhiều thách thức. Khó khăn nằm ở chỗ giá trị tư duy là một khái niệm trừu tượng và khó định lượng. Các tiêu chí đánh giá VSTEP Speaking hiện tại chưa phản ánh đầy đủ giá trị tư duy. Bên cạnh đó, sự khác biệt về nền tảng văn hóa và kinh nghiệm của thí sinh có thể ảnh hưởng đến cách họ thể hiện tư duy. Nghiên cứu cần tập trung vào việc xây dựng các công cụ đánh giá phù hợp, giảm thiểu sự thiên vị và đảm bảo tính khách quan. Các công cụ này nên bao gồm các tiêu chí rõ ràng, ví dụ minh họa cụ thể và quy trình đánh giá chuẩn hóa.

2.1. Sự mơ hồ trong tiêu chí đánh giá giá trị tư duy hiện tại

Các tiêu chí đánh giá VSTEP Speaking hiện tại thường tập trung vào khả năng phát âm, ngữ pháp và từ vựng. Tuy nhiên, các tiêu chí liên quan đến giá trị tư duy thường chung chung và thiếu cụ thể. Điều này gây khó khăn cho người chấm thi trong việc xác định mức độ tư duy phản biện và tư duy logic của thí sinh. Do đó, cần thiết phải xây dựng các tiêu chí đánh giá chi tiết hơn, có thể đo lường được và gắn liền với các kỹ năng tư duy cụ thể.

2.2. Ảnh hưởng của yếu tố văn hóa đến giá trị tư duy VSTEP Speaking

Thí sinh đến từ các nền văn hóa khác nhau có thể có cách thể hiện tư duy khác nhau. Ví dụ, một số nền văn hóa coi trọng sự đồng thuận, trong khi các nền văn hóa khác khuyến khích sự tranh luận. Điều này có thể ảnh hưởng đến cách thí sinh trình bày ý kiến và bảo vệ quan điểm của mình. Do đó, cần phải xem xét yếu tố văn hóa trong quá trình đánh giá, tránh áp đặt một chuẩn mực tư duy duy nhất lên tất cả thí sinh.

2.3. Khó khăn trong việc lượng hóa giá trị tư duy trong VSTEP Speaking

Khác với các kỹ năng ngôn ngữ có thể đo lường dễ dàng (ví dụ: số lượng lỗi ngữ pháp), giá trị tư duy là một khái niệm trừu tượng và khó định lượng. Các phương pháp đánh giá truyền thống có thể không đủ để nắm bắt đầy đủ các khía cạnh tư duy. Do đó, cần phải áp dụng các phương pháp đánh giá mới, chẳng hạn như phân tích nội dung bài nói, phỏng vấn sâu hoặc sử dụng các công cụ đánh giá tư duy chuyên dụng.

III. Phương Pháp Nghiên Cứu Giá Trị Tư Duy Trong VSTEP Speaking

Để nghiên cứu một cách toàn diện giá trị tư duy trong VSTEP Speaking, nghiên cứu chuyên sâu cần kết hợp nhiều phương pháp khác nhau. Phương pháp phân tích bài thi VSTEP Speaking và tài liệu liên quan giúp xác định các yêu cầu tư duy tiềm ẩn. Phỏng vấn nhóm với các chuyên gia VSTEP Speaking giúp thu thập ý kiến về cách đánh giá giá trị tư duy hiệu quả. Bên cạnh đó, khảo sát thí sinh giúp hiểu rõ hơn về trải nghiệm và nhận thức của họ về giá trị tư duy. Phương pháp phỏng vấn hồi tưởng (stimulated recall interviews) cho phép nghiên cứu sâu hơn về quá trình tư duy của thí sinh trong khi thực hiện bài thi.

3.1. Phân tích bài thi VSTEP Speaking và tài liệu liên quan

Việc phân tích cấu trúc bài thi, hướng dẫn chấm thi và các tài liệu liên quan khác giúp xác định các kỹ năng tư duy được yêu cầu trong từng phần thi. Ví dụ, phần thi thảo luận (Part 3) có thể đòi hỏi khả năng tư duy phản biện và giải quyết vấn đề, trong khi phần thi mô tả tranh (Part 2) có thể yêu cầu khả năng phân tích và đánh giá thông tin. Phân tích bài thi VSTEP Speaking cũng giúp xác định các tiêu chí đánh giá nào liên quan đến giá trị tư duy và cần được cải thiện.

3.2. Phỏng vấn nhóm với chuyên gia VSTEP Speaking

Phỏng vấn các chuyên gia VSTEP Speaking (giáo viên, người chấm thi, người biên soạn đề thi) giúp thu thập ý kiến chuyên môn về cách đánh giá giá trị tư duy hiệu quả. Các chuyên gia có thể chia sẻ kinh nghiệm thực tế, đề xuất các tiêu chí đánh giá phù hợp và đưa ra các ví dụ minh họa cụ thể. Phỏng vấn nhóm cũng giúp xác định các thách thức và khó khăn trong quá trình đánh giá giá trị tư duy và đề xuất các giải pháp khắc phục.

3.3. Khảo sát và phỏng vấn hồi tưởng thí sinh VSTEP Speaking

Khảo sát thí sinh giúp thu thập thông tin về trải nghiệm và nhận thức của họ về giá trị tư duy trong bài thi. Phỏng vấn hồi tưởng (stimulated recall interviews) cho phép nghiên cứu sâu hơn về quá trình tư duy của thí sinh trong khi thực hiện bài thi. Trong quá trình phỏng vấn, thí sinh được xem lại video ghi lại quá trình làm bài thi của mình và được yêu cầu giải thích về những gì họ đang nghĩ và cảm thấy. Phương pháp này giúp nhà nghiên cứu hiểu rõ hơn về cách thí sinh áp dụng các kỹ năng tư duy để giải quyết các nhiệm vụ trong bài thi.

IV. Ứng Dụng Tư Duy Kết Quả Nghiên Cứu VSTEP Speaking

Nghiên cứu này hướng đến việc đưa ra các đề xuất cụ thể để cải thiện cấu trúc bài thi VSTEP Speaking, tiêu chí đánh giá và phương pháp luyện thi. Kết quả nghiên cứu có thể được sử dụng để xây dựng các bài tập luyện thi tập trung vào phát triển tư duy phản biện, tư duy logic, khả năng phân tích và giải quyết vấn đề. Ngoài ra, kết quả nghiên cứu cũng có thể giúp các nhà quản lý giáo dục đưa ra các quyết định sáng suốt hơn về việc sử dụng kết quả thi VSTEP Speaking trong việc tuyển sinh và đánh giá năng lực.

4.1. Cải thiện cấu trúc bài thi VSTEP Speaking

Dựa trên kết quả nghiên cứu, có thể điều chỉnh cấu trúc bài thi VSTEP Speaking để tạo ra nhiều cơ hội hơn cho thí sinh thể hiện giá trị tư duy. Ví dụ, có thể thêm các câu hỏi mở đòi hỏi thí sinh phải đưa ra các lập luận phức tạp, hoặc các tình huống thực tế đòi hỏi thí sinh phải giải quyết các vấn đề phức tạp. Cải thiện cấu trúc bài thi VSTEP Speaking phải đảm bảo rằng giá trị tư duy được đo lường một cách toàn diện và khách quan.

4.2. Nâng cao chất lượng tiêu chí đánh giá VSTEP Speaking

Các tiêu chí đánh giá VSTEP Speaking cần được điều chỉnh để phản ánh rõ hơn giá trị tư duy. Điều này có thể đạt được bằng cách thêm các tiêu chí cụ thể liên quan đến khả năng tư duy phản biện, tư duy logic, khả năng phân tích và giải quyết vấn đề. Các tiêu chí mới cần được định nghĩa rõ ràng và đi kèm với các ví dụ minh họa cụ thể để đảm bảo tính nhất quán trong quá trình đánh giá.

4.3. Phát triển phương pháp luyện thi VSTEP Speaking hiệu quả

Kết quả nghiên cứu có thể được sử dụng để phát triển các phương pháp luyện thi VSTEP Speaking tập trung vào phát triển giá trị tư duy. Các phương pháp này có thể bao gồm các bài tập phân tích tình huống, giải quyết vấn đề, tranh luận và bảo vệ quan điểm. Ngoài ra, cần khuyến khích thí sinh luyện thi VSTEP Speaking tham gia các hoạt động ngoại khóa, đọc sách báo và xem các chương trình tin tức để mở rộng kiến thức và phát triển tư duy.

V. Kết Luận Tương Lai Đánh Giá Tư Duy Trong VSTEP Speaking

Việc đánh giá giá trị tư duy trong bài thi VSTEP Speaking là một bước tiến quan trọng trong việc nâng cao chất lượng đánh giá năng lực tiếng Anh. Nghiên cứu chuyên sâu này đã cung cấp một cái nhìn tổng quan về các thách thức và cơ hội trong việc đánh giá giá trị tư duy, đồng thời đề xuất các phương pháp nghiên cứu và ứng dụng kết quả nghiên cứu vào thực tiễn. Trong tương lai, cần tiếp tục nghiên cứu và hoàn thiện các công cụ đánh giá giá trị tư duy, đảm bảo tính công bằng, khách quan và hiệu quả trong quá trình đánh giá.

5.1. Tiếp tục nghiên cứu và hoàn thiện công cụ đánh giá giá trị tư duy

Nghiên cứu này chỉ là bước khởi đầu trong việc khám phá giá trị tư duy trong bài thi VSTEP Speaking. Cần tiếp tục nghiên cứu để hiểu rõ hơn về các yếu tố ảnh hưởng đến giá trị tư duy và phát triển các công cụ đánh giá phù hợp. Các công cụ đánh giá mới cần được kiểm tra tính hiệu lực và độ tin cậy để đảm bảo tính chính xác và công bằng.

5.2. Đảm bảo tính công bằng và khách quan trong đánh giá giá trị tư duy

Tính công bằng và khách quan là hai yếu tố quan trọng trong quá trình đánh giá giá trị tư duy. Cần giảm thiểu sự thiên vị và đảm bảo rằng tất cả thí sinh đều có cơ hội thể hiện giá trị tư duy của mình một cách tốt nhất. Điều này có thể đạt được bằng cách xây dựng các tiêu chí đánh giá rõ ràng, sử dụng các ví dụ minh họa cụ thể và đào tạo người chấm thi một cách bài bản.