Đánh giá tính hợp lệ của bài kiểm tra tiếng Anh lớp 10 tại một số trường THPT miền Trung và miền ...

Luận văn thạc sĩ phân tích vnu ulis an evaluation on the validity of english tests used for english 10 at some higher, đánh giá thực trạng, chỉ ra hạn chế, đề xuất giải pháp khả

• Tác giả: Nguyễn Thị Hoàng Lân
• Người hướng dẫn: Dr. Hà Cẩm Tâm
• Trường học: Vietnam National University, Ha Noi College Of Foreign Languages
• Chuyên ngành: Methodology
• Đề tài: An Evaluation On The Validity Of English Tests Used For English 10 At Some Higher Secondary Schools In The Middle And North Of Viet Nam , From Ha Tinh To Ha Nam
• Loại tài liệu: Thesis
• Năm xuất bản: 2009
• Địa điểm: Hà Nội

Mục lục chi tiết

• Introduction
• 1. CHAPTER 1: LITERATURE REVIEW
• 1.1. Basic concepts of testing
• 1.2. Kinds of achievement tests
• 1.3. Final achievement tests
• 1.4. Progress achievement tests
• 1.5. Characteristics of a good language test
• 1.6. Criterion-related validity
• 1.7. Sources of invalidity
• 1.8. Test items for phonetics, structures and vocabulary
• 1.9. The test items types used to evaluate phonetics, structures and vocabulary
• 1.10. Syllabus Objectives on language components
• 2. CHAPTER 2: THE STUDY
• 2.1. Analytical framework for data analysis
• 2.2. Data Analysis and Discussion
• 2.2.1. Content validity of the tests used
• 2.2.2. Content validity of 45 minute written tests
• 2.2.3. Content validity of 15 minute written tests
• 2.2.4. Content validity of final written tests
• 2.2.5. Construct validity of the tests used
• 2.2.6. Face validity of the tests used
• Conclusion
• 3.1. Limitations and Suggestions for further studies
• References
• Appendix: survey questionnaire

Tóm tắt

I. Tổng quan về đánh giá tính hợp lệ của bài kiểm tra tiếng Anh lớp 10

Đánh giá tính hợp lệ của bài kiểm tra tiếng Anh lớp 10 là một vấn đề quan trọng trong giáo dục hiện nay. Việc kiểm tra không chỉ giúp đánh giá năng lực học sinh mà còn phản ánh chất lượng giảng dạy tại các trường THPT. Nghiên cứu này sẽ tập trung vào việc phân tích các bài kiểm tra tiếng Anh tại một số trường THPT miền Trung và miền Bắc Việt Nam, từ đó đưa ra những nhận định về tính hợp lệ của chúng.

1.1. Định nghĩa và vai trò của tính hợp lệ trong kiểm tra

Tính hợp lệ của bài kiểm tra được hiểu là khả năng mà bài kiểm tra đó đo lường chính xác những gì nó được thiết kế để đo. Theo Bachman (1990), tính hợp lệ là yếu tố quan trọng nhất trong việc phát triển và sử dụng các bài kiểm tra ngôn ngữ. Điều này có nghĩa là một bài kiểm tra có tính hợp lệ cao sẽ cung cấp thông tin chính xác về năng lực của học sinh.

1.2. Tại sao cần đánh giá tính hợp lệ của bài kiểm tra tiếng Anh

Việc đánh giá tính hợp lệ của bài kiểm tra tiếng Anh lớp 10 là cần thiết để đảm bảo rằng các bài kiểm tra phản ánh đúng năng lực thực sự của học sinh. Nếu bài kiểm tra không hợp lệ, kết quả sẽ không chính xác và có thể dẫn đến những quyết định sai lầm trong giáo dục.

II. Những thách thức trong việc đánh giá tính hợp lệ bài kiểm tra tiếng Anh

Có nhiều thách thức trong việc đánh giá tính hợp lệ của bài kiểm tra tiếng Anh tại các trường THPT. Những thách thức này bao gồm sự không đồng nhất trong cách thiết kế bài kiểm tra, sự thiếu hụt trong việc đào tạo giáo viên về phương pháp kiểm tra, và sự khác biệt trong năng lực học sinh giữa các vùng miền.

2.1. Sự không đồng nhất trong thiết kế bài kiểm tra

Nhiều trường THPT sử dụng các phương pháp kiểm tra khác nhau, dẫn đến sự không đồng nhất trong việc đánh giá năng lực học sinh. Điều này có thể gây khó khăn trong việc so sánh kết quả giữa các trường và các vùng miền khác nhau.

2.2. Thiếu hụt trong đào tạo giáo viên về kiểm tra

Nhiều giáo viên chưa được đào tạo đầy đủ về cách thiết kế và đánh giá bài kiểm tra. Điều này có thể dẫn đến việc tạo ra các bài kiểm tra không chính xác và không phản ánh đúng năng lực của học sinh.

III. Phương pháp đánh giá tính hợp lệ bài kiểm tra tiếng Anh lớp 10

Để đánh giá tính hợp lệ của bài kiểm tra tiếng Anh lớp 10, nghiên cứu này sẽ sử dụng các phương pháp phân tích định tính và định lượng. Các bài kiểm tra sẽ được phân tích dựa trên các tiêu chí như tính hợp lệ nội dung, tính hợp lệ cấu trúc và tính hợp lệ bề mặt.

3.1. Phân tích tính hợp lệ nội dung

Tính hợp lệ nội dung được đánh giá dựa trên sự phù hợp giữa nội dung bài kiểm tra và mục tiêu học tập của chương trình tiếng Anh lớp 10. Việc so sánh này sẽ giúp xác định xem bài kiểm tra có đo lường đúng những gì học sinh cần học hay không.

3.2. Phân tích tính hợp lệ cấu trúc

Tính hợp lệ cấu trúc liên quan đến việc kiểm tra xem các loại câu hỏi trong bài kiểm tra có phù hợp với các kỹ năng ngôn ngữ mà học sinh cần phát triển hay không. Điều này bao gồm việc đánh giá các câu hỏi về ngữ pháp, từ vựng, và kỹ năng nghe, nói, đọc, viết.

IV. Kết quả nghiên cứu về tính hợp lệ bài kiểm tra tiếng Anh

Kết quả nghiên cứu sẽ cung cấp cái nhìn sâu sắc về tính hợp lệ của các bài kiểm tra tiếng Anh lớp 10 tại các trường THPT miền Trung và miền Bắc. Những phát hiện này sẽ giúp các nhà giáo dục hiểu rõ hơn về chất lượng của các bài kiểm tra và từ đó có những điều chỉnh cần thiết.

4.1. Phân tích kết quả từ các bài kiểm tra

Kết quả từ các bài kiểm tra sẽ được phân tích để xác định mức độ chính xác của chúng trong việc đo lường năng lực học sinh. Các số liệu thống kê sẽ được sử dụng để minh chứng cho tính hợp lệ của các bài kiểm tra.

4.2. Đề xuất cải tiến cho bài kiểm tra

Dựa trên các kết quả phân tích, nghiên cứu sẽ đưa ra các đề xuất cải tiến cho việc thiết kế bài kiểm tra tiếng Anh lớp 10. Những cải tiến này sẽ giúp nâng cao tính hợp lệ và hiệu quả của các bài kiểm tra trong tương lai.

V. Kết luận và hướng phát triển tương lai của bài kiểm tra tiếng Anh

Kết luận từ nghiên cứu này sẽ nhấn mạnh tầm quan trọng của việc đánh giá tính hợp lệ của bài kiểm tra tiếng Anh lớp 10. Hướng phát triển tương lai sẽ tập trung vào việc cải thiện chất lượng bài kiểm tra và nâng cao năng lực của giáo viên trong việc thiết kế và đánh giá bài kiểm tra.

5.1. Tầm quan trọng của việc đánh giá tính hợp lệ

Đánh giá tính hợp lệ không chỉ giúp cải thiện chất lượng bài kiểm tra mà còn nâng cao chất lượng giảng dạy và học tập. Điều này sẽ góp phần vào việc phát triển năng lực ngôn ngữ của học sinh.

5.2. Hướng phát triển tương lai cho bài kiểm tra tiếng Anh

Trong tương lai, cần có những nghiên cứu sâu hơn về tính hợp lệ của các bài kiểm tra tiếng Anh tại các trường THPT. Việc này sẽ giúp tạo ra một hệ thống kiểm tra hiệu quả hơn, đáp ứng được nhu cầu học tập của học sinh.

Trích đoạn nội dung tài liệu

Vietnam national university, ha noi College of foreign languages ………. nguyÔn thÞ hoµng l©n An evaluation on the validity of english tests used for English 10 at some Higher Secondary Schools in the middle and north of viet nam , from ha tinh to ha nam ®¸nh gi¸ tÝnh hiÖu lùc cña c¸c bµi kiÓm tra tiÕng anh dµnh cho häc sinh líp 10 ë mét sè tr-êng thpt miÒn trung vµ miÒn b¾c viÖt nam; tõ hµ tÜnh ®Õn hµ nam ======== ======== Ma thesis Field: methodology Code: Supervisor: Dr. Hµ cÈm t©m Ha Noi, 2009 LUAN VAN CHAT LUONG download : add [e-mail] Vietnam national university, ha noi College of foreign languages ………. nguyÔn thÞ hoµng l©n an evaluation on the validity of english tests used for English 10 at some Higher Secondary Schools in the middle and north of viet nam , from ha tinh to ha nam ®¸nh gi¸ tÝnh hiÖu lùc cña c¸c bµi kiÓm tra tiÕng anh dµnh cho häc sinh líp 10 ë mét sè tr-êng thpt miÒn trung vµ miÒn b¾c viÖt nam; tõ hµ tÜnh ®Õn hµ nam ======== ======== Ma thesis Field: methodology Code: Ha Noi, 2009 LUAN VAN CHAT LUONG download : add [e-mail] v table of contents Introduction 1. Rationale of the study 1 2. Scope of the study. Aims of the study 5 4. Methods of the study 5 5. Organization of the study 6 Development Chapter 1: literature review 1. Basic concepts of testing 8 1. Kinds of achievement tests 11 1. Final achievement tests 11 1. Progress achievement tests 12 1. Characteristics of a good language test 13 1. Criterion-related validity 18 LUAN VAN CHAT LUONG download : add luanvanchat@agmail. Souces of invalidity 21 1. Test items for phonetics, structures and vocabulary 22 1. The test items types used to evaluate phonetics, structures 23 and vocabulary 1. Syllabus Objectives on language components 24 Chapter 2: The study 2.Analytical framework for data analysis 29 2. Data Analysis and Discussion 31 2. Content validity of the tests used 31 2. Content validity of 45 minute written tests 31 2. Content validity of 15 minute written tests 36 2. Content validity of final written tests 41 2. Construct validity of the tests used 46 2. Face validity of the tests used 53 Conclusion 3. Limitations and Suggestions for further studies 59 LUAN VAN CHAT LUONG download : add [e-mail] vii References 61 Appendix: survey questionaire 64 LUAN VAN CHAT LUONG download : add [e-mail] iv List of tables Table 1: The test item types 24 Table 2: Syllabus Objectives 25 Table 3: Format of 45 minute tests and final tests 28 Table 4: Specification for fourty five minute tests 32 Table 5. The contents tested in the fourty five minute tests 34 Table 6: The contents tested in the fifteen minute tests 37 Table 7: Test Specification for final written tests 41 Table 8: The contents of language components in the final tests 43 Table 9: Specification for language components 46 Table 10: Teachers’ opinions on the investigated tests 54 Table 11: Testing techniques 57 LUAN VAN CHAT LUONG download : add luanvanchat@agmail. Rationale of the study English has played an integral role in increasing the development of science, technology, culture and international relations. This fact has resulted in the growing demand for English language learning and teaching in many parts of the world. In addition, the world-wide globalization process has confined English the most widely used means of international communication. The need to master English to access to information and interactions with each other is increasingly growing in many parts of the world. English teaching is undoubtly the ultimate capacity-building tool. Fully recognizing the importance of this global language, Vietnamese Ministry of Education has encouraged and required pupils of Secondary Schools to learn it as a compulsory subject during at least seven years. English is also a compulsory subject in the Higher Secondary graduation examination. To evaluate and assess the English learning and teaching process, testing is apparently employed as an important and powerful tool. This is because ever since language began to be taught in formal settings, the development of tests to assess the learner's performance has been an integral part of language learning and teaching process. Language testing, then, is central to language teaching. Therefore, It is also widely accepted that testing plays a significant role in the process of learning and teaching foreign languages. The main purpose of language testing is to provide opportunities for learning, both for the students who are being tested and for the professionals who are administering the tests. Through the tests students can learn from the work they do with the teacher, and by themselves in preparation for the tests, the opportunities arising during the tests for developing what they know and what they can do, especially the feedback which they receive after the tests, both from their own reflection and from professionals who have monitored their performance on the tests. The teachers can pinpoint strengths and weaknesses in the learned abilities of the students and gain the information about the progress the students are making or what the students are likely to be able to do with the LUAN VAN CHAT LUONG download : add [e-mail] 2 language in a target context or what the students know and what they do not know (both explicitly and implicitly) about the target language. In general, a language test can be a “sample language behaviour and infer general ability in the language learnt”. From the results of the tests and depending on different kinds of tests with different purposes as well, the teacher can infer a certain level of language competence of his students in such different areas as grammar, vocabulary, pronunciation, or speaking, listening , writing and reading. Lanwerys & Seanlon (1969) contends in their book “testing is an important tool in educational research and for programme evaluation, and may even throw light on both the nature of language proficiency and language learning”. “Language testing is a form of measurement. It is so closely related to teaching that we cannot work in testing without being constantly concerned with teaching” (Heaton, 1988:5). Therefore, it is undeniable that the most effective and fastest way to check students' understanding is testing. Besides, thanks to testing, teachers can evaluate the effectiveness of the used syllabus or its contents, objectives, methods and to identify, locate the difficult areas that their pupils are being confronted with in learning process through tests. For the past ten years or so, there have been a number of changes in the practice of English teaching in Viet Nam tertiary education. Some regard methodology, from Grammar translation method to Communicative approach. Some involve in course books. Some are concerned with technology, from traditional tape recorders to modern LCD projectors. Some are related to testing. For example, at Higher Secondary Schools in recent years there is a shift in testing from Subjective tests to Objective tests, which has great effects on teaching and learning process. Therefore, in testing pupils’ progress, teachers tend to design more objective tests and many mid-term or final tests are multiple choice questions. This is considered as a good preparation for students to perform well in the entrance university tests which exists in multiple choice questions. However, the problem is that the English 10 is one of the three new course books of Ministry of Education which focus on improving the four skills reading, writing, speaking and listening and help students to consolidate their grammar in the Language Focus part. Thus, multiple choice questions seem to fail to test pupil’s progress accurately. The question arising is that whether the tests used at High Schools test what students are supposed to acquire LUAN VAN CHAT LUONG download : add [e-mail] 3 according to the objectives of the textbook. This is also one of the major reasons why I carried the research on validity. In addition, Test researchers and developers have admitted that validity are critical for tests and referred to as integral measurement qualities. Because this quality provides major justification for using test score numbers as a basic for making inferences or decisions (Bachman and Palmer, 1996:19). From educative perspectives that both teachers and students should have their voice heard about instructional content, mode of syllabus delivery, and assessment. As analyzed above, validity is an indispensable quality of all good tests. Opinions from test takers and test raters, therefore, are essential and important to the process of test construction. More importantly, it is impossible for test writers to try in vain to increase the validity of a reliable test due to the features of test items that constructs it. From the outset of test construction, test validity should be of most essential focus of all. Heaton (1988:60) argued that "face validity can provide not only a quick and reasonable guide but also a balance to too great of concern with statistical analysis." He stated that the students' motivation is maintained if a test has good face validity and most students will try harder if the test looks sound. Thus, the face validity plays a certain role in any test and it is also of great concern in this thesis. Moreover, the emphasis on test validity is also confirmed in Hughes (1989) that, "the greater a test's content validity is, the more likely it is to be an accurate measure of what it is to measure." To put it in another way, if major areas in the test specification are not identified or not represented, the test is said to be inaccurate. Furthermore, such an inaccurate test is likely to have harmful backwash effect because those are not presented or tested will probably be ignored in teaching and learning. Bachman ( 1990: 289) also insists that :'' The most important quality to consider in the development, interpretation and use of language tests is validity, which has been described as a unitary concept related to the adequacy and appropriateness of the way we interpret and use test scores." In general , the reasons discussed here are regarded as a strong impetus that initiates this thesis into investigating the validity of the achievement tests at Higher Secondary Schools from Ha Tinh to Ha Nam. Some studies and researches have been done in some particular schools to design an English achievement test for the 10th form pupils as a Case Study such as the study by Ta Thi Minh Hien (2005). However, there has not been any study on investigation into and evaluation on tests used for 10th form pupils High Schools in The Middle and in the LUAN VAN CHAT LUONG download : add [e-mail] 4 North of Viet Nam. While it is undeniable that good evaluation of tests can help us measure skills and knowledge of pupils more accurately. For example, test analysis can help us remove weak items even before we record the results of the tests. Another reason for the selection of this research topic lies in the fact that language testing at Higher Secondary Schools has not been paid enough attention to. As a teacher, I have been involved in designing, administering and marking any kinds of English tests. Yet I have also witnessed neither comprehensive nor systematic evaluation nor research on the effectiveness and appropriateness of these tests. No formal discussions or seminar on test construction or test methods have been carried out. There is a lack of a language test item bank, a professionals testing committee, who judges the quality of the tests and takes the responsibility for the given tests.