Nghiên Cứu Đọc Hiểu Tự Động Dựa Trên Suy Luận Số Liệu Cho Văn Bản Tiếng Việt Về COVID-19

Luận văn tốt nghiệp nghiên cứu tốt nghiệp khoa học dữ liệu nghiên cứu đọc hiểu tự động dựa trên suy luận số liệu cho văn bản tiếng, điều tra thực trạng, phân tích số liệu, đề xuất

Người đăng

Ẩn danh

Thể loại

khóa luận tốt nghiệp

2021

74
1
0

Phí lưu trữ

30 Point

Mục lục chi tiết

LỜI CAM ĐOAN

1. CHƯƠNG 1: BÀI TOÁN ĐỌC HIỂU TỰ ĐỘNG SUY LUẬN SỐ LIỆU VÀ TÍNH ỨNG DỤNG

1.1. Bài toán đọc hiểu tự động suy luận số liệu

1.2. Tính ứng dụng của đề tài

1.3. Đối tượng và phạm vi nghiên cứu

1.4. Kết quả nghiên cứu

1.5. Cấu trúc của luận văn

2. CHƯƠNG 2: CÁC CÔNG TRÌNH NGHIÊN CỨU LIÊN QUAN

2.1. Các bộ dữ liệu đọc hiểu tự động liên quan

2.1.1. Các bộ dữ liệu tiếng nước ngoài

2.1.2. Các bộ dữ liệu đọc hiểu tự động rút trích từ đoạn văn

2.1.3. Các bộ dữ liệu trắc nghiệm nhiều đáp án

2.1.4. Các bộ dữ liệu đọc hiểu tự động tiếng Việt

2.2. Các phương pháp giải quyết bài toán đọc hiểu tự động hiện nay

2.3. Các phương pháp đánh giá bài toán đọc hiểu tự động

3. CHƯƠNG 3: XÂY DỰNG BỘ DỮ LIỆU

3.1. Quy trình xây dựng bộ dữ liệu

3.1.1. Tuyển dụng annotator và xây dựng Guidelines

3.1.2. Thu thập bài báo

3.1.3. Tạo câu hỏi và câu trả lời

3.1.4. Kiểm tra dữ liệu

3.1.5. Thu thập thêm câu trả lời

3.2. Phân tích bộ dữ liệu ViCOVIDQA

3.2.1. Phân tích tổng quan ViCOVIDQA

3.2.2. Phân tích loại suy luận của câu hỏi

3.2.3. Phân tích loại câu hỏi

3.2.4. Phân tích theo độ dài

3.2.5. Chủ đề các đoạn văn của ViCOVIDQA

4. CHƯƠNG 4: THỰC NGHIỆM VÀ ĐÁNH GIÁ KẾT QUẢ

4.1. Cài đặt thực nghiệm

4.2. Phân tích kết quả thực nghiệm

4.3. Kết quả thực nghiệm

4.4. Phân tích loại suy luận

4.5. Phân tích độ dài đoạn văn

4.6. Phân tích độ dài câu hỏi

5. CHƯƠNG 5: KẾT LUẬN VÀ HƯỚNG PHÁT TRIỂN

5.1. Kết luận

5.2. Hướng phát triển

DANH MỤC HÌNH

DANH MỤC BẢNG

DANH MỤC TỪ VIẾT TẮT

TÓM TẮT KHÓA LUẬN

Tóm tắt

I. Tổng quan về Nghiên Cứu Đọc Hiểu Tự Động COVID 19

Nghiên cứu đọc hiểu tự động dựa trên suy luận số liệu cho văn bản tiếng Việt về COVID-19 đang trở thành một lĩnh vực quan trọng trong thời đại công nghệ thông tin. Với sự gia tăng nhanh chóng của thông tin liên quan đến dịch bệnh, việc phát triển các hệ thống đọc hiểu tự động giúp người dùng tiếp cận thông tin một cách nhanh chóng và chính xác là rất cần thiết. Đề tài này không chỉ giúp nâng cao khả năng xử lý ngôn ngữ tự nhiên mà còn đóng góp vào việc cải thiện nhận thức cộng đồng về tình hình dịch bệnh.

1.1. Định nghĩa và tầm quan trọng của đọc hiểu tự động

Đọc hiểu tự động là khả năng của máy tính trong việc hiểu và phân tích văn bản. Tầm quan trọng của nó trong bối cảnh COVID-19 là giúp người dùng nhanh chóng tìm kiếm thông tin chính xác và đáng tin cậy từ các nguồn khác nhau.

1.2. Xu hướng nghiên cứu hiện nay trong lĩnh vực này

Xu hướng nghiên cứu hiện nay tập trung vào việc phát triển các mô hình đọc hiểu tự động có khả năng suy luận số liệu, giúp người dùng không chỉ nhận thông tin mà còn hiểu rõ hơn về các số liệu liên quan đến dịch bệnh.

II. Thách thức trong Nghiên Cứu Đọc Hiểu Tự Động COVID 19

Mặc dù có nhiều tiến bộ trong lĩnh vực đọc hiểu tự động, nhưng vẫn tồn tại nhiều thách thức. Các văn bản về COVID-19 thường chứa nhiều số liệu phức tạp và thông tin không đồng nhất, điều này gây khó khăn cho việc xây dựng các mô hình đọc hiểu chính xác.

2.1. Khó khăn trong việc xử lý ngôn ngữ tự nhiên

Ngôn ngữ tự nhiên có tính đa nghĩa và ngữ cảnh, điều này làm cho việc phát triển các mô hình đọc hiểu tự động trở nên khó khăn hơn, đặc biệt là trong các văn bản liên quan đến COVID-19.

2.2. Vấn đề về độ chính xác của dữ liệu

Độ chính xác của dữ liệu là một yếu tố quan trọng. Các thông tin sai lệch có thể dẫn đến những hiểu lầm nghiêm trọng về tình hình dịch bệnh, do đó cần có các phương pháp kiểm tra và xác thực thông tin.

III. Phương pháp Nghiên Cứu Đọc Hiểu Tự Động COVID 19

Để giải quyết các thách thức trong nghiên cứu đọc hiểu tự động, nhiều phương pháp đã được áp dụng. Các mô hình học sâu và trí tuệ nhân tạo đang được sử dụng để cải thiện khả năng đọc hiểu và suy luận số liệu.

3.1. Sử dụng mô hình học sâu trong đọc hiểu

Mô hình học sâu như NAQANet và NumNet đã được áp dụng để cải thiện khả năng đọc hiểu tự động. Những mô hình này có khả năng xử lý các câu hỏi phức tạp và suy luận từ các số liệu trong văn bản.

3.2. Phát triển bộ dữ liệu ViCOVIDQA

Bộ dữ liệu ViCOVIDQA được xây dựng từ các bài báo về COVID-19, cung cấp một nguồn tài liệu phong phú cho việc nghiên cứu và phát triển các mô hình đọc hiểu tự động.

IV. Ứng dụng thực tiễn của Nghiên Cứu Đọc Hiểu Tự Động

Nghiên cứu đọc hiểu tự động có nhiều ứng dụng thực tiễn trong việc cung cấp thông tin về COVID-19. Các hệ thống chatbot và trợ lý ảo có thể giúp người dùng tìm kiếm thông tin nhanh chóng và chính xác.

4.1. Hệ thống chatbot hỗ trợ người dùng

Các hệ thống chatbot có thể trả lời nhanh chóng các câu hỏi liên quan đến COVID-19, giúp người dùng tiết kiệm thời gian và nâng cao trải nghiệm tìm kiếm thông tin.

4.2. Tích hợp vào các ứng dụng y tế

Nghiên cứu này có thể được tích hợp vào các ứng dụng y tế, giúp người dùng theo dõi tình hình sức khỏe và nhận thông tin chính xác về dịch bệnh.

V. Kết luận và Hướng phát triển trong Nghiên Cứu

Nghiên cứu đọc hiểu tự động dựa trên suy luận số liệu cho văn bản tiếng Việt về COVID-19 đã mở ra nhiều cơ hội mới. Việc phát triển các mô hình và bộ dữ liệu chất lượng cao sẽ giúp nâng cao khả năng đọc hiểu và cung cấp thông tin chính xác cho người dùng.

5.1. Tương lai của nghiên cứu đọc hiểu tự động

Tương lai của nghiên cứu này hứa hẹn sẽ có nhiều tiến bộ hơn nữa trong việc phát triển các mô hình đọc hiểu tự động, đặc biệt là trong bối cảnh dịch bệnh.

5.2. Đề xuất hướng nghiên cứu tiếp theo

Các nghiên cứu tiếp theo có thể tập trung vào việc cải thiện độ chính xác của các mô hình và mở rộng bộ dữ liệu để bao quát nhiều khía cạnh hơn của COVID-19.

10/07/2025
Khóa luận tốt nghiệp khoa học dữ liệu nghiên cứu đọc hiểu tự động dựa trên suy luận số liệu cho văn bản tiếng việt chủ đề covid 19

Trích đoạn nội dung tài liệu

Đặt vấn đề “Covid-19” là từ khóa nóng nhất trong vòng hai năm trở lại đây không chỉ ở Việt Nam mà còn trên toàn thế giới. Khi cả nước buộc phải“sống chung với dịch” như hiện nay thì nhu cầu tiếp nhận, cập nhật thông tin về diễn biến dịch bệnh và bảo vệ sức khỏe là rất cấp thiết đối với mỗi người. Cùng với sự phát triển của công nghệ thông tin và phương tiện truyền thông, các website báo điện tử tại Việt Nam trở thành điểm truy cập sôi động hơn bao giờ hết, bởi sự tuy tín, thuận tiện và tính kip thoi. Moi người dân có thé dé dàng tiếp cận với nguồn thông tin chính thống về chính sách và chỉ đạo của cơ quan nhà nước về diễn biến dịch bệnh một cách nhanh nhất đồng thời cũng tránh được rủi ro người dân tiếp cận với những nguồn thông tin sai lệch, gây mất trật tự, an toàn xã hội và đặc biệt hơn còn ảnh hưởng không tốt đến nhận thức của cộng đông.

Góp một phần không nhỏ vào công cuộc phòng, chống Covid-19 và khôi phục nền kinh tế không thé không kể đến các ứng dụng trí tuệ nhân tạo. Day được xem như một công cụ hỗ trợ đắc lực dé không chỉ kiểm soát diễn biến lây lan dịch bệnh, đưa ra dự đoán cho các nhà hoạch định, mà còn giúp các nhân viên y tế chân đoán tình hình sức khỏe của bệnh nhân thông qua tiếng ho, dự đoán Covid-19 qua ảnh chụp CT phdi,.rut ngăn thời gian điều trị và mang lại hiệu quả cao trong công tác y tế. Nhận thức được tầm quan trọng của việc được tiếp cận các nguồn thông tin chính xác liên quan đến tình hình dịch bệnh và những tiện ích mà trí tuệ nhân tạo mang lại cho con người, chúng tôi đã nghiên cứu và xây dựng hệ thống đọc hiéu tự động (Machine Reading Comprehension - MRC) tiếng Việt dé người dùng có thé dé dàng tiếp cận, tra cứu và thu thập cho mình những kiến thức, kỹ năng cũng như giải đáp thắc mắc xoay quanh các bài báo về chủ đề Covid-19. Bài toán đọc hiểu tự động suy luận số liệu và tính ứng dụng 1.

Bai toán đọc hiểu tự động suy luận số liệu Suy luận trong bai toán đọc hiểu tự động là một trong những xu hướng nghiên cứu về bài toán này những năm trở lại đây. Ngoài đưa ra những câu trả lời được trích xuất trong đoạn văn thì mô hình còn có thé trả lời những loại suy luận khác như logic [1], đồng tham chiếu [2],. va trong đó suy luận số liệu là một loại suy luận rất thú vị. Với bài toán đọc hiểu tự động kết hợp với suy luận số liệu này thì ngoài việc chỉ có thé đưa ra câu trả lời có sẵn trong đoạn văn thì những mô hình giải quyết bài toán này còn có khả năng tính toán các phép tính cơ bản trong số liệu để trả lời cho câu hỏi, việc này có tính ứng dụng rất cao trong những văn bản cập nhật diễn biến dịch bệnh Covid-19 như hiện nay khi các số liệu về dịch bệnh liên tục được đưa ra và yêu cầu người đọc phải tự suy luận thì bây giờ với những mô hình đọc hiểu tự động này có thê giúp con người trả lời những thông tin đó, giúp tiết kiệm được thời gian cho người doc, chi tiệt vê bài toán sẽ được chúng tôi mô tả ở dưới.

Đầu vào: Một bài báo tiếng Việt C và một câu hỏi Q về nội dung liên quan trong bài báo. Đầu ra: Câu trả lời A cho câu hỏi Q được rút trích từ bài báo hoặc được tính toán dựa theo những con sô có trong bài báo và câu hỏi.1 Ví dụ bai toán đọc hiểu tự động suy luận số liệu Sáng nay 5.8, Bộ Y tế thông báo 3.941 ca mặc Covid-19 ghi nhận trong nước (giảm 326 ca so với sáng hôm qua); TP.Theo thông báo của Bộ Y tế từ 18 giờ 30 ngày 4.8 đến 6 giờ sáng nay, trên Hệ thống Quốc gia quản lý ca bệnh Covid-19 ghi nhận 3.943 ca nhiễm mới, trong đó 2 ca nhập cảnh và 3.941 ca ghi nhận trong nước (giảm 326 ca so với sang hôm qua) tại 24 tỉnh, thành.943 ca Covid-19, riêng TP.349 bệnh nhân Trong số các trường hợp mắc mới do lây nhiễm trong nước, tại TP.349 ca, Bình Dương 497 ca, Tây Ninh 235 ca, Long An 189 ca, Tiền Giang 169 ca, Đồng Nai 110 ca, Đà Nẵng 92 ca, Bà Rịa - Vũng Tàu 66 ca, Vĩnh Long 58 ca, Bình Dinh 35 ca, Đồng 14 Tháp 32 ca, An Giang 21 ca, Sóc Trăng 20 ca, Phú Yên 17 ca, Kiên Giang 12 ca. Các tỉnh: Đắk Lắk, Quảng Bình và Trà Vinh mỗi nơi có 9 ca; Bạc Liêu 6 ca, Lạng Sơn 2 ca. Các tỉnh: Thanh Hóa, Lâm Đồng, Quảng Trị và Hà Tĩnh mỗi địa phương có 1 ca.941 ca ghi nhận trong cộng đồng.

Theo Bộ Y tế từ đầu dịch đến nay, Việt Nam có 181.756 ca mắc Covid-19 (2.331 ca nhập cảnh va 179.425 ca mắc trong nước); 54.332 ca đã được điều trị khỏi. Số trường hợp nhiễm mới ghi nhận trong nước của đợt dịch thứ 4 (từ 27.4) đến nay là 177.558 bệnh nhân đã khỏi bệnh. 470 bệnh nhân nặng đang điều trị hồi sức tích cực và 21 bệnh nhân nguy kịch đang điều trị ECMO. Câu hoi 1: tinh nào có sô ca mặc nhiêu nhât cả nước ? Đáp án: TP.HCM Câu hỏi 2: Long An, Tiền Giang, Đồng Nai tỉnh nào có 189 ca nhiễm ? Dap an: Long An Câu hỏi 3: Tổng số ca nhiém Covid-19 tại TP.HCM va Binh Dương là bao nhiêu ? Dap án: 2846 Câu hỏi 4: Ti lệ bệnh nhân đã khỏi bệnh tinh từ 27/4 là bao nhiêu ? Đáp án: 28.

Tinh ứng dung của đề tài Bài toán đọc hiểu tự động thường được sử dụng nhiều nhất trong các hệ thống chatbot, trợ lý ảo nồi tiếng như Cortana, Alexa, Siri,. có thé trả lời bất kì câu hỏi nào của người dùng một cách nhanh chóng và tiết kiệm thời gian hơn so với khi người dùng phải tự tìm nguồn tài liệu dé đọc, hiểu và tự trả lời. Ngoài ra, bài toán này còn được ứng dụng vào những hệ thống tìm kiếm thông tin nổi tiếng trên toàn thế giới như Google, Bing, Yahoo,. xếp hạng kết quả tìm kiếm giúp người dùng dé dang tìm thây nội dung liên quan tạo ra trải nghiệm thoải mái và tiện lợi.

Bên cạnh đó, chủ đê 15 về Covid-19 hiện đang là chủ dé rất “nóng”, do đó việc xây dựng một ứng dung đọc hiểu tự động có thể hỗ trợ người dùng tìm kiếm, cập nhật thông tin về diễn biến dịch bệnh và giải đáp thắc mắc của người dùng từ những nguồn nội dung chính thống và tin cậy, đặc biệt với bài toán đọc hiểu tự động suy luận số liệu thì còn có thé giải đáp cho người dùng những câu hỏi đòi hỏi sự tính toán số liệu trong những văn bản cập nhật thông tin diễn biến dịch bệnh chang chit số liệu. Nhìn chung, đề tài nghiên cứu này có ứng dụng rất thiết thực trong thời điểm hiện tại, giúp ích cho hàng triệu người Việt Nam bảo vệ được sức khỏe của mình trong mùa dịch. Mục tiêu: Mục tiêu nghiên cứu của chúng tôi là xây dựng hệ thống đọc hiểu tự động kết hợp suy luận số liệu cho văn bản chủ đề Covid-19 cho tiếng Việt. Dé hoàn thành được mục tiêu này, chúng tôi phải thực hiện 3 công việc: e Nghiên cứu và xây dựng bộ dữ liệu đọc hiệu tự động kết hợp suy luận số liệu chủ đề Covid-19 dé phục vụ cho bai toán đọc hiểu tự động kết hợp suy luận.

e Nghiên cứu các mô hình doc hiểu tự động kết hợp suy luận hiện có trên thế gidi. e Áp dụng những mô hình đọc hiểu tự động này vào bộ dữ liệu đã xây dựng được dé phân tích và so sánh kết quả. Kết luận và nêu ra hướng phát triển cho đề tài. Đối tượng và phạm vi nghiên cứu: Đối tượng: Bài toán đọc hiểu tự động kết hợp suy luận số liệu tiếng Việt.

Pham vi nghiên cứu: Với nghiên cứu này, phạm vi nghiên cứu của chúng tôi tập trung vào các bài báo chủ đề Covid-19 tiếng Việt, về giới hạn trong nghiên cứu thì chúng tôi chỉ tập trung khác thác những vấn đề sau: e Xây dựng bộ dữ liệu đọc hiểu tự động có sự kết hợp của các loại suy luận sé liệu vào câu hoi va câu tra lời. 16 e Đánh giá hai mô hình suy luận số liệu nổi tiếng là NumNet và NAQANet trên bộ dữ liệu đã xây dựng và bộ dữ liệu ViQuAD [3] và so sánh kết quả. e Phân tích kết quả và ảnh hưởng của các khía cạnh khác nhau của bộ dữ liệu lên hiệu suât của hai mô hình này. Kết quả nghiên cứu: Thông qua nghiên cứu này, chúng tôi đã đạt được một số kết quả như sau: e Xây dựng thành công ViCOVIDQA, bộ dữ liệu đọc hiểu tự động kết hợp suy luận số liệu chủ đề Covid-19 tiếng Việt bao gồm 6594 cặp câu hỏi và câu trả lời được xây dựng từ 841 bài báo chủ đề Covid-19.

Đây là bộ dữ liệu đọc hiểu tự động kết hợp suy luận số liệu đầu tiên trên tiếng Việt để làm bước đệm đầu tiên cho những nghiên cứu về bài toán này sau này. e Đánh giá hai mô hình đọc hiểu tự động suy luận số liệu là NumNet và NAQANet trên bộ dữ liệu ViCOVIDQA và so sánh với kết quả của hai mô hình này trên bộ dữ liệu ViQuAD [3], kết quả tốt nhất đạt được trên bộ dữ liệu ViCOVIDQA là khi sử dụng mô hình NAQANet kết hợp với mô hình nhúng PhoW2V với 22. e Phân tích được các khía cạnh khác nhau của bộ dữ liệu VICOVIDQA và anh hưởng của mô hình lên hai khía cạnh là kích thước của đoạn văn và loại câu hỏi suy luận. Cấu trúc của luận văn Phần còn lại của luận văn sẽ được tô chức như sau: Chương 2: Các công trình liên quan Ở chương này, chúng tôi sẽ khái quát về các công trình nghiên cứu về những bộ dữ liệu đọc hiểu tự động đang có hiện nay mà chúng tôi tìm hiểu được cũng như là những mô hình giải quyết bài toán đọc hiểu tự động suy luận số liệu và các phương pháp đánh giá cho bài toán này.

17 Chương 3: Xây dựng bộ dữ liệu Trong chương nay, chúng tôi mô ta chi tiết quy trình xây dựng bộ dữ liệu đọc hiểu tự động từ xây dung guidelines, tuyển dụng, thu thập dit liệu, xây dựng câu hỏi và câu trả lời, kiểm tra dữ liệu và thu thập thêm câu trả lời.

Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ

Tài liệu "Nghiên Cứu Đọc Hiểu Tự Động Dựa Trên Suy Luận Số Liệu Cho Văn Bản Tiếng Việt Về COVID-19" cung cấp cái nhìn sâu sắc về việc áp dụng công nghệ đọc hiểu tự động trong việc phân tích và xử lý thông tin liên quan đến đại dịch COVID-19. Nghiên cứu này không chỉ giúp nâng cao khả năng hiểu biết về các thông tin y tế mà còn hỗ trợ trong việc ra quyết định nhanh chóng và chính xác hơn trong bối cảnh khẩn cấp.

Đặc biệt, tài liệu này mở ra cơ hội cho độc giả tìm hiểu thêm về các ứng dụng công nghệ trong lĩnh vực y tế, như trong nghiên cứu về việc phân loại COVID-19 từ hình ảnh X-quang ngực thông qua máy học, được trình bày trong tài liệu Khóa luận tốt nghiệp kỹ thuật phần mềm phân loại covid 19 từ hình ảnh x quang ngực bằng máy học.

Ngoài ra, độc giả cũng có thể khám phá các phương pháp phân cụm dữ liệu để xây dựng bản đồ phân bố bệnh tại Thái Nguyên qua tài liệu Luận văn thạc sĩ tìm hiểu các phương pháp cụm dữ liệu ứng dụng xây dựng bản đồ phân bố bệnh trên địa bàn tỉnh thái nguyên.

Cuối cùng, để hiểu rõ hơn về việc xây dựng hệ thống quản lý khám chữa bệnh từ xa, độc giả có thể tham khảo tài liệu Xây dựng hệ thống quản lý khám chữa bệnh và đăng ký khám bệnh từ xa cho bệnh việnphòng khám. Những tài liệu này không chỉ mở rộng kiến thức mà còn cung cấp những góc nhìn đa dạng về ứng dụng công nghệ trong y tế, giúp độc giả có cái nhìn toàn diện hơn về các giải pháp hiện đại trong việc đối phó với COVID-19.