Luận văn: Tóm tắt đa văn bản tiếng Việt - Cao Mạnh Hải (ĐH Bách Khoa Hà Nội)

Luận văn nghiên cứu chuyên sâu về tóm tắt đa văn bản tiếng Việt, áp dụng các phương pháp học máy, học sâu để đề xuất mô hình và đánh giá kết quả.

Chuyên ngành

Khoa Học Dữ Liệu

Người đăng

Ẩn danh

Thể loại

Luận Văn Thạc Sĩ

2021

75
0
0

Phí lưu trữ

30 Point

Tóm tắt

I. Giới thiệu về Tóm tắt Đa Văn bản Tiếng Việt

Tóm tắt đa văn bản tiếng Việt là một lĩnh vực nghiên cứu quan trọng trong xử lý ngôn ngữ tự nhiên (NLP). Luận văn Thạc sĩ của Cao Mạnh Hải tại Trường Đại học Bách Khoa Hà Nội tập trung vào việc giải quyết bài toán này bằng cách kết hợp các kỹ thuật học máy và học sâu. Mục tiêu chính của nghiên cứu là xây dựng mô hình tóm tắt đa văn bản có thể trích rút thông tin quan trọng từ nhiều văn bản khác nhau và tổng hợp lại bằng những câu có nghĩa hoàn toàn mới. Đây là một bài toán phức tạp vì nó yêu cầu hiểu biết sâu về ngôn ngữ, ngữ pháp tiếng Việt cũng như khả năng phân tích và tổng hợp thông tin một cách logic và mạch lạc.

1.1. Khái niệm Tóm tắt Đa Văn bản

Tóm tắt đa văn bản là quá trình trích xuất thông tin chính từ một tập hợp các văn bản gốc và tạo ra một bản tóm tắt ngắn gọn. Khác với tóm tắt đơn văn bản chỉ xử lý một tài liệu, tóm tắt đa văn bản phải xử lý mối quan hệ giữa nhiều tài liệu. Điều này đòi hỏi mô hình phải hiểu được các chủ đề chung, loại bỏ thông tin trùng lặp và giữ lại những nội dung quan trọng nhất.

1.2. Tầm quan trọng của Nghiên cứu

Nghiên cứu tóm tắt đa văn bản tiếng Việt có ý nghĩa thực tiễn cao trong xử lý dữ liệu lớn. Nó giúp các hệ thống tự động tổng hợp thông tin từ nhiều nguồn tin tức, báo cáo nghiên cứu hay tài liệu chính sách. Ứng dụng này đặc biệt hữu ích trong bối cảnh công nghệ thông tin phát triển nhanh chóng ở Việt Nam.

II. Cơ Sở Lý Thuyết và Phương Pháp Tiếp Cận

Luận văn sử dụng các kỹ thuật xử lý ngôn ngữ tự nhiên hiện đại để giải quyết bài toán tóm tắt. Các phương pháp chính bao gồm tóm lược (extractive summarization) và tóm tắt khái quát (abstractive summarization). Nghiên cứu kết hợp cả hai hướng tiếp cận để tạo ra một mô hình hybrid với độ chính xác cao hơn. Luận văn cũng tập trung vào việc đánh giá chất lượng tóm tắt bằng các metric phù hợp như ROUGE. Tác giả đã tìm hiểu kỹ lưỡng về mô hình sử dụng Bag of Words và các kiến thức nền tảng khác trong lĩnh vực học máy để áp dụng vào bài toán thực tế.

2.1. Phương Pháp Tóm Lược Truyền Thống

Tóm lược truyền thống dựa trên việc chọn lọc các câu quan trọng nhất từ văn bản gốc. Phương pháp này sử dụng Bag of Words và các thuật toán xác định tầm quan trọng của từ khóa. Ưu điểm là tính đơn giản và tốc độ xử lý nhanh. Tuy nhiên, nó không thể tạo ra các câu mới, chỉ là sắp xếp lại các câu có sẵn.

2.2. Phương Pháp Học Sâu và Học Máy

Nghiên cứu áp dụng các mô hình học sâu để nâng cao chất lượng tóm tắt. Các kỹ thuật này cho phép tạo ra các câu tóm tắt hoàn toàn mới, phản ánh tốt hơn nội dung gốc. Học máy giúp mô hình tự động học từ dữ liệu huấn luyện và cải thiện độ chính xác theo từng lần lặp.

III. Mô Hình Đề Xuất và Kết Quả Thử Nghiệm

Luận văn đề xuất một mô hình kết hợp (hybrid model) cho tóm tắt đa văn bản tiếng Việt. Mô hình này kết hợp ưu điểm của cả phương pháp tóm lượcphương pháp khái quát, nhằm tối ưu hóa độ chính xác và tính linh hoạt. Kết quả thử nghiệm trên bộ dữ liệu DUC2007 cho thấy mô hình đề xuất có hiệu suất khả quan, vượt trội so với các phương pháp truyền thống. Luận văn cũng thử nghiệm trên bộ dữ liệu tiếng Việt do tác giả Trần Mai Vũ tạo ra, và kết quả cho thấy tính ứng dụng cao của mô hình trong thực tế xử lý dữ liệu tiếng Việt.

3.1. Quy Trình Huấn Luyện Mô Hình

Quy trình huấn luyện bao gồm hai giai đoạn chính: huấn luyện ban đầu và huấn luyện lại. Mô hình được đặc biệt thiết kế để xử lý các văn bản tiếng Việt với đặc trưng ngôn ngữ riêng. Mỗi giai đoạn huấn luyện được tối ưu hóa để cải thiện hiệu suất dần dần.

3.2. Đánh Giá Kết Quả

Đánh giá chất lượng tóm tắt sử dụng các metric chuẩn trong ngành như ROUGE. Kết quả cho thấy mô hình đề xuất đạt được độ chính xác cao trên cả hai bộ dữ liệu thử nghiệm. Mô hình tóm tắt đa văn bản của luận văn vượt trội so với các phương pháp baseline hiện có.

IV. Kết Luận và Hướng Phát Triển Trong Tương Lai

Luận văn Thạc sĩ "Tóm tắt đa văn bản tiếng Việt" đã đạt được các mục tiêu chính được đề ra. Các đóng góp chính của nghiên cứu bao gồm việc xây dựng một mô hình tóm tắt hiệu quả cho tiếng Việt, cải thiện độ chính xác thông qua kết hợp nhiều phương pháp, và cung cấp đánh giá chi tiết về hiệu suất. Tuy nhiên, luận văn cũng gặp phải một số khó khăn trong quá trình thực hiện, đặc biệt là trong việc xử lý các đặc trưng riêng của ngôn ngữ Việt. Hướng phát triển trong tương lai bao gồm việc cải thiện mô hình với các kỹ thuật mới nhất, mở rộng bộ dữ liệu huấn luyện, và ứng dụng vào các lĩnh vực thực tế khác.

4.1. Những Đóng Góp Chính

Luận văn đã phát triển thành công một mô hình tóm tắt đa văn bản thích hợp với tiếng Việt. Đóng góp quan trọng là đề xuất phương pháp kết hợp mới, cung cấp bộ dữ liệu và kết quả đánh giá chi tiết. Các kết quả này tạo nền tảng tốt cho các nghiên cứu tiếp theo trong lĩnh vực xử lý ngôn ngữ tự nhiên tiếng Việt.

4.2. Hướng Phát Triển Trong Tương Lai

Các nghiên cứu tiếp theo có thể tích hợp các kiến trúc neural mới nhất như Transformer, BERT, hoặc các mô hình ngôn ngữ lớn. Cần mở rộng bộ dữ liệu huấn luyện với các lĩnh vực đa dạng hơn. Ứng dụng vào các hệ thống tóm tắt tin tức tự động, hệ thống tìm kiếm thông tin, và các giải pháp NLP thực tiễn khác cũng là những hướng đi tiềm năng.

28/12/2025

Trích đoạn nội dung tài liệu

Chương 1: Mé dan: dat win da, giới thiện bài toán tầm rất vấn bân - Chương 2: Cơ sở lý thuyết: trình bày các kiến rhức ed bản đã vận dụng trong luận văn tất nghiệp. - Chương 3: llướng tiếp cân và mỏ hình đề xuất: trình bày các hướng tiếp cận và đề xuất mô hình cho bài toán tám tắt đa văn bản bheo hướng tóm lược - Chương 4: Cài đặt, thứ nghiệm và đánh giá: trình bầy về dữ liệu th nghiệm và đưa ra kết quủ của các phương pháp trêu bộ dữ liệu thử nghiệm. - Chương 5: Kết luận và hướng phát triển: trình bày những đồng gốp. những khó khăn của Luận văn tốt nghiệp.

Từ đó dưa ra hướng phát triển cha luận văn tốt nghiệp TIỌC VIỄN ghiém va danh gi môi truGng cdi dat} .21_ Bộ dữ liệu Duc2007].2_ Hộ dữ liệu Báo mới 53 2 Hướng hất bị le 54 LOI CAM GN Lời dấu tiến, em xin gửi lời cảm ơn chắn thành dễn các Thầy. Củ giáo trong viện ‘ong nghé thông tin và 1Yuyền thông đã truyền tải không chỉ là kiến thức, kỹ năng. mà còn là những nhiệt huyết để em có thể vững tâm trong suốt thừi gian học tập, Tim xin bày tố lòng biết ơn sân sắc tối PGS. Tả Thanh Thương đã chỉ bảo tận tình để em có thể hoần thành được Luậu vấu.

Ngoài ra, em xin gửi lời cảm ơn đếu. "Viện nghiên cứu trí Luệ nhận Lạo ViLAT đã tạo điều kiệt môi trường vắng tạo cho củ: hoàn thành tết nhiệm vụ Tận văn được giao. Cuối cùng, em xin gửi lời cảm ơn đến gia đình, và những người bạn luôn ủng hộ em hết mềnh trong quá trình hoàn thiện Luận văn. HỌC VIÊN TOM TAT NOT DUNG LUAN VAN TOT NGTITEP Mục tiếu của khuén khổ Luận vấn tốc nghiệp là giải quyết được bài toán tóm tắt đa ván bảu sử dụng kỹ thuật tóm lược cho ngôn ngữ tiếng, Việt, Qua quá tình tìm hiểu cũng, với sự hướng, dẫu tận tinh edu PCS.

Lé Thanh Hương, kết quả thụ dược của luận. văn là khả quan. Báo cáo này sẽ trình bày những vấn dề đã tầm hiểu được và quá uình thực hiện Luận văn tết nghiệp. Kết quả của Luận văn tối nghiệp đã thử nghiệm được các phương pháp trên bộ dữ liệu "Duc2007" cho mỡ hình tóm bắt đa van bản trích rút và đưa ra được kết quá để sơ sánh chất lượng củu cúc phương phúp khác trêu thế ra, một Hổ hình tốra tất, du vấn bản lóm lược dữ dược dễ xuất cho bộ dữ liệu tiếng Việt và kết quả thứ nghiệm cho thấy chất lượng của mö hình dề xuất là khả quan tren bộ dữ liệu của tác giả Trần Mai Vũ.

Xôi đung chính của Taận văn tất nghiệp là trình bày các phương pháp đề giải quyết. van đề trích rút thông tïn quan trọng trong tập các văn bản và sau đó tóm tắt lại bằng những câu từ hoàn toàn mới. Chỉ tiết Báo cáo luận văn tốt nghiệp sẽ trình bày các vấn đề sau: - Chương 1: Mé dan: dat win da, giới thiện bài toán tầm rất vấn bân - Chương 2: Cơ sở lý thuyết: trình bày các kiến rhức ed bản đã vận dụng trong luận văn tất nghiệp. - Chương 3: llướng tiếp cân và mỏ hình đề xuất: trình bày các hướng tiếp cận và đề xuất mô hình cho bài toán tám tắt đa văn bản bheo hướng tóm lược - Chương 4: Cài đặt, thứ nghiệm và đánh giá: trình bầy về dữ liệu th nghiệm và đưa ra kết quủ của các phương pháp trêu bộ dữ liệu thử nghiệm.

- Chương 5: Kết luận và hướng phát triển: trình bày những đồng gốp. những khó khăn của Luận văn tốt nghiệp. Từ đó dưa ra hướng phát triển cha luận văn tốt nghiệp TIỌC VIỄN TOM TAT NOT DUNG LUAN VAN TOT NGTITEP Mục tiếu của khuén khổ Luận vấn tốc nghiệp là giải quyết được bài toán tóm tắt đa ván bảu sử dụng kỹ thuật tóm lược cho ngôn ngữ tiếng, Việt, Qua quá tình tìm hiểu cũng, với sự hướng, dẫu tận tinh edu PCS. Lé Thanh Hương, kết quả thụ dược của luận.

văn là khả quan. Báo cáo này sẽ trình bày những vấn dề đã tầm hiểu được và quá uình thực hiện Luận văn tết nghiệp. Kết quả của Luận văn tối nghiệp đã thử nghiệm được các phương pháp trên bộ dữ liệu "Duc2007" cho mỡ hình tóm bắt đa van bản trích rút và đưa ra được kết quá để sơ sánh chất lượng củu cúc phương phúp khác trêu thế ra, một Hổ hình tốra tất, du vấn bản lóm lược dữ dược dễ xuất cho bộ dữ liệu tiếng Việt và kết quả thứ nghiệm cho thấy chất lượng của mö hình dề xuất là khả quan tren bộ dữ liệu của tác giả Trần Mai Vũ. Xôi đung chính của Taận văn tất nghiệp là trình bày các phương pháp đề giải quyết.

van đề trích rút thông tïn quan trọng trong tập các văn bản và sau đó tóm tắt lại bằng những câu từ hoàn toàn mới. Chỉ tiết Báo cáo luận văn tốt nghiệp sẽ trình bày các vấn đề sau: - Chương 1: Mé dan: dat win da, giới thiện bài toán tầm rất vấn bân - Chương 2: Cơ sở lý thuyết: trình bày các kiến rhức ed bản đã vận dụng trong luận văn tất nghiệp. - Chương 3: llướng tiếp cân và mỏ hình đề xuất: trình bày các hướng tiếp cận và đề xuất mô hình cho bài toán tám tắt đa văn bản bheo hướng tóm lược - Chương 4: Cài đặt, thứ nghiệm và đánh giá: trình bầy về dữ liệu th nghiệm và đưa ra kết quủ của các phương pháp trêu bộ dữ liệu thử nghiệm. - Chương 5: Kết luận và hướng phát triển: trình bày những đồng gốp.

những khó khăn của Luận văn tốt nghiệp. Từ đó dưa ra hướng phát triển cha luận văn tốt nghiệp TIỌC VIỄN ghiém va danh gi môi truGng cdi dat} .21_ Bộ dữ liệu Duc2007].2_ Hộ dữ liệu Báo mới 53 2 Hướng hất bị le 54 LOI CAM GN Lời dấu tiến, em xin gửi lời cảm ơn chắn thành dễn các Thầy. Củ giáo trong viện ‘ong nghé thông tin và 1Yuyền thông đã truyền tải không chỉ là kiến thức, kỹ năng. mà còn là những nhiệt huyết để em có thể vững tâm trong suốt thừi gian học tập, Tim xin bày tố lòng biết ơn sân sắc tối PGS.

Tả Thanh Thương đã chỉ bảo tận tình để em có thể hoần thành được Luậu vấu. Ngoài ra, em xin gửi lời cảm ơn đếu. "Viện nghiên cứu trí Luệ nhận Lạo ViLAT đã tạo điều kiệt môi trường vắng tạo cho củ: hoàn thành tết nhiệm vụ Tận văn được giao. Cuối cùng, em xin gửi lời cảm ơn đến gia đình, và những người bạn luôn ủng hộ em hết mềnh trong quá trình hoàn thiện Luận văn.

HỌC VIÊN ghiém va danh gi môi truGng cdi dat} .21_ Bộ dữ liệu Duc2007].2_ Hộ dữ liệu Báo mới 53 2 Hướng hất bị le 54 TOM TAT NOT DUNG LUAN VAN TOT NGTITEP Mục tiếu của khuén khổ Luận vấn tốc nghiệp là giải quyết được bài toán tóm tắt đa ván bảu sử dụng kỹ thuật tóm lược cho ngôn ngữ tiếng, Việt, Qua quá tình tìm hiểu cũng, với sự hướng, dẫu tận tinh edu PCS. Lé Thanh Hương, kết quả thụ dược của luận. văn là khả quan. Báo cáo này sẽ trình bày những vấn dề đã tầm hiểu được và quá uình thực hiện Luận văn tết nghiệp.

Kết quả của Luận văn tối nghiệp đã thử nghiệm được các phương pháp trên bộ dữ liệu "Duc2007" cho mỡ hình tóm bắt đa van bản trích rút và đưa ra được kết quá để sơ sánh chất lượng củu cúc phương phúp khác trêu thế ra, một Hổ hình tốra tất, du vấn bản lóm lược dữ dược dễ xuất cho bộ dữ liệu tiếng Việt và kết quả thứ nghiệm cho thấy chất lượng của mö hình dề xuất là khả quan tren bộ dữ liệu của tác giả Trần Mai Vũ. Xôi đung chính của Taận văn tất nghiệp là trình bày các phương pháp đề giải quyết. van đề trích rút thông tïn quan trọng trong tập các văn bản và sau đó tóm tắt lại bằng những câu từ hoàn toàn mới. Chỉ tiết Báo cáo luận văn tốt nghiệp sẽ trình bày các vấn đề sau: - Chương 1: Mé dan: dat win da, giới thiện bài toán tầm rất vấn bân - Chương 2: Cơ sở lý thuyết: trình bày các kiến rhức ed bản đã vận dụng trong luận văn tất nghiệp.

- Chương 3: llướng tiếp cân và mỏ hình đề xuất: trình bày các hướng tiếp cận và đề xuất mô hình cho bài toán tám tắt đa văn bản bheo hướng tóm lược - Chương 4: Cài đặt, thứ nghiệm và đánh giá: trình bầy về dữ liệu th nghiệm và đưa ra kết quủ của các phương pháp trêu bộ dữ liệu thử nghiệm. - Chương 5: Kết luận và hướng phát triển: trình bày những đồng gốp. những khó khăn của Luận văn tốt nghiệp. Từ đó dưa ra hướng phát triển cha luận văn tốt nghiệp TIỌC VIỄN Chương 1 Mở đầu Dữ liệu trên mạng ngày càng ra tăng với một tốc độ chóng mặt theo thời gian.

Lượng đữ liệu quá lôu này trở nều rất khó kiểm soát và gây ra những khó khăn cho muợi người khi tìm đạc những thẩng tỉn trên mạng. Mọi người số xu hướng rìm dọc những thông tin ngắn ngọn nhưng vẫn giữ được những ý chính. Nhìmng với việc dữ liện ngày cằng gia tăng, việc con người tự mình tạo ra các ban tém tắt là bất kha thi. Vi vay, viée tao ra mot md tình tám tắt văn bản tự đông là mệt vấn đề cấp thiết trong cộng đồng nghiên cứu về xử lý ngön ngữ tự nhiên.1 Đặt vẫn đề Tow tắt văn bản dang là hướng nghiều cứu dược khá nhiều nhà nghiều cứu quan vâm và các kết quà về những mõ hình tầm tắt văn bân hiện tại là trương đôi khả.

Cùng với đó, sự phát triển của phần cứng ngày càng mạnh mẽ kết hợp với lượng dữ liện tăng. lên từng phút làm cho việc giải quyết các bài toán thea hướng tiếp cận máy hoc càng trổ nên dễ dàng. Dặc biệt là với bài toán bóm tất đa, vần bản tóm lược khi mà việc huấn luyện một mũ hình đủ tốt đòi hỏi mớt lượng lớn dữ liệu và yêu cầu tắc độ tính toán nhanh. Vì lý do đó, bài todu tém vat da van bau theo hướug tốm lược dang rất dược quan vâm trong các công đằng hạc thuật trên toàn thể giới Sơng song với đó, hướng nghiên cứu về bài roán tốm tất văn bản ở Việt Nam còn khá ít, đặc biệt là bài toán tóm tắt đa văn bản tóm lược.

Thấy được những lợi ích và thực trạng nghiên cứu tại Việt Nam, em quyết định ©hực hiện việc tìm hiểu và xây dựng chương trình 'óm tat đa văn bản tóm lược với ngón ngữ tiếng Việt.

Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ