Phát hiện từ mới trong phân tích cảm xúc từ quan điểm mới

Tài liệu nghiên cứu Luận văn hpu phát hiện từ quan điểm mới cho phân tích cảm xúc, tổng hợp lý thuyết và thực hành, cung cấp kiến thức chuyên sâu về .

Chuyên ngành

Công Nghệ Thông Tin

Người đăng

Ẩn danh

Thể loại

Đồ Án Tốt Nghiệp

2016

55
3
0

Phí lưu trữ

30 Point

Mục lục chi tiết

1. CHƯƠNG 1: TỔNG QUAN VỀ PHÂN TÍCH QUAN ĐIỂM

1.1. Nhu cầu về thông tin quan điểm và nhận xét

1.2. Lịch sử của phân tích quan điểm và khai thác quan điểm

1.3. Một số nghiên cứu trong phân tích quan điểm

1.3.1. Xác định cụm từ, quan điểm

1.3.2. Sử dụng tính từ và phó từ

1.3.3. Sử dụng các động từ

2. CHƯƠNG 2: PHÁT HIỆN TỪ MỚI CHO PHÂN TÍCH QUAN ĐIỂM

2.1. Giới thiệu phương pháp

2.2. Phương pháp

2.2.1. Tổng quan thuật toán

2.2.2. Độ đo tính hữu ích của một mẫu

2.2.3. Độ đo khả năng để là các từ mới

2.2.4. Kiểm tra tỷ lệ thích hợp (LRT)

2.2.5. Entropy mẫu bên trái (Left pattern Entropy)

2.2.6. Xác xuất của một từ mới

2.2.7. Các độ đo nguyên tắc không cấu thành

2.2.8. Cấu hình để kết hợp các yếu tố khác nhau

2.2.9. Chuẩn bị dữ liệu

2.2.10. Đánh giá các độ đo và so sánh với các phương pháp có bản

2.2.11. Điều chỉnh tham số

2.2.12. Dự đoán mức độ cảm xúc của các từ quan điểm mới

2.2.13. Ứng dụng của các từ quan điểm mới cho phân tích cảm xúc

3. CHƯƠNG 3: ỨNG DỤNG TÌM TỪ QUAN ĐIỂM MỚI CHO DỮ LIỆU TIẾNG VIỆT

3.1. Phương pháp

3.2. Xử lý dữ liệu

TÀI LIỆU THAM KHẢO

LỜI CẢM ƠN

LỜI NÓI ĐẦU

Tóm tắt

I. Tổng quan về phát hiện từ mới trong phân tích cảm xúc

Phân tích cảm xúc là một lĩnh vực nghiên cứu quan trọng trong công nghệ thông tin, đặc biệt là trong bối cảnh dữ liệu lớn hiện nay. Việc phát hiện từ mới trong ngữ nghĩa giúp cải thiện độ chính xác của các hệ thống phân tích cảm xúc. Các từ mới thường xuất hiện trong các nền tảng mạng xã hội, nơi người dùng thường xuyên chia sẻ ý kiến và cảm xúc của họ. Nghiên cứu này không chỉ giúp hiểu rõ hơn về cảm xúc của người dùng mà còn mở ra nhiều ứng dụng thực tiễn trong marketing và dịch vụ khách hàng.

1.1. Nhu cầu về từ mới trong phân tích cảm xúc

Sự phát triển của Internet đã tạo ra một lượng lớn dữ liệu cảm xúc từ người dùng. Các từ mới xuất hiện thường xuyên trong các bài viết, bình luận và đánh giá. Việc nhận diện và phân tích những từ này là cần thiết để cải thiện độ chính xác của các mô hình phân tích cảm xúc.

1.2. Lịch sử phát triển của phân tích cảm xúc

Phân tích cảm xúc đã trở thành một lĩnh vực nghiên cứu sôi nổi từ những năm 2000. Sự phát triển của các phương pháp học máy và xử lý ngôn ngữ tự nhiên đã thúc đẩy nghiên cứu trong lĩnh vực này. Nhiều công trình nghiên cứu đã chỉ ra tầm quan trọng của việc phát hiện từ mới trong việc nâng cao hiệu quả phân tích.

II. Thách thức trong việc phát hiện từ mới cho phân tích cảm xúc

Mặc dù có nhiều tiến bộ trong công nghệ, việc phát hiện từ mới vẫn gặp phải nhiều thách thức. Các từ mới thường không có trong từ điển hiện có, và ngữ cảnh sử dụng của chúng có thể thay đổi nhanh chóng. Điều này đòi hỏi các hệ thống phân tích cảm xúc phải liên tục cập nhật và cải tiến để theo kịp với sự thay đổi của ngôn ngữ.

2.1. Khó khăn trong việc xác định từ mới

Việc xác định từ mới trong ngữ cảnh cảm xúc là một thách thức lớn. Các từ có thể mang nhiều nghĩa khác nhau tùy thuộc vào ngữ cảnh, và điều này làm cho việc phân loại cảm xúc trở nên phức tạp.

2.2. Tác động của ngữ cảnh đến phân tích cảm xúc

Ngữ cảnh sử dụng từ mới có thể ảnh hưởng lớn đến cách mà cảm xúc được diễn đạt. Các mô hình phân tích cảm xúc cần phải xem xét ngữ cảnh để đưa ra kết quả chính xác hơn.

III. Phương pháp phát hiện từ mới trong phân tích cảm xúc

Để phát hiện từ mới, nhiều phương pháp đã được nghiên cứu và áp dụng. Các phương pháp này bao gồm việc sử dụng machine learning, khai thác dữ liệu và phân tích ngữ nghĩa. Những phương pháp này giúp nhận diện và phân loại các từ mới một cách hiệu quả.

3.1. Sử dụng machine learning trong phát hiện từ mới

Machine learning đã trở thành một công cụ mạnh mẽ trong việc phát hiện từ mới. Các thuật toán học sâu có thể học từ dữ liệu lớn và nhận diện các mẫu từ mới trong ngữ cảnh cảm xúc.

3.2. Khai thác dữ liệu để phát hiện từ mới

Khai thác dữ liệu từ các nguồn như mạng xã hội và diễn đàn giúp thu thập thông tin về các từ mới. Phân tích các bình luận và đánh giá có thể cung cấp cái nhìn sâu sắc về cách mà người dùng sử dụng ngôn ngữ.

IV. Ứng dụng thực tiễn của phát hiện từ mới trong phân tích cảm xúc

Phát hiện từ mới có nhiều ứng dụng thực tiễn trong các lĩnh vực như marketing, dịch vụ khách hàng và nghiên cứu thị trường. Các công ty có thể sử dụng thông tin này để cải thiện sản phẩm và dịch vụ của mình, đồng thời nâng cao trải nghiệm khách hàng.

4.1. Ứng dụng trong marketing

Các công ty có thể sử dụng phân tích cảm xúc để hiểu rõ hơn về nhu cầu và mong muốn của khách hàng. Việc phát hiện từ mới giúp họ điều chỉnh chiến lược marketing một cách hiệu quả.

4.2. Ứng dụng trong dịch vụ khách hàng

Phân tích cảm xúc giúp các công ty cải thiện dịch vụ khách hàng bằng cách nhận diện nhanh chóng các vấn đề và phản hồi từ khách hàng. Điều này giúp nâng cao sự hài lòng của khách hàng.

V. Kết luận và tương lai của phát hiện từ mới trong phân tích cảm xúc

Phát hiện từ mới trong phân tích cảm xúc là một lĩnh vực đầy tiềm năng và thách thức. Với sự phát triển không ngừng của công nghệ, các phương pháp mới sẽ tiếp tục được nghiên cứu và áp dụng. Tương lai của lĩnh vực này hứa hẹn sẽ mang lại nhiều giá trị cho các doanh nghiệp và tổ chức.

5.1. Tương lai của phân tích cảm xúc

Với sự phát triển của công nghệ, phân tích cảm xúc sẽ ngày càng trở nên chính xác và hiệu quả hơn. Các mô hình mới sẽ giúp nhận diện cảm xúc một cách tự động và nhanh chóng.

5.2. Cơ hội nghiên cứu trong lĩnh vực này

Nghiên cứu về phát hiện từ mới trong phân tích cảm xúc vẫn còn nhiều cơ hội. Các nhà nghiên cứu có thể khám phá các phương pháp mới và cải tiến các mô hình hiện có để nâng cao hiệu quả phân tích.

14/07/2025

Trích đoạn nội dung tài liệu

CHƯƠNG 1 : TỔNG QUAN VỀ PHÂN TÍCH QUAN ĐIỂM 1.1 Nhu cầu về thông tin quan điểm và nhận xét Những thông tin nhận xét góp ý đã luôn luôn là một phần quan trọng trong viêc̣ cung cấp thông tin cho quátrinh̀¤ ra quyết đinḥ của hầu hết chúng ta. Trước khi Internet trởlên phổbiến, chúng ta thường yêu cầu baṇ bèhay người thân giới thiệu một thợ cơ khí tự động hoặc yêu cầu tài liệu tham khảo liên quan đến xin việc từ các đồng nghiệp, hoặc tư vấn tiêu dùng. Ngày nay, Internet và Web đa ̃giúp cho chúng ta cóthểdê ̃dàng tiếp câṇ các ýkiến và kinh nghiêṃ của những người khác màkhông nhất thiết phải lànhững người quen biết cánhân, không phải làcác nhàphê binh̀¤ chuyên nghiêp̣ nổi tiếng, những người màchúng ta chưa bao giờ nghe nói tới trong không gian rộng lớn. Và ngược lại, ngày càng nhiều vànhiều hơn nữa những người sẵn sàng cung cấp các ýkiến của mình cho những người khác qua Internet.

Theo hai cuộc khảo sát của hơn 2000 người Mỹ trưởng thành mỗi: 81% người dùng Internet (hoặc 60% người Mỹ) đã thực hiện nghiên cứu trực tuyến về một sản phẩm ít nhất một lần; 20% (15% của tất cả các người Mỹ) làm như vậy trong một ngày. Trong số các độc giả đánh giá trực tuyến của nhà hàng, khách sạn, và các dịch vụ khác nhau (ví dụ như, các cơ quan du lịch hoặc bác sĩ), giữa 73% và 87% báo cáo đánh giá đã có một ảnh hưởng đáng kể mua hàng của họ. Người tiêu dùng sẵn sàng trả từ 20% đến 99% một mục đươc̣ đánh giá5 sao cao hơn so với một mục đánh giá 4 sao, 32% đã cung cấp một đánh giá về một sản phẩm, dịch vụ thông qua một hệ thống xếp hạng trực tuyến, trong đó có 18% của công dân trực tuyến cao cấp, có đăng một bình luận trực tuyến hoặc xem xét về một sản phẩm hay dịch vụ. Thống kê nhanh chỉra rằng viêc̣ tiêu thu ̣hàng hóa và dịch vụ không phải là động cơ duy nhất khi người dùng tìm kiếm hoặc thể hiện ýkiến trực tuyến.

Sư ̣cần thiết của những thông tin chính tri ̣cũng làmôṭ yếu tố quan trong̣. Ví dụ, trong một cuộc khảo sát hơn 2500 người Mỹ trưởng thành, Rainie và Horrigan nghiên cứu có31% người Mỹ - trên 60 triệu người - 2006 người dùng Internet vâṇ đông̣ tranh cử, là những người thu thập thông tin về 15 cuộc bầu cử năm 2006 trực tuyến và trao đổi nhâṇ xét thông qua email. Trong số này: • 28% nói rằng nguyên nhân chính cho các hoạt động trực tuyến này để thu nhâṇ được quan điểm từ bên trong cộng đồng của họ, và 34% cho biết một lý do chính là để nhâṇ được quan điểm từ bên ngoài cộng đồng của họ. • 27% đã xem đánh giá trực tuyến cho sự tán thành hoặc xếp hạng của các tổ chức bên ngoài.

• 28% cho biết rằng hầu hết các trang web mà họ sử dụng để chia sẻ quan điểm, nhưng 29% nói rằng phần lớn các trang web mà họ sử dụng thách thức quan điểm của họ, chỉ ra rằng nhiều người không chỉ đơn giản là tìm kiếm đểxác nhận các quan điểm cótrước của ho.̣ • 8% đăng binh̀¤ luâṇ trực tuyến bình luận chính trị riêng của họ. Đối với người dùng tìm kiếm sư ̣tin câỵ trong những lời khuyên vàtư vấn trưc̣ tuyến quan tâm đến viêc̣ xây dưng̣ môṭhê ̣thống mới đểxử lýtrưc̣ tiếp các quan điểm trước tiên làphân loaịchúng. Theo Horrigan thống kê rằng trong khi đa số người sử dụng internet của Mỹ cho rằng kinh nghiệm tích cực trong nghiên cứu sản phẩm trực tuyến, 58% cho rằng thông tin trực tuyến là thiếu, khótìm, khó hiểu vàhoăc̣ quánhiều. Vì vậy, nhu cầu cómôṭhê ̣thống đểhỗtrơ ̣người tiêu dùng tìm kiếm thông tin làrất cần thiết.

Các nhàcung cấp sản phẩm ngày càng chúýhơn đến sự quan tâm mà người dùng cá nhân thểhiêṇ trong các nhận xét trực tuyến về sản phẩm và dịch vụ, vàsư ̣ảnh hưởng như xu thếsửdung̣. Với sự bùng nổ của nền tảng Web 2.0 như các blog, diễn đàn thảo luận, peer-to-peer mạng, và các loại khác nhau của các mang̣ xa ̃hôị. • Thống kê của Facebook: có hơn 500 triệu người dùng ở trạng thái hoạt động (active) mỗi người có trung bình 130 bạn (friends), trao đổi qua lại trên 900 triệu đối tượng. • Twitter (5/2011): có hơn 200 triệu người dùng.

Một ngày có hơn 300 nghìn tài khoản mới, trung bình hơn 190 triệu tin nhắn, xử lý trung bình khoảng 1,6 tỷ câu hỏi. 16 • Ở Việt Nam: các mạng xã hội zing.vn … thu hút được đông đảo người dùng tham gia. Môṭ lương̣ đông đảo người dùng gia tăng chưa từng có và có quyền chia sẻ kinh nghiệm và nhận xét của riêng họ vềbất kỳsản phẩm hoăc̣ dicḥ vu,̣ làtích cực hay tiêu cực. Khi các công ty lớn đang ngày càng nhận ra, những tiếng nói của người tiêu dùng có thể vận dụng rất lớn ảnh hưởng trong việc hình thành nhận xét của người tiêu dùng khác, cuối cùng đểtrung thành với thương hiệu của họ, ho ̣quyết định mua, và vận động cho chính thương hiệu của họ.

Công ty có thể đáp ứng với những hiểu biết của người tiêu dùng mà họ tạo ra thông qua điều khiển phương tiện truyền thông xã hội và phân tích các thông điêp̣ maketing của ho,̣đinḥ vi ̣thương hiêu,̣ phát triển sản phẩm vàcác hoaṭđông̣ phùhơp̣ khác. Tuy nhiên, các nhà phân tích ngành công nghiệp lưu ý rằng việc tận dụng các phương tiện truyền thông mới cho mục đích theo dõi hình ảnh sản phẩm đòi hỏi cần phải cócông nghệ mới. Các nhà tiếp thị luôn luôn cần giám sát các phương tiện truyền thông cho thông tin liên quan đến thương hiệu của mình - cho dù đó là đối với các hoạt động quan hệ công chúng, vi phạm gian lận, hoặc tình báo cạnh tranh. Nhưng phân mảnh các phương tiện truyền thông và thay đổi hành vi của người tiêu dùng đã loaị trừ các phương pháp giám sát truyền thống.

Technorati ước tính rằng 75. 000 blog mới được tạo ra mỗi ngày, cùng với 1, 2 triệu bài viết mỗi ngày, trong đó có nhiều nhận xét người tiêu dùng thảo luận về sản phẩm và dịch vụ. Vì vậy, không chỉcócá nhân, màcác công ty, các tổchức đều quan tâm đến môṭhệ thống có khả năng tự động phân tích quan điểm của người tiêu dùng.2 Lịch sử của phân tích quan điểm và khai thác quan điểm Linh̃ vưc̣ phân tích quan điểm (sentiment analysis) hay khai thác quan điểm (opinion mining) gần đây đã thu hút được sự quan tâm rộng rãi của các nhànghiên cứu. Năm 2001 bắt đầu đánh dấu sư ̣lan rộng nhận thức về các vấn đề nghiên cứu và cơ hội nâng cao phân tích tình cảm và khai thác quan điểm.

17 Các nhân tốđươc̣ nghiên cứu gồm: • Sự gia tăng của các phương pháp học máy, xử lý ngôn ngữ tự nhiên và khôi phục thông tin. • Sự sẵn có của các tâp̣ dữ liệu đào taọ cho các thuật toán học máy, sư ̣ phát triển của Internet, cụ thể làsự phát triển của tâp̣ hơp̣ các trang Web thu thâp̣ các ýkiến vàquan điểm. • Thực hiện những thách thức trí tuệ, thương mại và các ứng dụng thông minh trong linh̃ vưc̣ này. Thuâṭngữkhai thác quan điểm (Dave et al.

2003) là các công cu ̣khai thác quan điểm se ̃xử lý một tập hợp các kết quả tìm kiếm cho một đối tương̣ nhất định, sinh ra một danh sách các thuộc tính sản phẩm (chất lượng, đăc̣ trưng, vv) và các quan điểm tổng hợp vềchúng (kém, bình thường, tốt). “Phân tích quan điểm” làcụm từ song song của "khai thác quan điểm" ở những khía cạnh nhất định (Das và Chen Tong, 2001). “Phân tích quan điểm" và "khai thác quan điểm" biểu thị cùng một lĩnh vực nghiên cứu.3 Một số nghiên cứu trong phân tích quan điểm Gần đây, khai thác quan điểm đã trở thành chủ đề nóng giữa các nhà nghiên cứu xử lý ngôn ngữ tự nhiên và trích chọn thông tin. Cókhá nhiều các bài báo được xuất bản và những ứng dụng khác nhau có sử dụng hệ thống đánh giá quan điểm được phát triển và đưa vào trong hoạt động thương mại.

Các tiếp câṇ chủyếu với bài toán này là:  Phân lớp quan điểm thông qua viêc̣ xác đinḥ từ, cụm từ chỉ quan điểm  Xác định quan điểm với các thểhiêṇ trong từng thuôc̣ tính của đối tương̣ cần tìm kiếm quan điểm.1 Xác định cụm từ, quan điểm Những từ, cụm từ chỉ quan điểm là những từ ngữ được sử dụng để diễn tả cảm xúc, ý kiến người viết, những quan điểm chủ quan đó dựa trên những vấn đề mà anh ta hay cô ta đang tranh luận. Việc rút ra những từ, cụm từ chỉ quan điểm là giai đoạn đầu tiên trong hệ thống đánh giá quan điểm, vì những 18 từ, cụm từ này là những chìa khóa cho công việc nhận biết và phân loại tài liệu sau đó. Ứng dụng dựa trên hệ thống đánh giá quan điểm hiện nay tập trung vào các từ chỉ nội dung câu: danh từ, động từ, tính từ và phó từ. Phần lớn công việc sử dụng từ loại để rút chúng ra (Hu và Liu, 2004, Turney, 2002).

Việc gán nhãn từ loại cũng được sử dụng trong công việc này, điều này có thể giúp cho việc nhận biết xu hướng quan điểm trong giai đoạn tiếp theo. Những kĩ thuật phân tích ngôn ngữ tự nhiên khác như xóa: stopwords, stemming cũng được sử dụng trong giai đoạn tiền xử lý để rút ra từ, cụm từ chỉ quan điểm 1.2 Sử dụng tính từ và phó từ Những hệ thống hiện tại dùng để nhận biết những từ chỉ quan điểm hay xu hướng quan điểm tập trung chủ yếu vào các tính từ và phó từ vì chúng được xem là sự biểu lộ rõ ràng nhất của tính chủ quan ( Hatzivassiloglou and McKeown, 1997, Wiebe and Bruce, 1999 ). Hu và Liu (2004) áp dụng việc gán nhãn từ loại và kĩ thuật xử lý ngôn ngữ tự nhiên nhằm rút ra những tính từ cũng như những từ chỉ quan điểm. Phương pháp của ho ̣dưạ vào viêc̣ phân loaịdưạ trên dấu hiêụ quan điểm về sản phẩm:  Định nghĩa một câu mà chứa một hay nhiều dấu hiệu sản phẩm và từ chỉ quan điểm được xem là một câu chỉ quan điểm.

 Với mỗi câu trong dữ liệu chỉ quan điểm, rút ra tất cả những tính từ được coi là những từ chỉ quan điểm.  Kết quả thực nghiệm việc rút ra những câu đánh giá quan điểm có độ chính xác (precision) khoảng 64.2% và recall là 69.  Sử dụng WordNet (Fellbaum, 1998) để xác định các tính từ được rút ra mang chiều hướng tích cực (positive) hay tiêu cực (negative). Trong WordNet, các tính từ được tổ chức thành các cụm từ lưỡng cực, nửa cụm thứ hai phần đầu là từ trái nghĩa của cụm thứ nhất.

Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ

Tài liệu có tiêu đề Phát hiện từ mới trong phân tích cảm xúc: Quan điểm mới và ứng dụng mang đến những cái nhìn sâu sắc về các phương pháp phân tích cảm xúc hiện đại, nhấn mạnh tầm quan trọng của việc phát hiện từ mới trong việc hiểu rõ hơn về cảm xúc của người dùng. Bài viết không chỉ trình bày các kỹ thuật mới mà còn chỉ ra những ứng dụng thực tiễn của chúng trong các lĩnh vực như marketing và dịch vụ khách hàng. Độc giả sẽ được lợi từ việc nắm bắt các xu hướng mới, giúp cải thiện chiến lược tiếp cận và tương tác với khách hàng.

Để mở rộng thêm kiến thức về phân tích cảm xúc, bạn có thể tham khảo tài liệu Chuyên đề thực tập tốt nghiệp phân tích cảm xúc của người dùng trên trang thương mại điện tử foody. Tài liệu này cung cấp cái nhìn chi tiết về cách phân tích cảm xúc trong bối cảnh thương mại điện tử, từ đó giúp bạn có thêm thông tin và góc nhìn đa dạng về chủ đề này.