Xây dựng hệ thống truyhồi họcliệucho sinh viên ngànhđiện điệntử

Luận văn Xây dựng hệ thống truy hồi học liệu điện - điện tử: ứng dụng đánh giá thực trạng, đề xuất mô hình cải tiến phù hợp thực tế điện - điện tử

• Tác giả: Trần Thị Tuyết Hoa
• Người hướng dẫn: Ts. Tân Hạnh
• Trường học: Học Viện Công Nghệ Bưu Chính Viễn Thông
• Chuyên ngành: Hệ Thống Thông Tin
• Đề tài: Xây Dựng Hệ Thống Truy Hồi Học Liệu Cho Sinh Viên Ngành Điện - Điện Tử
• Loại tài liệu: Luận Văn Thạc Sĩ
• Năm xuất bản: 2022
• Địa điểm: Tp.Hồ Chí Minh

Tóm tắt

I. Tổng Quan Xây Dựng Hệ Thống Truy Hồi Học Liệu Điện Điện Tử

Truy hồi thông tin (IR) là quá trình tìm kiếm tài liệu phi cấu trúc, thường là văn bản, đáp ứng nhu cầu thông tin cụ thể. Trong bối cảnh học liệu điện tử, việc xây dựng hệ thống truy hồi hiệu quả là vô cùng quan trọng. Một hệ thống tốt giúp sinh viên tiết kiệm thời gian tìm kiếm tài liệu môn học, đặc biệt trong bối cảnh học trực tuyến ngày càng phổ biến. Luận văn thạc sĩ ứng dụng này tập trung vào việc xây dựng một hệ thống như vậy cho sinh viên ngành Điện - Điện tử. Vấn đề đặt ra là làm sao cung cấp kết quả chính xác và đáng tin cậy từ nguồn học liệu điện tử của trường, tránh tình trạng thông tin sai lệch hoặc không phù hợp tràn lan trên Internet. Mục tiêu cuối cùng là hỗ trợ sinh viên học tập hiệu quả hơn. Hệ thống truy hồi thông tin hoạt động dựa trên hai giai đoạn chính: Tiền xử lý và Thu thập. Giai đoạn tiền xử lý bao gồm việc xử lý ngôn ngữ tự nhiên, chỉ mục và đánh trọng số thuật ngữ. Giai đoạn thu thập bao gồm xử lý truy vấn, tìm kiếm, xếp hạng và phản hồi.

1.1. Truy Hồi Thông Tin Định Nghĩa và Ứng Dụng Thực Tiễn

Truy hồi thông tin (Information Retrieval - IR) là việc tìm kiếm tài liệu phi cấu trúc (thường là văn bản) đáp ứng nhu cầu thông tin từ các tập tin lớn trên máy tính, máy chủ cục bộ hoặc trên Internet. IR là lĩnh vực khoa học máy tính chuyên về lý thuyết và thực hành tìm kiếm thông tin. Văn bản là phương tiện phổ biến nhất để diễn đạt và phân phối thông tin, hầu hết các nghiên cứu về IR tập trung vào tìm kiếm thông qua bộ sưu tập văn bản. Hệ thống truy hồi có thể xem xét lịch sử người dùng, vị trí thực tế, các thay đổi theo thời gian trong thông tin khi xếp hạng kết quả. Quan trọng, hệ thống IR nên học các mẫu trong văn bản truy vấn và tài liệu cho biết mức độ liên quan, ngay cả khi truy vấn và tài liệu sử dụng các từ vựng khác nhau.

1.2. Giai Đoạn Truy Hồi Tiền Xử Lý Thu Thập và Phản Hồi

Quá trình truy hồi thông tin bao gồm hai giai đoạn chính: tiền xử lý và thu thập. Giai đoạn tiền xử lý chuyển đổi văn bản thô thành tài liệu được tách từ và lập chỉ mục. Giai đoạn thứ hai, người dùng thực hiện truy vấn. Hệ thống truy hồi tìm kiếm các tài liệu liên quan đến truy vấn, dựa trên việc biểu diễn của truy vấn và các phần tử thông tin. Các tài liệu và thông tin tìm thấy được hiển thị trong một danh sách sắp xếp theo thứ tự phù hợp. Hệ thống có thể cũng cung cấp cơ chế phản hồi để cải thiện kết quả truy vấn. Nhiều hệ thống thông tin bao gồm các cơ chế cho phép người dùng cung cấp phản hồi về chất lượng của kết quả trả về. Bằng cách sử dụng phản hồi, hệ thống sẽ cố gắng thích ứng và cố gắng tìm ra những kết quả tốt nhất cho truy vấn.

II. Vấn Đề Khó Khăn Khi Tìm Kiếm Học Liệu Điện Điện Tử

Việc tìm kiếm tài liệu môn học của sinh viên ngày càng trở nên quan trọng với sự phát triển của công nghệ thông tin. Sinh viên có thể tìm kiếm tài liệu nhanh chóng thông qua Google hay các địa chỉ Web. Tuy nhiên, trong bối cảnh học trực tuyến do dịch Covid, nhu cầu tìm kiếm thông tin chính xác và đáng tin cậy trở nên cấp thiết. Khi tìm kiếm trên Web, sinh viên phải đối mặt với nhiều nguồn tài liệu khác nhau, bao gồm cả những thông tin không chính xác hoặc địa chỉ truy cập xấu. Hệ thống truy hồi thông tin dựa trên từ khóa có thể không mang lại kết quả mong muốn. Do đó, cần xây dựng hệ thống truy hồi hiệu quả, cung cấp nguồn học liệu đáng tin cậy từ thư viện của trường. Luận văn này tập trung vào việc giải quyết vấn đề này, cung cấp giải pháp ứng dụng thực tế cho sinh viên ngành Điện - Điện tử.

2.1. Học Trực Tuyến Nhu Cầu Tìm Kiếm Học Liệu Chính Xác Tăng Cao

Trong bối cảnh thế giới hiện tại, tình hình dịch Covid đang là vấn đề đáng quan tâm và lo ngại nên môi trường học tập của sinh viên – học sinh dần chuyển sang hình thức học trực tuyến đã được phổ biến rộng khắp các trường học ở Việt Nam. Với hình thức học trực tuyến – online thì nhu cầu tìm kiếm thông tin, tài liệu chính xác về môn học cũng được nâng cao theo. Theo đó, cần phải đảm bảo rằng các hệ thống truy hồi học liệu điện tử phải đáp ứng các tiêu chí nhanh chóng, chính xác và đáng tin cậy.

2.2. Tìm Kiếm Thông Tin Đối Mặt Với Nguồn Dữ Liệu Không Đáng Tin Cậy

Khi một học sinh tìm lại liệu trên Web mạng thì sẽ có hàng loạt các nội dung liên quan có khi đúng, gần đúng, khi không chính xác hoặc có nhiều địa chỉ truy cập xấu hiện ra. Lý do là vì phải đối mặt với nhiều nguồn tài liệu. Hệ thống truy hồi thông tin dựa vào từ khóa sẽ không mang đến kết quả chính xác chuẩn như mong muốn. Trước vấn đề đó, cần có giải pháp để học sinh có thể tìm kiếm học liệu một cách hiệu quả và chính xác nhất.

III. Cách Xây Dựng Hệ Thống Truy Hồi Học Liệu Phương Pháp Lucene

Luận văn này sử dụng phần mềm mã nguồn mở Lucene để xây dựng hệ thống truy hồi học liệu. Lucene là thư viện phổ biến, được nhiều tổ chức tin dùng. Quá trình xây dựng hệ thống bao gồm: phân tích nhu cầu nội dung môn học, nghiên cứu lý thuyết về hệ thống tìm kiếm, phân loại văn bản, và ứng dụng các kiến thức này để triển khai hệ thống. Các chức năng chính của hệ thống bao gồm: truy hồi theo từ khóa, truy hồi theo từ khóa và loại văn bản, học và phân loại văn bản theo thể loại, học và phân loại theo chủ đề. Đối tượng nghiên cứu là lý thuyết về truy hồi thông tin, hệ thống tìm kiếm thông tin, và các quá trình truy hồi thông tin. Phạm vi nghiên cứu giới hạn trong học liệu ngành Điện - Điện tử, ngôn ngữ tiếng Anh và Việt, và các thể loại như giáo trình và sách tham khảo.

3.1. Phần Mềm Lucene Công Cụ Hỗ Trợ Xây Dựng Hệ Thống Tìm Kiếm

Lucene là thư viện mã nguồn mở chuyên hỗ trợ xây dựng hệ thống tìm kiếm thông tin. Ví dụ: CNET dùng Lucene để tìm kiếm danh sách nhiều thể loại sản phẩm, Wikipedia thì dùng Lucene để tìm kiếm nội dung toàn văn bản. Elasticsearch và Solr là hai công cụ tìm kiếm khá phổ biến đã được xây dựng và phát triển dựa trên nền tảng của Lucene. Do đó, tôi cũng đã sử dụng Lucene cho hệ thống.

3.2. Giai Đoạn Tiền Xử Lý Phân Tích Chỉ Mục và Đánh Trọng Số

Giai đoạn tiền xử lý, trong đó tài liệu thô của dữ liệu được xử lý thành các tài liệu được tách từ, phân đoạn (tokenized documents) và sau đó lập chỉ mục thành danh sách các vị trí của dữ liệu từ (postings per term). Ta tiến hành các bước sau: Phân tích từ vựng, Loại bỏ từ dừng (stopword), Lấy gốc từ là thu gọn một từ về dạng ngữ pháp gốc của nó. Đánh chỉ mục cho phép tích hợp ngữ nghĩa thu được từ kho dữ liệu riêng. Cấu trúc chỉ mục gồm tập hợp các thuật ngữ đã xử lý, cùng với danh sách tài liệuchứa chúng và trọng số của chúng.

3.3. Giai Đoạn Thu Thập Xử Lý Truy Vấn Tìm Kiếm và Xếp Hạng

Trong giai đoạn thu thập và tìm kiếm, thuật ngữ thu được từ quá trình xử lý văn bản sẽ được sử dụng để xác định, thông qua chỉ mục và danh sách tài liệu thuật ngữ đó xuất hiện. Tùy thuộc vào từng loại truy vấn và tần suất xuất hiện của các từ đó trong tìm kiếm, một tập tài liệu sẽ được thu thập gồm tất cả các từ hoặc một số từ. Các tài liệu thu thập được sẽ được xếp hạng tùy theo mức độ phù hợp với nội dung truy vấn.

IV. Ứng Dụng Hệ Thống Truy Hồi Cho Sinh Viên Điện Điện Tử

Hệ thống truy hồi học liệu được xây dựng giúp sinh viên ngành Điện - Điện tử tìm kiếm tài liệu hiệu quả hơn. Hệ thống cho phép truy hồi thông tin theo từ khóa, loại văn bản, và có khả năng học và phân loại văn bản theo thể loại và chủ đề. Ứng dụng thực tế cho thấy hệ thống hoạt động tốt, cung cấp kết quả chính xác và phù hợp với nhu cầu của sinh viên. Hệ thống được đánh giá dựa trên độ chính xác và độ bao phủ của kết quả tìm kiếm. Luận văn cũng đề xuất hướng phát triển trong tương lai, bao gồm cải thiện khả năng phân loại văn bản và tích hợp thêm các nguồn học liệu khác.

4.1. Chức Năng Chính Truy Hồi Theo Từ Khóa và Phân Loại Văn Bản

Mục tiêu cụ thể của hệ thống gồm có các chức năng: truy hồi thông tin theo từ khóa, truy hồi thông tin theo từ khóa và loại văn bản, chức năng học và phân loại văn bản theo thể loại học liệu, chức năng học và phân loại theo chủ đề thuộc lĩnh vực điện - điện tử.

4.2. Đánh Giá Hiệu Quả Độ Chính Xác và Độ Bao Phủ Của Kết Quả

Quá trình truy hồi có thể lặp đi lặp lại, khi hệ thống nhận được phản hồi từ người dùng chẳng hạn như đánh giá mức độ phù hợp củatài liệu được xếp hạng cao. Từ đó, nó sẽ cải thiện tính đại diện của nhu cầu thông tin và đưa ra kết quả tốt hơn cho việc xếp hạng tài liệu. Quan trọng, đánh giá hiệu quả hệ thống dựa trên độ chính xác (Precision) và độ bao phủ (Recall).

V. Hướng Phát Triển Nâng Cấp Hệ Thống Truy Hồi Học Liệu Điện Tử

Hệ thống truy hồi học liệu cho sinh viên ngành Điện - Điện tử, sau khi được xây dựng, cần tiếp tục được phát triển để đáp ứng nhu cầu ngày càng cao của người dùng. Hướng phát triển chính bao gồm: cải thiện khả năng phân loại văn bản tự động dựa trên kỹ thuật máy học, mở rộng phạm vi học liệu bằng cách tích hợp thêm các nguồn tài liệu trực tuyến, và cá nhân hóa kết quả tìm kiếm dựa trên lịch sử truy vấn của người dùng. Mục tiêu là tạo ra một hệ thống truy hồi thông minh, có khả năng tự học và thích nghi với nhu cầu thay đổi của sinh viên, từ đó nâng cao hiệu quả học tập và nghiên cứu.

5.1. Máy Học Nâng Cao Khả Năng Phân Loại Ngữ Nghĩa Văn Bản Tự Động

Tiếp tục nghiên cứu về phân loại ngữ nghĩa văn bản tự động dựa trên kỹ thuật máy học (machine learning techniques). Tận dụng các thuật toán máy học mới nhất để tăng cường độ chính xác và hiệu quả của việc phân loại học liệu.

5.2. Học Liệu Mở Tích Hợp Thêm Nguồn Tài Liệu Trực Tuyến Phong Phú

Mở rộng phạm vi học liệu bằng cách tích hợp thêm các nguồn tài liệu trực tuyến như kho tài nguyên giáo dục mở (OER) và các thư viện số. Điều này giúp sinh viên có thêm nhiều lựa chọn và tiếp cận được nguồn thông tin đa dạng.

Trích đoạn nội dung tài liệu

chương 1 là giới thiệu sơ lược về truy hồi thông tin. Các nội dung được đề cập đến như sau:  Khái niệm về truy hồi thông tin  Các giai đoạn trong quá trình truy hồi thông tin  Giới thiệu phần mềm mã nguồn mở Lucene  Các phương pháp giải quyết truy hồi thông tin.  Đánh giá hiệu quả của việc truy hồi thông tin 1. Các khái niệm truy hồi thông tin Thuật ngữ truy hồi thông tin (Information Retrieval - IR), là việc tìm kiếm tài liệu ở trạng thái phi cấu trúc (thường là văn bản) đáp ứng nhu cầu thông tin nhất định từ các tập tin lớn trên máy tính, máy chủ cục bộ hoặc trên Internet [1].

IR là lĩnh vực khoa học máy tính chuyên về lý thuyết và thực hành tìm kiếm thông tin. Vì văn bản là phương tiện phổ biến nhất được sử dụng để biển diễn và phân phối thông tin một cách hiệu quả, nên hầu hết các nghiên cứu về IR đều tập trung vào việc tìm kiếm thông qua các bộ sưu tập văn bản của tài liệu [25]. Việc truy hồi thông tin có thể có nhiều hình thức khác nhau. Người dùng có thể bày tỏ nhu cầu thông tin của họ dưới dạng một truy vấn văn bản — bằng cách gõ trên bàn phím, bằng cách chọn đề xuất truy vấn hoặc bằng giọng nói nhận dạng — hoặc truy vấn có thể ở dạng hình ảnh, hoặc một số các trường hợp nhu cầu có thể được ngầm hiểu.

Việc truy hồi có thể liên quan đến việc xếp hạng hiện có các phần nội dung, chẳng hạn như tài liệu hoặc câu trả lời ngắn, hoặc sáng tác phản hồi mới kết hợp thông tin đã truy hồi. Cả hai thông tin nhu cầu và các kết quả được truy hồi có thể sử dụng cùng một phương thức (ví dụ: truy hồi tài liệu văn bản để đáp ứng với truy vấn từ khóa), hoặc là khác nhau (ví dụ, tìm kiếm hình ảnh bằng cách sử dụng truy vấn văn bản). 6 Nếu truy vấn không rõ ràng, hệ thống truy hồi có thể xem xét lịch sử người dùng, vị trí thực tế, các thay đổi theo thời gian trong thông tin, hoặc ngữ cảnh khác khi xếp hạng kết quả. Hệ thống IR có thể cũng giúp người dùng hình thành ý định của họ (ví dụ: thông qua tự động hoàn thành truy vấn hoặc gợi ý truy vấn) và có thể trích xuất tóm tắt ngắn gọn các kết quả xem xét truy vấn của người dùng.

Một truy vấn tìm kiếm thường có thể chứa một vài thuật ngữ, trong khi tài liệu - đề cập đến độ dài, tùy thuộc vào tình huống, có thể dao động từ một vài thuật ngữ đến hàng trăm câu hoặc hơn. Mô hình Neural đại diện cho véc-tơ sử dụng IR gửi lại văn bản và thường chứa một số lượng lớn các tham số cần được điều chỉnh. Trong các lĩnh vực khác, việc thiết kế các mô hình mạng nơ-ron đã được hình thành bởi các đặc điểm của ứng dụng và dữ liệu. Ví dụ, các bộ dữ liệu và các kiến trúc thành công khá khác nhau về hình ảnh nhận dạng đối tượng, nhận dạng giọng nói và tác nhân chính.

Trong khi IR chia sẻ một số thuộc tính chung với lĩnh vực ngôn ngữ tự nhiên trong quá trình xử lý, nó cũng đi kèm với những thách thức riêng. Hệ thống IR- tems phải xử lý các truy vấn ngắn có thể chứa từ vựng, để so khớp với các tài liệu có độ dài khác nhau, để tìm các tài liệu liên quan cũng có thể chứa các phần lớn không liên quan chữ. Hệ thống IR nên học các mẫu trong văn bản truy vấn và tài liệu cho biết mức độ liên quan, ngay cả khi truy vấn và tài liệu sử dụng các từ vựng khác nhau, và ngay cả khi các mẫu là nhiệm vụ cụ thể hoặc ngữ cảnh cụ thể. Trong luận văn này chúng ta sẽ tập trung vào việc truy hồi văn bản trong IR, nơi người dùng nhập một truy vấn văn bản và hệ thống trả về danh sách kết quả tìm kiếm được xếp hạng.

Kết quả tìm kiếm có thể là các đoạn văn bản hoặc tài liệu toàn văn. Mục tiêu của hệ thống là xếp hạng kết quả tìm kiếm ưa thích của người dùng ở trên cùng. Vấn đề này là một vấn đề trọng tâm trong các tài liệu về IR, với những thách thức và giải pháp được hiểu rõ. Quá trình truy hồi thông tin Truy hồi thông tin là hoạt động thu thập, hiển thị thông tin liên quan dựa trên cácdữ liệu có sẵn hoặc từ thao tác cập nhật dữ liệu trên máy chủ [2].

Quá trình truy hồi thông tin là quá trình truy vấn dữ liệu từ nhu cầu của ngườidùng đến sự phản hồi của nguồn dữ liệu có sẵn được tạo ra từ trước.1: Sơ đồ hiển thị quá trình truy hồi thông tin cơ bản [2] Quá trình truy hồi ở sơ đồ trên chia làm 2 pha. Pha 1 (Chỉ mục indexing): Từ bộ sưu tập tài liệu tạo ra các chỉ mục của tài liệu: Là quá trình thu thập tất cả các tài liệu liên quan “Document Collection” đến giaiđoạn lập chỉ mục “Indexer” kết thúc pha 1 là tạo danh mục các văn bản“Document Index”. 8 Pha 2 (Truy hồi): Từ truy vấn của người sử dụng đến xử lý truy vấn và tìm tàiliệu phù hợp với truy vấn: Kết quả được xếp theo thứ tự mức độ liên quan. Hệ truy hồi thông tin hoạt động theo phương thức sau Giai đoạn đầu tiên là giai đoạn tiền xử lý, trong đó tài liệu thô của dữ liệu đượcxử lý thành các tài liệu được tách từ, phân đoạn (tokenized documents) và sau đó lập chỉ mục thành danh sách các vị trí của dữ liệu từ (postings per term).

Ở giai đoạn thứ hai, người dùng thực hiện một truy vấn (không có cấu trúc bằng ngôn ngữ tự nhiên) để mô tả nhu cầu tìm kiếm thông tin của mình. Hệ thống truy hồi bắt đầu truy vấn và so sánh để tìm các tài liệu và thông tin có liên quan đến truy vấn. Các thủ tục được sử dụng để quyết định các phần tử thông tin có liên đến truy vấn dựa trên việc biểu diễn của truy vấn và các phần tử thông tin có chứa phần tử ngôn ngữ chỉ mục [25]. Trong giai đoạn cuối cùng, các tài liệu và thông tin tìm thấy được hiển thị trong một danh sách các tài liệu và được sắp xếp theo thứ tự phù hợp (ranked documents).

Thông thường các tài liệu và yếu tố thông tin liên quan nhất được xếp trên các yếu tố ít liên quan hơn. Tùy thuộc vào hệ thống truy hồi thông tin khác nhau, chúng hiển thịthông tin theo những cách khác nhau. Ví dụ: có những hệ thống chỉ hiển thị tên tiêu đề và đường dẫn đến tài liệu đó, hoặc có những hệ thống hiển thị cả tên và đường dẫn cùng một chút nội dung liên quan đến truy vấn, hoặc có những hệ thống dùng để lấy thông tin trên mạng liên kết đến các trang web khác nhau [2]. Nhiều hệ thống thông tin cũng bao gồm các cơ chế cho phép người dùng cung cấp phản hồi về chất lượng của kết quả trả về.

Bằng cách sử dụng phản hồi, hệ thống sẽ cố gắng thích ứng và cố gắng tìm ra những kết quả tốt nhất cho truy vấn. Giai đoạn tiền xử lý - Tiền xử lý tài liệu là quy trình chuyển đổi văn bản. Quy trình này là một trong những bước quan trọng ảnh hưởng đến hiệu quả của hệ thống IR, nếu tiền xử lý không phù hợp có thể ảnh hưởng đến độ chính xác của phân loại văn bản. Ta tiến hành các bước sau: Օ Phân tích từ vựng là quá trình thay đổi các ký tự trong tài liệu thành tập một tập các từ được chọn làm từ chỉ mục bằng cách loại bỏ các chữ số, dấu gạch nối, ký hiệu đặc biệt, dấu câu và chữ viết in hoa viết thường, chuẩn hóa các từ viết tắt [26].

Օ Loại bỏ từ dừng (stopword) làm giảm kích cỡ cấu trúc chỉ mục. Tiến hành loại bỏ các từ không ý nghĩa mà thường xuyên xuất hiện trong tài liệu. Օ Lấy gốc từ là thu gọn một từ về dạng ngữ pháp gốc của nó. Ví dụ có nhiều từ sẽ mang ý nghĩa tương đồng ta chỉ cần xác định chọn một từ làm trọng tâm thể hiện nội dung chính.

- Đánh chỉ mục: cho phép tích hợp ngữ nghĩa thu được từ kho dữ liệu riêng. Cấu trúc chỉ mục gồm tập hợp các thuật ngữ đã xử lý, cùng với danh sách tài liệuchứa chúng và trọng số của chúng. Trọng số của các thuật ngữ có thể là số lần xuất hiện của chúng trong một tài liệu. Tần suất xuất hiện càng lớn thì tầm quan trọng của chúng càng lớn.

Giai đoạn thu thập - Xử lý truy vấn: Trong IR, một “yêu cầu” có thể được viết bằng ngôn ngữ tự nhiên, dưới dạng từ khóa hoặc dưới dạng toán tử Boolean. Bước đầu tiên trong giai đoạn truy hồi là xử lý truy vấn của người dùng cũng như xử lý trước các tài liệu văn bản gốc. Xử lý văn bản là thao tác chính để thể hiện nhu cầu của người dùng. Kết quả sẽ là một danh sách các từ.

10 - Tìm kiếm: Trong giai đoạn tìm kiếm, thuật ngữ thu được từ quá trình xửlý văn bản sẽ được sử dụng để xác định, thông qua chỉ mục và danh sách tài liệu thuật ngữ đó xuất hiện. Tùy thuộc vào từng loại truy vấn và tần suất xuất hiện của các từ đó trong tìm kiếm, một tập tài liệu sẽ được thu thập gồm tất cả các từ hoặc một số từ. Vì vậy, tìm kiếm là quá trình so khớp các thuật ngữ trong truy vấn. Kết quả so khớp phù hợp sẽ xếp hạng tài liệu theo thứ tự giảm dần về mức độ phù hợp để truyền tải nội dung đến người dùng.

- Xếp hạng: Các tài liệu thu thập được sẽ được xếp hạng tùy theo mức độ phù hợp với nội dung truy vấn. Việc đánh giá phụ thuộc chính xác vào thuật toán xếp hạng, thuật toán sẽ tính toán kết quả thực tế cho từng tài liệu liên quan. Tài liệu có trọng số xuất hiện càng lớn thì được xem là liên quan nhiều hơn. Và thứ tự kết quả trả về sẽ được sắp xếp theo trình tự giảm dần của giải thuật.

Từ đó, người dùng có thể lựa chọn để xem xét tài liệu có nội dung liên quan nhất từ trên xuống. Vì vậy, giải thuật xếp hạng được xem là phần quan trọng trong IR. - Phản hồi về độ liên quan: Quá trình truy hồi có thể lặp đi lặp lại, khi hệ thống nhận được phản hồi từ người dùng chẳng hạn như đánh giá mức độ phù hợp củatài liệu được xếp hạng cao.