CHƯƠNG 1: SU'DUNG INTERNET DE THU THAP VA LUU TRU THÔNG TIN TUYỂN DỤNG. Thông tin va thu thập thông tim. Thông tin tuyên dụng. Kien tric hé thong Crawling vả các thuật toán.
Kỹ thuật tiếp cận dữ liệu lớn. Kién tric tong quat vé mét crawling system 6 1. Các yêu cầu của một hệ thông crawling. Các chiến lược trong các hệ thông Crawling.
Các thuật toán crawling. Các công cụ crawling hiện nay. Lửa B0101608128840979905123G183e18018006Aap1et0i 33 1.868GNBI]DX oenoeenenooininseandaiiiaasdeanosendanniasasnsnss 2E 1. Kết HHiậH GHHỚHEllsenssasaeiesuietiindiosuoaitotiesoarnatttssnssisoresasaoZSN6i CHƯƠNG 2: XÂY DỰNG HỆ THÔNG THU THẬP VẢ LƯU TRỮ THONG TIN TUYỂN DỤNG TRÊN INTERNET.
Xác định mục tiêu. Người thực hiện: Nguyên Thị Hiện ill Lép: 2017AKHKTTT.KH Taiận văn Thạc sỹ Khoa học GVHD: Nguyễn Hữu Đúc 3,2, Các công cụ trong giải quyết yêu câu trong mục tiêu. Công cụ sorapy [22]. XPATH [: 2B ko nN" ".
Phân tích yêu cầu - - 46 2. Thiết kế hệ thông, - - 47 2. Kiến trúc hệ thông. Cơ sử đữ liệu cho chứa tập.
Thiết kê chỉ tiết - 49 Kết luận chương 2 54 CHƯƠNG 3: MÔ PHONG THUC NGHTRM CHUONG TRINH 35 3. Môi trường cài đặt và công cụ lập trình - 35 3. Demo chương trình.3, Đánh giá với sự thay dỗi tham số tủy chỉnh. Thay đôi với sự thay đổi tham số tủy chỉnh.
Thay đổi tham số Download_Delay él Kết luận chương 3 62 CHƯƠNG 4 KẾT LUẬN VÀ PHƯƠNG HƯỚNG NGHIÊN CỨU, PHÁT Xe SH HH Hư tHreeirrririererere. Các mục tiêu đã và chua đạt được 63 4. Nghiên cứu trong tương lai. - - 64 TÀI LIỆU THAM KHẢO.ỚS, Người thực hiện Nguyễn Thị Hiển iv Lớp: 2017AKHKTTT.KH Taiận văn Thạc sỹ Khoa học GVHD: Nguyễn Hữu Đúc 3,2, Các công cụ trong giải quyết yêu câu trong mục tiêu.
Công cụ sorapy [22]. XPATH [: 2B ko nN" ". Phân tích yêu cầu - - 46 2. Thiết kế hệ thông, - - 47 2.
Kiến trúc hệ thông. Cơ sử đữ liệu cho chứa tập. Thiết kê chỉ tiết - 49 Kết luận chương 2 54 CHƯƠNG 3: MÔ PHONG THUC NGHTRM CHUONG TRINH 35 3. Môi trường cài đặt và công cụ lập trình - 35 3.
Demo chương trình.3, Đánh giá với sự thay dỗi tham số tủy chỉnh. Thay đôi với sự thay đổi tham số tủy chỉnh. Thay đổi tham số Download_Delay él Kết luận chương 3 62 CHƯƠNG 4 KẾT LUẬN VÀ PHƯƠNG HƯỚNG NGHIÊN CỨU, PHÁT Xe SH HH Hư tHreeirrririererere. Các mục tiêu đã và chua đạt được 63 4.
Nghiên cứu trong tương lai. - - 64 TÀI LIỆU THAM KHẢO.ỚS, Người thực hiện Nguyễn Thị Hiển iv Lớp: 2017AKHKTTT.KH Taiận văn Thạc sỹ Khoa học GVHD: Nguyễn Hữu Đúc MO PAU Trong thời dai ngày nay, với sự hỗ trợ rất nhiều từ mạng Internet, các ứng, viên có thể tìm hiểu thông tin nhà tuyển dụng rất nhanh chóng, ngược lại phia đoanh nghiệp cũng tương tác gắn hon với ứng viễn thông qua website tuyển đựng, email, cdc trang mang xd héi,. qua dé giúp doanh nghiệp tuyển dụng nhân sự được nhanh chóng, tiết kiệm và hiệu quả. Theo khảo sát của IobStreet.cam [19], triển vợng thị trường việc lâm tại Việt Nam được nhin nhận khá tích cực từ cả hai phía: Ứng viễn (người lao động _ 4.50) vá Nhà tuyển dụng (4.57), một tín hiệu đầy lạc quan so với các nước trong khu vực Dông Nam A với múc trung bình từ Ứng, viên là 3.46, Nhà tuyển dụng là 3.
Trong tị trường lao động dang bing nd, các tứng viên Việt Nam cho thấy họ chủ động năm bắt các cơ hội việc làm thông qua các nguồn việc làm trực tuyến. Khững kênh tim việc được ưa thích đang chiếm lĩnh trên. iremtel nửtz mạng việc làm, trang mạng tuyển dụng của doanh ughiép và mạng xã hội với 47% Ứng viên sử dụng (tý lệ thấp nhất khu vue, Malaysia dang dẫu với 5494) bên cạnh các phương pháp truyền thống như người quen giới thiệu và các công ty tuyển dụng, Luong théng tm tuyén dung va tim kiếm việc làm trên mạng Internet ngày cảng tăng la co sở đề thu thập và lưu trữ thông tin tyến đụng trên mạng Internet, tir dé lam cơ sở để phân tích xu hướng nghề nghiệp đựa trên các thông tin tuyển dung nay. Luong théng tin về tuyến đụng hiện nay rất lớn, quy gid ma néu trích xuất thành công, nó sẽ giúp rất nhiều cho việc kinh doanh, nghiên cứu khoa học, dự đoán xác định xu thé tuy m đụng, xu thế việc làm, thực trạng mức lương.
Chính vì thể, những dữ liệu này phải được thu thập, tổ chức, lưu trữ, tìm kiếm, chia sẻ theo một cách khác so với bình thường Xât phát từ nhu cầu này, trong khuôn khổ luận văn thạc sỹ, học viên đề xuất thục hiện để tài "Thu thập và lưu trữ thông tin luyễn dựng trên mang Internet", voi mục tiêu chính là nghiên cứu và thử nghiêm các kỹ thuật thu thập thông tin tuyển Người thực hiện, Nguyễn Thị Hiển 1 Lớp: 2017AKHKTTT.KH Taiận văn Thạc sỹ Khoa học GVHD: Nguyễn Hữu Đúc DANH MUC HINH VE, BIEU BO Tình 1. Mô bình khung đữ liệu lớn |1J. Các mô hình điện toán dữ liệu lớn [1]. si sec Hinh 1.
Biéu dé Elowchart của một Crawler dién hinh [7] 8 Hình 1. Mô hình Crawler của Google thời kỹ dẫu [23|. Cac indng của crawler kết nấi với frontier [7]. Các Thê HTMIL và cây thể tương ứng [7] - - 15 Hình 1.
Mô hình Multi-tireadine Crawler [7J. Dặc điểm của hệ thống thu thập đữ liệu web [8] - 18 Tình 1. Kiến trúc tuần hoàn cho các công cụ thà kiểm [7] 19 Hình 1. Các con số hiển thị đường dẫn của Broath -First Crawling |7 |.
Các số hiến thị đường dẫn của Thu thập thông tin đầu tiền [7]. Thu thập đữ liệu lặp đi lắp lại [7] - - 22 Hình 1. Nguyễn mẫu mô hinh Hiwe [5]. Các liên kết ngoài trẻ đên trang web khác [3].
Crawler với chiến lược ngữ cảnh lập trung [7| 31 Hình 2.1, Kién trie ting thé ciia scrapy [22] occas ussecssssnnseeenieennd? Tĩnh 2. Luật Little, hé thông xếp hàng và đường ông [22] 40 Hình 2. Mô hình hiệu năng tiêu chuẩn của Scrapy [ Al Hình 2. Thành phân hệ thông D3.
Luợc đỗ Use Case. Kiên trúc hệ thống. Các loại biểu để trong Modlule hiển thị Tĩnh 3. Các tập trong dự án thử nghiệm - - 55 Hình 3.
Dữ liệu thủ được sau khi crawl 58 Tình 3. Giao diện ban đâu trong thử nghiệm.4, Dropdown-Box Iya chon cdc ngdnb trong Iinh vye can khảo sat .59 Người thực hiện, Nguyễn Thị Hiển vi Lớp: 2017AKHKTTT.KH Taiận văn Thạc sỹ Khoa học GVHD: Nguyễn Hữu Đúc DANH MUC HINH VE, BIEU BO Tình 1. Mô bình khung đữ liệu lớn |1J. Các mô hình điện toán dữ liệu lớn [1].
si sec Hinh 1. Biéu dé Elowchart của một Crawler dién hinh [7] 8 Hình 1. Mô hình Crawler của Google thời kỹ dẫu [23|. Cac indng của crawler kết nấi với frontier [7].
Các Thê HTMIL và cây thể tương ứng [7] - - 15 Hình 1. Mô hình Multi-tireadine Crawler [7J. Dặc điểm của hệ thống thu thập đữ liệu web [8] - 18 Tình 1. Kiến trúc tuần hoàn cho các công cụ thà kiểm [7] 19 Hình 1.
Các con số hiển thị đường dẫn của Broath -First Crawling |7 |. Các số hiến thị đường dẫn của Thu thập thông tin đầu tiền [7]. Thu thập đữ liệu lặp đi lắp lại [7] - - 22 Hình 1. Nguyễn mẫu mô hinh Hiwe [5].
Các liên kết ngoài trẻ đên trang web khác [3]. Crawler với chiến lược ngữ cảnh lập trung [7| 31 Hình 2.1, Kién trie ting thé ciia scrapy [22] occas ussecssssnnseeenieennd? Tĩnh 2. Luật Little, hé thông xếp hàng và đường ông [22] 40 Hình 2. Mô hình hiệu năng tiêu chuẩn của Scrapy [ Al Hình 2.
Thành phân hệ thông D3. Luợc đỗ Use Case. Kiên trúc hệ thống. Các loại biểu để trong Modlule hiển thị Tĩnh 3.
Các tập trong dự án thử nghiệm - - 55 Hình 3. Dữ liệu thủ được sau khi crawl 58 Tình 3. Giao diện ban đâu trong thử nghiệm.4, Dropdown-Box Iya chon cdc ngdnb trong Iinh vye can khảo sat .59 Người thực hiện, Nguyễn Thị Hiển vi Lớp: 2017AKHKTTT.KH Luận văn Thạc sỹ Khoa học GVHD: Nguyên Hữu Đức - MỤC LỤC LỜI CAM ĐOAN. — vỉ LỜI CẢM ƠN.
v DANH MỤC HÌNH VẼ, BIỂU ĐÔ. 202cc vi MỞ ĐÂU. TH H nen re TH HH 0H ngư 1 CHƯƠNG 1: SU'DUNG INTERNET DE THU THAP VA LUU TRU THÔNG TIN TUYỂN DỤNG. Thông tin va thu thập thông tim.
Thông tin tuyên dụng. Kien tric hé thong Crawling vả các thuật toán. Kỹ thuật tiếp cận dữ liệu lớn. Kién tric tong quat vé mét crawling system 6 1.
Các yêu cầu của một hệ thông crawling. Các chiến lược trong các hệ thông Crawling. Các thuật toán crawling. Các công cụ crawling hiện nay.
Lửa B0101608128840979905123G183e18018006Aap1et0i 33 1.868GNBI]DX oenoeenenooininseandaiiiaasdeanosendanniasasnsnss 2E 1. Kết HHiậH GHHỚHEllsenssasaeiesuietiindiosuoaitotiesoarnatttssnssisoresasaoZSN6i CHƯƠNG 2: XÂY DỰNG HỆ THÔNG THU THẬP VẢ LƯU TRỮ THONG TIN TUYỂN DỤNG TRÊN INTERNET. Xác định mục tiêu. Người thực hiện: Nguyên Thị Hiện ill Lép: 2017AKHKTTT.KH Taiận văn Thạc sỹ Khoa học GVHD: Nguyễn Hữu Đúc Hình 3.5, Hiển thị phân tích vẻ các khu vực dược tuyển dụng (Đà Nẵng, Hà Nội.) và lĩnh vực tuyển dụng (công ty săn phẩm hay dịch vụ).
Số năm kinh nghiệm cho yêu cầu tuyển đụng kỹ ning Linux. Kết quả Ảnh hưởng của tham só CONCURRENT_REQUEST đổi với hiệu năng Scrapy - - él Biéu dé 3. Kat qua anh hudng cia tham s6 DOWNLOAD_DELAY. 62 Người thực hiện Nguyễn Thị Hiển vụ Lớp: 2017AKHKTTT.KH Luận văn Thạc sỹ Khoa học GVHD: Nguyên Hữu Đức - MỤC LỤC LỜI CAM ĐOAN.
— vỉ LỜI CẢM ƠN. v DANH MỤC HÌNH VẼ, BIỂU ĐÔ. 202cc vi MỞ ĐÂU. TH H nen re TH HH 0H ngư 1 CHƯƠNG 1: SU'DUNG INTERNET DE THU THAP VA LUU TRU THÔNG TIN TUYỂN DỤNG.
Thông tin va thu thập thông tim. Thông tin tuyên dụng. Kien tric hé thong Crawling vả các thuật toán. Kỹ thuật tiếp cận dữ liệu lớn.
Kién tric tong quat vé mét crawling system 6 1. Các yêu cầu của một hệ thông crawling. Các chiến lược trong các hệ thông Crawling. Các thuật toán crawling.
Các công cụ crawling hiện nay. Lửa B0101608128840979905123G183e18018006Aap1et0i 33 1.868GNBI]DX oenoeenenooininseandaiiiaasdeanosendanniasasnsnss 2E 1. Kết HHiậH GHHỚHEllsenssasaeiesuietiindiosuoaitotiesoarnatttssnssisoresasaoZSN6i CHƯƠNG 2: XÂY DỰNG HỆ THÔNG THU THẬP VẢ LƯU TRỮ THONG TIN TUYỂN DỤNG TRÊN INTERNET. Xác định mục tiêu.
Người thực hiện: Nguyên Thị Hiện ill Lép: 2017AKHKTTT.KH Taiận văn Thạc sỹ Khoa học GVHD: Nguyễn Hữu Đúc 3,2, Các công cụ trong giải quyết yêu câu trong mục tiêu. Công cụ sorapy [22]. XPATH [: 2B ko nN" ". Phân tích yêu cầu - - 46 2.
Thiết kế hệ thông, - - 47 2. Kiến trúc hệ thông. Cơ sử đữ liệu cho chứa tập. Thiết kê chỉ tiết - 49 Kết luận chương 2 54 CHƯƠNG 3: MÔ PHONG THUC NGHTRM CHUONG TRINH 35 3.
Môi trường cài đặt và công cụ lập trình - 35 3. Demo chương trình.3, Đánh giá với sự thay dỗi tham số tủy chỉnh.