Khóa Luận Tốt Nghiệp: Xây Dựng Hệ Thống Data Warehouse Trên Nền Tảng Điện Toán Đám Mây

Khóa luận trình bày xây dựng hệ thống data warehouse trên nền tảng điện toán đám mây và chiến lược phát triển dữ liệu cho công ty CP SIS Việt Nam.

Trường đại học

Học viện Ngân hàng

Người đăng

Ẩn danh

Thể loại

khóa luận tốt nghiệp

2024

129
2
0

Phí lưu trữ

35 Point

Mục lục chi tiết

LỜI CAM ĐOAN

LỜI CẢM ƠN

LỜI MỞ ĐẦU

0.1. Lý do chọn đề tài

0.2. Mục tiêu nghiên cứu

0.3. Đối tượng và phạm vi nghiên cứu

0.4. Phương pháp nghiên cứu

0.5. Bố cục đề tài

1. CHƯƠNG 1: TỔNG QUAN BÀI TOÁN NGHIÊN CỨU

1.1. Giới thiệu về Công ty CP SIS Việt Nam

1.1.1. Giới thiệu chung

1.1.2. Tầm nhìn, sứ mệnh và giá trị cốt lõi

1.1.3. Sơ đồ tổ chức

1.2. Xu hướng chuyển đổi số và chiến lược phát triển dữ liệu tại các doanh nghiệp

1.2.1. Bối cảnh chung và xu hướng công nghệ

1.3. Mô tả bài toán

1.3.1. Thực trạng hệ thống và cơ sở dữ liệu tổng thể tại SIS

1.3.2. Thực trạng máy chủ tại công ty SIS Việt Nam

1.3.3. Khảo sát đối tượng

1.3.4. Phạm vi ý nghĩa

1.3.5. Hướng giải quyết

1.4. Kết luận chương 1

2. CHƯƠNG 2: CƠ SỞ LÝ THUYẾT VÀ NỀN TẢNG SỬ DỤNG

2.1. Tổng quan chung về kho dữ liệu

2.1.1. Định nghĩa và đặc trưng

2.1.2. Kiến trúc và mô hình kho dữ liệu

2.1.3. Xu hướng kho dữ liệu và hướng tiếp cận triển khai kho dữ liệu

2.2. ETL và nền tảng mã nguồn mở Talend studio

2.3. Dịch vụ AWS Redshift và AWS S3

2.4. Nền tảng mã nguồn mở Openstack

3. CHƯƠNG 3: XÂY DỰNG GIẢI PHÁP KHO DỮ LIỆU VÀ ĐỀ XUẤT CHIẾN LƯỢC PHÁT TRIỂN DỮ LIỆU

3.1. Phân tích thực trạng dữ liệu vận hành và hướng tiếp cận xây dựng data warehouse

3.1.1. Cụ thể thực trạng cơ sở dữ liệu hiện tại

3.1.2. Phân tích hiệu quả các danh mục, bảng cơ sở dữ liệu phục vụ báo cáo quản trị

3.1.3. Chuẩn hóa dữ liệu xuất ra từ hệ thống

3.1.4. Thiết lập các ràng buộc

3.2. Giải pháp triển khai xây dựng data warehouse với AWS Redshift và Talend studio

3.2.1. Kiến trúc hệ thống

3.2.2. Xây dựng bảng fact, dimension

3.2.3. Thực thi kiến trúc xây dựng và quy trình ETL dữ liệu

3.2.4. Chứng minh tính hiệu quả

3.3. Đề xuất chiến lược phát triển dữ liệu

3.3.1. Khung tham chiếu và đề xuất

3.3.2. Lộ trình định hướng và cụ thể hóa các mục tiêu

TÀI LIỆU THAM KHẢO

Tóm tắt

I. Tổng Quan Về Xây Dựng Hệ Thống Data Warehouse Trên Điện Toán Đám Mây

Xây dựng hệ thống Data Warehouse trên nền tảng điện toán đám mây đang trở thành xu hướng quan trọng trong quản lý dữ liệu. Hệ thống này giúp doanh nghiệp lưu trữ và phân tích dữ liệu một cách hiệu quả, từ đó đưa ra quyết định chính xác hơn. Việc áp dụng công nghệ này không chỉ giúp tiết kiệm chi phí mà còn nâng cao khả năng mở rộng và linh hoạt trong quản lý dữ liệu.

1.1. Giới Thiệu Về Hệ Thống Data Warehouse

Hệ thống Data Warehouse là nơi lưu trữ dữ liệu từ nhiều nguồn khác nhau, cho phép phân tích và báo cáo. Nó giúp doanh nghiệp có cái nhìn tổng quan về dữ liệu, từ đó đưa ra quyết định chiến lược.

1.2. Lợi Ích Của Việc Sử Dụng Điện Toán Đám Mây

Điện toán đám mây mang lại nhiều lợi ích như khả năng mở rộng linh hoạt, tiết kiệm chi phí đầu tư hạ tầng và tăng cường bảo mật dữ liệu. Doanh nghiệp có thể dễ dàng truy cập và quản lý dữ liệu từ bất kỳ đâu.

II. Thách Thức Trong Việc Xây Dựng Hệ Thống Data Warehouse

Mặc dù có nhiều lợi ích, việc xây dựng hệ thống Data Warehouse cũng gặp phải nhiều thách thức. Các vấn đề như tích hợp dữ liệu từ nhiều nguồn khác nhau, đảm bảo tính chính xác và bảo mật dữ liệu là những yếu tố cần được xem xét kỹ lưỡng.

2.1. Vấn Đề Tích Hợp Dữ Liệu

Tích hợp dữ liệu từ nhiều nguồn khác nhau có thể gây khó khăn trong việc đảm bảo tính nhất quán và chính xác. Doanh nghiệp cần có chiến lược rõ ràng để xử lý vấn đề này.

2.2. Bảo Mật Dữ Liệu Trong Điện Toán Đám Mây

Bảo mật dữ liệu là một trong những mối quan tâm hàng đầu khi chuyển đổi lên điện toán đám mây. Doanh nghiệp cần áp dụng các biện pháp bảo mật mạnh mẽ để bảo vệ thông tin nhạy cảm.

III. Phương Pháp Xây Dựng Hệ Thống Data Warehouse Hiệu Quả

Để xây dựng một hệ thống Data Warehouse hiệu quả, doanh nghiệp cần áp dụng các phương pháp và công nghệ hiện đại. Việc sử dụng công nghệ ETL (Extract, Transform, Load) là rất quan trọng trong quá trình này.

3.1. Công Nghệ ETL Trong Xây Dựng Data Warehouse

Công nghệ ETL giúp trích xuất, biến đổi và tải dữ liệu vào hệ thống Data Warehouse. Việc sử dụng các công cụ ETL hiện đại như Talend có thể giúp tối ưu hóa quy trình này.

3.2. Lựa Chọn Nền Tảng Điện Toán Đám Mây Phù Hợp

Lựa chọn nền tảng điện toán đám mây phù hợp như AWS Redshift hay Google Cloud là rất quan trọng. Mỗi nền tảng có những ưu điểm riêng, doanh nghiệp cần cân nhắc kỹ lưỡng.

IV. Ứng Dụng Thực Tiễn Của Hệ Thống Data Warehouse

Hệ thống Data Warehouse không chỉ giúp doanh nghiệp lưu trữ dữ liệu mà còn hỗ trợ trong việc phân tích và ra quyết định. Các ứng dụng thực tiễn của nó rất đa dạng, từ báo cáo tài chính đến phân tích hành vi khách hàng.

4.1. Phân Tích Dữ Liệu Để Ra Quyết Định

Hệ thống Data Warehouse cho phép doanh nghiệp phân tích dữ liệu một cách nhanh chóng và chính xác, từ đó đưa ra quyết định kịp thời và hiệu quả.

4.2. Tối Ưu Hóa Quy Trình Kinh Doanh

Việc sử dụng Data Warehouse giúp tối ưu hóa quy trình kinh doanh bằng cách cung cấp thông tin chính xác và kịp thời cho các bộ phận liên quan.

V. Kết Luận Về Hệ Thống Data Warehouse Trên Nền Tảng Điện Toán Đám Mây

Xây dựng hệ thống Data Warehouse trên nền tảng điện toán đám mây là một bước đi quan trọng trong quá trình chuyển đổi số của doanh nghiệp. Điều này không chỉ giúp nâng cao hiệu quả quản lý dữ liệu mà còn tạo ra nhiều cơ hội mới cho sự phát triển.

5.1. Tương Lai Của Hệ Thống Data Warehouse

Với sự phát triển không ngừng của công nghệ, hệ thống Data Warehouse sẽ ngày càng trở nên thông minh hơn, giúp doanh nghiệp tối ưu hóa quy trình và nâng cao khả năng cạnh tranh.

5.2. Chiến Lược Phát Triển Dữ Liệu Bền Vững

Doanh nghiệp cần xây dựng chiến lược phát triển dữ liệu bền vững để tận dụng tối đa lợi ích từ hệ thống Data Warehouse và đảm bảo tính nhất quán trong quản lý dữ liệu.

09/07/2025

Trích đoạn nội dung tài liệu

CHƯƠNG 1: TỔNG QUAN BÀI TOÁN NGHIÊN CỨU “Theo chương trình Chuyển đổi số Quốc gia đến năm 2025, định hướng đến năm 2030 của Việt Nam, kinh tế số đặt mục tiêu đóng góp 20% GDP vào năm 2025 và 30% GDP vào năm 2030. Để đạt được những mục tiêu quan trọng này, chuyển đổi số trong doanh nghiệp được xem là một giải pháp then chốt nhằm nâng cao năng lực cạnh tranh, góp phần thúc đẩy nền kinh tế số phát triển. Trong giai đoạn 2021-2022, các doanh nghiệp đã có những thay đổi tích cực về nhận thức đối với chuyển đổi số. Giai đoạn 2023-2025 được xem là thời kỳ đẩy mạnh quá trình chuyển đổi số cụ thể tại nhiều ngành, lĩnh vực và địa phương để đạt được mục tiêu mong muốn.

Đối với các doanh nghiệp Việt Nam, đặc biệt là doanh nghiệp nhỏ và vừa, việc nắm bắt được các xu hướng công nghệ toàn cầu, hiểu về nội tại dữ liệu doanh nghiệp, nhận biết tiềm năng của chúng, hiểu rõ thực trạng và mức độ sẵn sàng chuyển đổi số của mình, cũng như học hỏi từ các câu chuyện thành công về chuyển đổi số sẽ giúp mỗi doanh nghiệp xây dựng chiến lược chuyển đổi số phù hợp, góp phần nâng cao hiệu quả kinh doanh và năng lực cạnh tranh. Chương đầu tiên của đề tài sẽ làm rõ bối cảnh chung của xu hướng chuyển đổi số và tham chiếu cụ thể với thực trạng tại đơn vị tác giả nghiên cứu.1 Giới thiệu về Công ty CP SIS Việt Nam 1.1 Giới thiệu chung SIS Việt Nam là một công ty tiên phong trong việc cung cấp giải pháp phần mềm quản trị, phần mềm kế toán nhằm thúc đẩy quá trình chuyển đổi số cho các doanh nghiệp trong kỷ nguyên Cách mạng Công nghiệp 4. Được thành lập vào ngày 4/3/2002, ngay từ những ngày đầu tiên, SIS Việt Nam đã xác định hướng đi là trở thành một nhà cung cấp giải pháp phần mềm chuyên nghiệp, tập trung vào các lĩnh vực như Phần mềm Quản trị Doanh nghiệp (ERP), Phần mềm tùy chỉnh theo yêu cầu, Phần mềm kế toán, cũng như các giải pháp phần mềm đặc thù cho từng ngành nghề và lĩnh vực kinh doanh khác nhau. Với hơn 20 năm hình thành, xây dựng và phát triển SIS từng bước khẳng định vị trí tiên phong trong lĩnh vực phần mềm, số hóa doanh nghiệp.

Trụ sở chính: Số 42, ngõ 178 Thái Hà, Đống Đa, Hà Nội Hotline: 0912210210 Website: www.2 Tầm nhìn, sứ mệnh và giá trị cốt lõi Tầm nhìn, sứ mệnh: Hà Hữu Lương, K23HTTTA 5 Khóa luận tốt nghiệp - “Đưa SIS Việt Nam trở thành doanh nghiệp tiên phong trong lĩnh vực sản xuất, triển khai các giải pháp phần mềm theo yêu cầu, Giải pháp chuyển đổi số cho doanh nghiệp.” (Phần mềm SIS Việt Nam, 2023) - “Trở thành đối tác chiến lược đáng tin cậy và lâu dài của mỗi doanh nghiệp trong lĩnh vực CNTT.” (Phần mềm SIS Việt Nam, 2023) - “Xây dựng môi trường làm việc hạnh phúc cho tất cả các nhân viên của công ty.” (Phần mềm SIS Việt Nam, 2023) Giá trị cốt lõi: - "SIS Việt Nam đặt nhân sự là giá trị nền tảng cao nhất. Con người với đầy đủ tâm huyết làm việc hết mình vì khách hàng, vì doanh nghiệp. Luôn trau dồi trí tuệ không ngừng, đi tắt đón đầu lĩnh hội kiến thức mới, nâng cao kỹ năng chuyên môn để làm việc hiệu quả nhất. Mỗi cá nhân, mỗi phút giây được thỏa sức sáng tạo, liên tục cải tiến nâng cao chất lượng công việc." (Phần mềm SIS Việt Nam, 2023) - “Dịch vụ trước, trong và sau bán hàng luôn được coi trọng và song hành với chất lượng của sản phẩm đảm bảo sự thỏa mãn tối đa cho người sử dụng các giải pháp phần mềm.

Đội ngũ cán bộ hỗ trợ tận tâm, đảm bảo tốc độ, chất lượng phục vụ đối tác - khách hàng. Khẳng định uy tín của SIS Việt Nam.” (Phần mềm SIS Việt Nam, 2023) - “Sản phẩm Thông minh và Độc đáo - SIS Việt Nam luôn đặt khách hàng làm trung tâm của sự phục vụ. Do vậy, những sản phẩm luôn được trau chuốt từ khâu thiết kế đến hoàn thiện đảm bảo các chức năng, tính năng tiện ích nhất. Với sự sáng tạo không giới hạn đã tạo nên những sản phẩm đặc đáo, khác biệt mang đến sự hài lòng cho khách hàng.3 Sơ đồ tổ chức Xây dựng một đội ngũ nhân sự tài năng, đam mê và giàu kinh nghiệm trong lĩnh vực công nghệ phần mềm, quản trị tài chính và kế toán.

Qua đó không ngừng nâng cao trình độ chuyên môn, đồng thời luôn đề cao tinh thần làm việc nghiêm túc và cầu tiến, nhằm mang đến cho khách hàng những giải pháp phần mềm hiệu quả và chất lượng cao. Thiết lập một bộ máy tổ chức tinh gọn nhưng vận hành hiệu quả, với mục tiêu phục vụ tối đa nhu cầu của khách hàng. Mô hình tổ chức linh hoạt này cho phép SIS Việt Nam nhanh chóng đáp ứng các yêu cầu đa dạng từ các đối tác, đồng thời duy trì được chất lượng dịch vụ ở mức cao nhất. Hà Hữu Lương, K23HTTTA 6 Khóa luận tốt nghiệp Hình 1.1: Sơ đồ tổ chức công ty CP SIS Việt Nam 1.2 Xu hướng chuyển đổi số và chiến lược phát triển dữ liệu tại các doanh nghiệp 1.1 Bối cảnh chung và xu hướng công nghệ.

Trong những năm gần đây, chuyển đổi số đã trở thành một ưu tiên then chốt cho các quốc gia và doanh nghiệp trên toàn cầu. Đại dịch Covid-19 đã làm nổi bật tính cấp thiết của xu hướng này, với nhiều sáng kiến và đổi mới kỹ thuật số dự kiến diễn ra trong vòng 10-20 năm tới đã phải được thực hiện gấp rút chỉ trong vòng hai năm. Sự chuyển đổi nhanh chóng này đã tạo ra một khoảng cách rõ rệt giữa các doanh nghiệp nhanh nhạy trong việc áp dụng công nghệ số và những doanh nghiệp chậm trễ hoặc chưa thực hiện quá trình chuyển đổi. Theo nghiên cứu của Accenture trong chu kỳ phát triển 2021 - 2025, khảo sát 8300 giám đốc điều hành trên toàn cầu, nếu như vào năm 2019, sự chênh lệch trong tốc độ tăng trưởng giữa các doanh nghiệp dẫn đầu (Leaders) và doanh nghiệp tụt hậu (Laggards) chỉ gấp đôi, thì đến năm 2021, khoảng cách này đã tăng lên gấp 5 lần, và xu hướng khoảng cách tăng vượt trội đến 2025.

Điều này cho thấy rằng những doanh nghiệp biết áp dụng công nghệ tiên tiến sớm hơn đã có cơ hội tạo ra những bước tiến vượt trội, Hà Hữu Lương, K23HTTTA 7 Khóa luận tốt nghiệp duy trì tốc độ phát triển phù hợp với xu thế thị trường và tạo ra nhiều giá trị mới hơn so với đối thủ cạnh tranh.2: Khoảng cách về tốc độ tăng trưởng giữa hai nhóm doanh nghiệp (Nguồn: Accenture) Lý giải cho điều này, thứ nhất, hệ thống CNTT doanh nghiệp của họ đạt được mức "Sức mạnh hệ thống (Systems Strength)" cần thiết, mang lại khả năng linh hoạt chiến lược và khả năng mở rộng đủ. Điều này có nghĩa là hệ thống CNTT của họ đủ hiện đại, quy mô và năng lực để hỗ trợ việc áp dụng công nghệ mới một cách nhanh chóng và linh hoạt theo nhu cầu kinh doanh. Thứ hai, họ có "Quy mô đột phá (Flip Size)" lớn - tức là họ đang chuyển nguồn ngân sách CNTT từ hoạt động vận hành sang hoạt động đổi mới. Điều này cho phép họ đẩy nhanh chu kỳ phát triển phần mềm, thay đổi quy trình kinh doanh và xây dựng những năng lực mới cần thiết để thích ứng.

Việc tập trung nguồn lực cho đổi mới giúp họ nhanh chóng áp dụng công nghệ mới, cải tiến quy trình để tăng năng suất và hiệu quả. Báo cáo “Technology Trends Outlook 2023” của McKinsey chỉ ra 15 xu hướng công nghệ mới. Những xu hướng này có thể góp phần định hình lại tương lai của thị trường và các ngành trong vài thập kỷ tiếp theo. Sự tương tác giữa các công nghệ này dự kiến sẽ kích thích và thúc đẩy sự thay đổi trong các mô hình kinh doanh.

Hình sau mô tả từng xu hướng bằng cách chấm điểm dựa theo sự đổi mới (dựa theo bằng sáng chế và nghiên cứu) và sự quan tâm (theo các trang tin tức và xu hướng tìm kiếm trên web của người dùng), đồng thời họ cũng tính toán các khoản đầu tư và đánh giá mức độ áp dụng của các tổ chức. Hà Hữu Lương, K23HTTTA 8 Khóa luận tốt nghiệp Hình 1.3: 15 xu hướng công nghệ mới được thống kê định hình thị trường (Chui et al., 2023) Tham chiếu trong bối cảnh tại Việt Nam, theo thống kê nghiên cứu của dự án USAID LinkSME - dự án nhằm hỗ trợ chuyển đổi số doanh nghiệp giai đoạn 2021-2025 của Bộ Kế hoạch và Đầu tư: Hà Hữu Lương, K23HTTTA 9 Khóa luận tốt nghiệp Hình 1.4: Vị trí của doanh nghiệp trong lộ trình chuyển đổi số (Khảo sát của Cục phát triển doanh nghiệp, Bộ Kế Hoạch và Đầu Tư Năm 2022) Theo kết quả khảo sát 1000 doanh nghiệp, phần lớn doanh nghiệp đã nhận thức được tầm quan trọng của chuyển đổi số, tuy nhiên quá trình chuyển đổi số vẫn chưa đạt được mục tiêu mong đợi. Các doanh nghiệp chủ yếu đang ở giai đoạn số hóa dữ liệu, hoặc đã từng bước áp dụng công nghệ, phần mềm mới nhưng chưa đạt được mục tiêu đề ra nên đã ngừng sử dụng, hoặc vẫn đang sử dụng nhưng gặp nhiều khó khăn, chưa thực sự thuận lợi. Cụ thể: - 48,8% doanh nghiệp đã từng sử dụng một số giải pháp chuyển đổi số nhưng hiện tại không còn sử dụng do giải pháp chưa phù hợp, hoặc áp dụng để đáp ứng nhu cầu tạm thời trong đại dịch COVID-19 nhưng giờ không còn nhu cầu.

Lý do khác là các doanh nghiệp chưa xác định mục tiêu và chiến lược chuyển đổi số đúng đắn, cũng như thiếu nhân sự phục vụ quá trình này về cả số lượng và chất lượng. Điều này thể hiện rõ khi chỉ có 6,2% đã hoàn thành xác định mục tiêu chuyển đổi số và 7,6% đã xây dựng kế hoạch trong ngắn và dài hạn. - 35,3% doanh nghiệp đã số hóa dữ liệu, quy trình (chủ yếu chuyển đổi dữ liệu, văn bản từ bản giấy sang dạng số để lưu trữ trên hệ thống). Đây là hoạt động quan trọng để tiến tới chuyển đổi số rộng và đồng bộ hơn.

Hà Hữu Lương, K23HTTTA 10 Khóa luận tốt nghiệp - Một tỷ lệ nhỏ (2,2%) đã làm chủ công nghệ, phần mềm quản lý để phân tích dữ liệu, tự động hóa để đưa ra các quyết định sản xuất kinh doanh, mặc dù một số vẫn gặp khó khăn trong quá trình sử dụng công nghệ.

Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ

Tài liệu có tiêu đề Xây Dựng Hệ Thống Data Warehouse Trên Nền Tảng Điện Toán Đám Mây cung cấp cái nhìn sâu sắc về cách thức xây dựng và triển khai hệ thống kho dữ liệu (data warehouse) trên nền tảng điện toán đám mây. Tài liệu này nhấn mạnh những lợi ích của việc sử dụng công nghệ điện toán đám mây, bao gồm khả năng mở rộng linh hoạt, tiết kiệm chi phí và cải thiện hiệu suất xử lý dữ liệu. Độc giả sẽ tìm thấy các phương pháp và công cụ hữu ích để tối ưu hóa quy trình lưu trữ và phân tích dữ liệu, từ đó nâng cao khả năng ra quyết định trong doanh nghiệp.

Để mở rộng thêm kiến thức về các ứng dụng công nghệ trong lĩnh vực xây dựng và quản lý dữ liệu, bạn có thể tham khảo tài liệu Xây dựng và phát triển ứng dụng học và kiểm tra tiếng anh thông minh trên nền tảng dịch vụ điện toán đám mây google luận văn thạc sĩ, nơi bạn sẽ tìm thấy những ứng dụng thực tiễn của điện toán đám mây trong giáo dục. Ngoài ra, tài liệu Luận văn thạc sĩ quản lý xây dựng đánh giá mức độ số hóa của các hoạt động trong dự án xây dựng tại việt nam sẽ giúp bạn hiểu rõ hơn về quá trình số hóa trong ngành xây dựng. Cuối cùng, tài liệu Digitalization financing constraints and firm performance evidence from vietnam sẽ cung cấp cái nhìn về tác động của chuyển đổi số đến hiệu suất doanh nghiệp, một yếu tố quan trọng trong bối cảnh hiện nay. Những tài liệu này sẽ giúp bạn có cái nhìn toàn diện hơn về các xu hướng và thách thức trong lĩnh vực công nghệ thông tin và quản lý dữ liệu.