Nghiên Cứu Ứng Dụng Mạng Nơ-Ron Nhân Tạo Trong Dự Báo Lưu Lượng Nước

Luận văn thạc sĩ kỹ thuật phân tích nghiên cứu ứng dụng các phương pháp học máy tiên tiến trong công tác dự báo vận hành hồ hòa bình, đánh giá thực trạng, chỉ ra hạn chế, đề xuất

• Tác giả: Phạm Thị Hoàng Nhung
• Người hướng dẫn: GS. Hà Quang Thọ
• Trường học: Đại học Quốc gia Hà Nội
• Chuyên ngành: Công nghệ thông tin
• Đề tài: Nghiên Cứu Ứng Dụng Mạng Nơ-Ron Nhân Tạo Trong Dự Báo Lưu Lượng Nước
• Loại tài liệu: luận văn thực sự
• Năm xuất bản: 2007
• Địa điểm: Hà Nội

Mục lục chi tiết

• LỜI CẢM ƠN
• 1. CHƯƠNG 1: MẠNG NƠ-RON NHÂN TẠO TRUYỀN THẲNG NHIỀU LỚP
• 1.1. Giới thiệu về mạng nơ-ron nhân tạo
• 1.1.1. Khái niệm cơ bản
• 1.1.2. Mô hình mạng nơ-ron nhân tạo
• 1.1.3. Khả năng ứng dụng của mạng nơ-ron nhân tạo
• 1.2. Mạng nơ-ron lan truyền thẳng nhiều lớp
• 1.2.1. Mạng perceptron một lớp
• 1.2.2. Mạng perceptron nhiều lớp
• 1.2.3. Một số vấn đề cần chú ý khi sử dụng mạng MLP
• 1.3. Kết luận chương
• 2. CHƯƠNG 2: KẾT HỢP GIẢI THUẬT DI TRUYỀN VỚI GIẢI THUẬT LAN TRUYỀN NGƯỢC SAI SỐ ĐỂ TỐI ƯU HOÁ TRỌNG SỐ MẠNG NƠ-RON NHÂN TẠO
• 2.1. Giới thiệu giải thuật di truyền
• 2.1.1. Tư tưởng chính của giải thuật di truyền
• 2.1.2. Giải thuật di truyền đơn giản
• 2.2. Ứng dụng giải thuật di truyền vào bài toán tối ưu hoá trọng số của mạng nơ-ron nhân tạo
• 2.2.1. Xây dựng hàm giá
• 2.2.2. Mã hoá nhiễm sắc thể
• 2.2.3. Giải thuật đề xuất
• 2.2.4. Kết hợp giải thuật di truyền với giải thuật lan truyền ngược sai số để tối ưu hoá trọng số mạng nơ-ron nhân tạo
• 2.3. Kết luận chương
• 3. CHƯƠNG 3: ỨNG DỤNG MẠNG NƠ RON NHÂN TẠO VÀO VIỆC DỰ BÁO LƯU LƯỢNG NƯỚC ĐẾN HỒ HOÀ BÌNH
• 3.1. Điều kiện địa lý, tự nhiên, khí tượng thuỷ văn lưu vực sông Đà
• 3.1.1. Vị trí địa lý
• 3.1.2. Điều kiện địa chất
• 3.1.3. Điều kiện thổ nhưỡng
• 3.1.4. Đặc điểm khí hậu
• 3.1.5. Đặc điểm chế độ thuỷ văn
• 3.1.6. Thống kê dữ liệu thu thập được
• 3.2. Các phương pháp dự báo
• 3.2.1. Dựa trên mô hình vật lý
• 3.2.2. Dựa trên mô hình toán
• 3.2.3. Hướng tiếp cận mới
• 3.3. Một số chỉ tiêu đánh giá kết quả dự báo
• 3.4. Dự báo lưu lượng đến hồ Hoà Bình trước 10 ngày
• 3.4.1. Phần mềm xây dựng
• 3.4.2. Số liệu sử dụng
• 3.5. Các phương án dự báo
• 3.6. Kết luận chương
• TÀI LIỆU THAM KHẢO
• PHỤ LỤC A - GIỚI THIỆU VỀ PHẦN MỀM DỰ BÁO
• PHỤ LỤC B - MẪU HỌC THỬ NGHIỆM SO SÁNH CÁC PHƯƠNG PHÁP LAI GHÉP VÀ ĐỘT BIẾN
• PHỤ LỤC C - SỐ LIỆU HỌC VÀ KIỂM TRA TRONG BÀI TOÁN DỰ BÁO LƯU LƯỢNG NƯỚC ĐẾN HỒ HOÀ BÌNH

Tóm tắt

I. Tổng Quan Ứng Dụng Mạng Nơ Ron Dự Báo Lưu Lượng Nước

Dự báo thủy văn là một lĩnh vực quan trọng, giúp dự đoán trạng thái biến đổi của các yếu tố thủy văn trong tương lai. Việc dự báo chính xác lưu lượng nước có vai trò then chốt trong quản lý tài nguyên nước, phòng chống lũ lụt và nhiều ứng dụng khác. Hiện nay, có nhiều phương pháp dự báo được sử dụng, từ mô hình vật lý đến mô hình toán học. Tuy nhiên, việc áp dụng các phương pháp học máy, đặc biệt là mạng nơ-ron nhân tạo (ANN), đang trở thành xu hướng nổi bật. Mạng nơ-ron có khả năng học và xử lý các mối quan hệ phức tạp giữa các yếu tố đầu vào và đầu ra, mang lại kết quả dự báo đầy hứa hẹn. Theo các nghiên cứu, ứng dụng mạng nơ-ron vào dự báo thủy văn đã đạt được những thành công đáng kể, mở ra hướng đi mới cho ngành dự báo này. Luận văn này tập trung khảo sát một số phương pháp học máy tiên tiến, thực hiện việc kết hợp giữa phương pháp học máy s ử d ụng mạng n ơ - ron nh â n t ạo [5 - 7,9 - 20] với gi ải thu ật di truy ền [4,8,21] và ứng dụng vào bài toán dự báo lưu lượng nước đến hồ Hòa Bình.

1.1. Tầm quan trọng của dự báo lưu lượng nước chính xác

Dự báo lưu lượng nước chính xác đóng vai trò then chốt trong nhiều lĩnh vực. Thứ nhất, nó hỗ trợ quản lý tài nguyên nước hiệu quả, đảm bảo nguồn cung cấp nước ổn định cho sinh hoạt, sản xuất nông nghiệp và công nghiệp. Thứ hai, dự báo chính xác giúp phòng chống và giảm thiểu thiệt hại do lũ lụt, một trong những thiên tai thường xuyên xảy ra ở Việt Nam. Thứ ba, thông tin dự báo được sử dụng để vận hành các công trình thủy điện, đảm bảo an toàn và hiệu quả. Ngoài ra, dự báo lưu lượng nước còn có ý nghĩa quan trọng trong quy hoạch đô thị, xây dựng cơ sở hạ tầng và bảo vệ môi trường.

1.2. Xu hướng ứng dụng học máy trong dự báo thủy văn

Trong những năm gần đây, các phương pháp học máy (Machine Learning), đặc biệt là mạng nơ-ron nhân tạo (ANN), đang được ứng dụng rộng rãi trong dự báo thủy văn. Ưu điểm của các phương pháp này là khả năng học từ dữ liệu quá khứ, tự động điều chỉnh tham số và xử lý các mối quan hệ phi tuyến phức tạp. Các nghiên cứu đã chứng minh rằng ANN có thể đạt được độ chính xác cao hơn so với các phương pháp truyền thống trong một số trường hợp. Hơn nữa, sự phát triển của công nghệ Deep Learning và các thuật toán tiên tiến khác đang mở ra những tiềm năng mới cho dự báo lưu lượng nước.

II. Thách Thức Độ Chính Xác Dữ Liệu Trong Dự Báo Nước

Mặc dù có nhiều tiềm năng, việc ứng dụng mạng nơ-ron nhân tạo (ANN) vào dự báo lưu lượng nước vẫn đối mặt với nhiều thách thức. Một trong những thách thức lớn nhất là đảm bảo độ chính xác dự báo, đặc biệt trong điều kiện thời tiết và khí hậu biến đổi. Các yếu tố như lượng mưa, nhiệt độ, độ ẩm, và các hoạt động của con người đều có thể ảnh hưởng đến lưu lượng nước. Thêm vào đó, việc thu thập và xử lý dữ liệu thủy văn cũng là một vấn đề nan giải. Dữ liệu thường không đầy đủ, không chính xác hoặc không đồng nhất, gây khó khăn cho việc huấn luyện và đánh giá mô hình dự báo. Để giải quyết những thách thức này, cần có sự kết hợp giữa các phương pháp học máy tiên tiến, dữ liệu chất lượng cao và kiến thức chuyên sâu về thủy văn.

2.1. Các yếu tố ảnh hưởng đến độ chính xác dự báo

Độ chính xác của dự báo lưu lượng nước chịu ảnh hưởng bởi nhiều yếu tố. Thời tiết và khí hậu đóng vai trò quan trọng nhất, với lượng mưa, nhiệt độ, độ ẩm và gió là những yếu tố chính. Các yếu tố địa hình như độ dốc, loại đất và thảm thực vật cũng ảnh hưởng đến quá trình dòng chảy. Ngoài ra, các hoạt động của con người như khai thác nước ngầm, xây dựng đập và thay đổi sử dụng đất cũng có thể tác động đáng kể đến lưu lượng nước.

2.2. Vấn đề về dữ liệu và xử lý dữ liệu thủy văn

Việc thu thập và xử lý dữ liệu thủy văn là một thách thức lớn trong dự báo lưu lượng nước. Dữ liệu thường không đầy đủ, không liên tục, hoặc bị nhiễu do sai sót trong quá trình đo đạc. Hơn nữa, dữ liệu từ các nguồn khác nhau có thể có định dạng và đơn vị khác nhau, gây khó khăn cho việc tích hợp. Để đảm bảo chất lượng dữ liệu, cần có các quy trình kiểm soát chất lượng nghiêm ngặt, cũng như các phương pháp tiền xử lý dữ liệu hiệu quả.

III. Phương Pháp Xây Dựng Mô Hình Mạng Nơ Ron Dự Báo Nước

Để xây dựng một mô hình mạng nơ-ron nhân tạo (ANN) hiệu quả cho dự báo lưu lượng nước, cần tuân thủ một quy trình chặt chẽ. Đầu tiên, cần xác định rõ mục tiêu dự báo và lựa chọn các yếu tố đầu vào phù hợp. Tiếp theo, cần thu thập và tiền xử lý dữ liệu thủy văn, bao gồm làm sạch, chuẩn hóa và chia dữ liệu thành các tập huấn luyện, kiểm tra và đánh giá. Sau đó, cần lựa chọn kiến trúc mạng nơ-ron phù hợp, ví dụ như mạng truyền thẳng nhiều lớp (MLP), mạng hồi quy (RNN) hoặc mạng bộ nhớ dài ngắn hạn (LSTM). Cuối cùng, cần huấn luyện mô hình, đánh giá hiệu suất và tinh chỉnh tham số để đạt được độ chính xác dự báo tối ưu.

3.1. Lựa chọn kiến trúc mạng nơ ron ANN phù hợp

Việc lựa chọn kiến trúc mạng nơ-ron phù hợp là rất quan trọng để đạt được kết quả dự báo tốt. Mạng truyền thẳng nhiều lớp (MLP) là một lựa chọn phổ biến cho các bài toán dự báo chuỗi thời gian. Mạng hồi quy (RNN) có khả năng xử lý các chuỗi thời gian dài và phụ thuộc vào quá khứ. Mạng bộ nhớ dài ngắn hạn (LSTM) là một biến thể của RNN, khắc phục được nhược điểm biến mất gradient và có khả năng học các mối quan hệ dài hạn trong dữ liệu.

3.2. Huấn luyện và đánh giá hiệu suất mô hình dự báo

Quá trình huấn luyện mô hình mạng nơ-ron bao gồm việc điều chỉnh các trọng số và độ lệch của các nơ-ron để giảm thiểu sai số dự báo trên tập huấn luyện. Sau khi huấn luyện, cần đánh giá hiệu suất của mô hình trên tập kiểm tra để đảm bảo khả năng khái quát hóa. Các chỉ số đánh giá phổ biến bao gồm sai số bình phương trung bình (RMSE), hệ số tương quan (R) và sai số tuyệt đối trung bình (MAE).

IV. Giải Pháp Tối Ưu Thuật Toán Kết Hợp Mô Hình Dự Báo

Để nâng cao độ chính xác dự báo, có thể áp dụng nhiều kỹ thuật tối ưu thuật toán và kết hợp mô hình. Một trong những kỹ thuật phổ biến là sử dụng các thuật toán tối ưu hóa như giải thuật di truyền (GA) để tìm kiếm các tham số mạng nơ-ron tối ưu. Ngoài ra, có thể kết hợp mạng nơ-ron với các mô hình truyền thống khác, ví dụ như mô hình toán học hoặc mô hình vật lý, để tận dụng ưu điểm của cả hai phương pháp. Việc kết hợp mô hình có thể giúp cải thiện độ chính xác và độ tin cậy của dự báo.

4.1. Ứng dụng giải thuật di truyền GA tối ưu mạng nơ ron

Giải thuật di truyền (GA) là một phương pháp tối ưu hóa dựa trên quá trình tiến hóa tự nhiên. Trong bài toán tối ưu hóa mạng nơ-ron, GA có thể được sử dụng để tìm kiếm các trọng số và độ lệch tối ưu, giúp cải thiện độ chính xác dự báo. GA hoạt động bằng cách tạo ra một quần thể các giải pháp tiềm năng (nhiễm sắc thể), sau đó áp dụng các phép toán di truyền như lai ghép và đột biến để tạo ra các thế hệ giải pháp mới tốt hơn.

4.2. Kết hợp mạng nơ ron với mô hình toán học vật lý

Việc kết hợp mạng nơ-ron với các mô hình toán học hoặc mô hình vật lý có thể mang lại hiệu quả dự báo cao hơn so với việc sử dụng một phương pháp duy nhất. Ví dụ, có thể sử dụng mô hình vật lý để mô phỏng quá trình dòng chảy, sau đó sử dụng mạng nơ-ron để học và hiệu chỉnh các sai số của mô hình vật lý. Hoặc có thể sử dụng mô hình toán học để ước tính các yếu tố đầu vào cho mạng nơ-ron.

V. Ứng Dụng Dự Báo Lưu Lượng Nước Hồ Hòa Bình Kết Quả

Luận văn đã ứng dụng mạng nơ-ron nhân tạo (ANN) vào dự báo lưu lượng nước đến hồ Hòa Bình. Dữ liệu được thu thập từ hệ thống đo đạc thủy văn dọc sông Đà. Kết quả cho thấy mô hình dự báo có độ chính xác khá cao, với chỉ số R (hệ số tương quan) lên tới 0.8737 và sai số quân phương là 72. Các kết quả này chứng minh tiềm năng của mạng nơ-ron trong việc dự báo lưu lượng nước và hỗ trợ quản lý tài nguyên nước hiệu quả.

5.1. Mô tả dữ liệu sử dụng và quy trình thực nghiệm

Dữ liệu sử dụng trong nghiên cứu được thu thập từ hệ thống đo đạc thủy văn dọc sông Đà, bao gồm các thông tin về lượng mưa, mực nước, lưu lượng nước và các yếu tố khí tượng khác. Dữ liệu được chia thành các tập huấn luyện, kiểm tra và đánh giá. Quy trình thực nghiệm bao gồm việc lựa chọn kiến trúc mạng nơ-ron, huấn luyện mô hình, đánh giá hiệu suất và so sánh với các phương pháp dự báo khác.

5.2. Phân tích kết quả dự báo và so sánh với phương pháp khác

Kết quả dự báo cho thấy mạng nơ-ron có khả năng dự đoán lưu lượng nước khá chính xác, đặc biệt là trong khoảng thời gian ngắn hạn. Mô hình đạt được chỉ số R cao (0.8737) và sai số quân phương thấp (72). So sánh với các phương pháp dự báo truyền thống, mạng nơ-ron cho thấy hiệu suất tốt hơn trong việc nắm bắt các mối quan hệ phi tuyến và biến động phức tạp của lưu lượng nước.

VI. Tương Lai Phát Triển Ứng Dụng AI Trong Thủy Văn

Trong tương lai, việc ứng dụng trí tuệ nhân tạo (AI) và học máy trong thủy văn sẽ tiếp tục phát triển mạnh mẽ. Các nghiên cứu sẽ tập trung vào việc cải thiện độ chính xác dự báo, mở rộng phạm vi ứng dụng và tích hợp AI với các hệ thống quản lý tài nguyên nước thông minh. Ngoài ra, việc khai thác dữ liệu lớn (Big Data) và sử dụng các thuật toán Deep Learning tiên tiến sẽ mở ra những tiềm năng mới cho dự báo lưu lượng nước và quản lý rủi ro thiên tai.

6.1. Hướng phát triển của AI trong dự báo thủy văn

Hướng phát triển của AI trong dự báo thủy văn bao gồm việc sử dụng các thuật toán Deep Learning tiên tiến, tích hợp dữ liệu từ nhiều nguồn khác nhau (vệ tinh, cảm biến, mạng xã hội), và phát triển các mô hình dự báo thời gian thực. Ngoài ra, việc ứng dụng AI trong quản lý rủi ro thiên tai (lũ lụt, hạn hán) và quản lý tài nguyên nước bền vững cũng là một hướng đi quan trọng.

6.2. Ứng dụng AI trong quản lý tài nguyên nước thông minh

AI có thể được ứng dụng để xây dựng các hệ thống quản lý tài nguyên nước thông minh, có khả năng giám sát, dự báo và điều phối nguồn nước một cách hiệu quả. Các hệ thống này có thể sử dụng AI để tối ưu hóa việc phân phối nước, dự đoán nhu cầu sử dụng nước, và phát hiện sớm các sự cố liên quan đến nguồn nước.

Trích đoạn nội dung tài liệu

CHƯƠNG 1 - MẠNG NƠ-RON NHÂN TẠO TRUYỀN THẲNG NHIỀU LỚP Mạng nơ-ron nhân tạo được coi là một công cụ mạnh để giải quyết các bài toán có tính phi tuyến, phức tạp và đặc biệt trong các trường hợp mà mối quan hệ giữa các quá trình không dễ thiết lập một cách tường minh. Có nhiều loại mạng nơ-ron khác nhau trong đó mạng nơ-ron truyền thẳng nhiều lớp là một trong những mạng nơ-ron thông dụng nhất. Đã có nhiều nghiên cứu sử dụng mạng nơ-ron truyền thẳng nhiều lớp trong bài toán dự báo [5], [7], [10], [14] và đã chứng tỏ đây là hướng tiếp cận rất hiệu quả. Trong chương này chúng ta sẽ tìm hiểu những kiến thức về mạng nơ-ron nhân tạo, mạng nơ-ron truyền thẳng nhiều lớp và khả năng ứng dụng của chúng trong bài toán dự báo.1 Giới thiệu về mạng nơ-ron nhân tạo 1.1 Khái niệm cơ bản Theo các nhà nghiên cứu sinh học về bộ não, hệ thống thần kinh của con người bao gồm khoảng 100 tỷ tế bào thần kinh, thường gọi là các nơ-ron.

Mỗi tế bào nơ- ron gồm ba phần:  Thân nơ-ron với nhân bên trong (gọi là soma), là nơi tiếp nhận hay phát ra các xung động thần kinh.  Một hệ thống dạng cây các dây thần kinh vào (gọi là dendrite) để đưa tín hiệu tới nhân nơ-ron. Các dây thần kinh vào tạo thành một lưới dày đặc xung quanh thân nơ-ron, chiếm diện tích khoảng 0,25 mm2  Đầu dây thần kinh ra (gọi là sợi trục axon) phân nhánh dạng hình cây, có thể dài từ một cm đến hàng mét. Chúng nối với các dây thần kinh vào hoặc trực tiếp với nhân tế bào của các nơ-ron khác thông qua các khớp nối (gọi là synapse).

Thông thường mỗi nơ-ron có thể có từ vài chục cho tới hàng trăm ngàn khớp nối để nối với các nơ-ron khác. Có hai loại khớp nối, khớp nối kích thích (excitatory) sẽ cho tín hiệu qua nó để tới nơ-ron còn khớp nối ức chế (inhibitory) có tác dụng làm cản tín hiệu tới nơ-ron. Người ta ước tính mỗi nơ-ron trong bộ não của con người có khoảng 104 khớp nối (hình 1.1) Chức năng cơ bản của các tế bào nơ-ron là liên kết với nhau để tạo nên hệ thống thần kinh điều khiển hoạt động của cơ thể sống. Các tế bào nơ-ron truyền tín hiệu cho nhau thông qua các dây thần kinh vào và ra, các tín hiệu đó có dạng xung điện và được tạo ra từ các quá trình phản ứng hoá học phức tạp.

Tại nhân tế bào, khi điện (LUAN.05 TIEU LUAN MOI download : skknchat@gmail.05 14 thế của tín hiệu vào đạt tới một ngưỡng nào đó thì nó sẽ tạo ra một xung điện dẫn tới trục dây thần kinh ra. Xung này truyền theo trục ra tới các nhánh rẽ và tiếp tục truyền tới các nơ-ron khác.1 Cấu tạo của tế bào nơ-ron sinh học Với mục đích tạo ra một mô hình tính toán phỏng theo cách làm việc của nơ-ron trong bộ não con người, vào năm 1943, các tác giả McCulloch và Pitts [15] đã đề xuất một mô hình toán cho một nơ-ron như sau: x w1 1 x  2 .2 Mô hình nơ-ron nhân tạo Trong mô hình này, một nơ-ron sẽ nhận các tín hiệu vào xi với các trọng số m tương ứng là wi , tổng các thông tin vào có trọng số là  w x ij j j 1 Thông tin đầu ra ở thời điểm t+1 được tính từ các thông tin đầu vào như sau:   out (t  1)  g   wij x j (t )  i  (1.1)   Trong đó g là hàm kích hoạt (còn gọi là hàm chuyển) có dạng là hàm bước nhảy, nó đóng vai trò biến đổi từ thông tin đầu vào thành tín hiệu đầu ra 1 Nếu f > 0 g( f )   (1.05 TIEU LUAN MOI download : skknchat@gmail.05 15 Như vậy, out = 1 (ứng với việc nơ-ron tạo tín đầu ra) khi tổng các tín hiệu vào lớn hơn ngưỡng i , còn out = 0 (nơ-ron không tạo tín hiệu ở đầu ra) khi tổng các tín hiệu vào nhỏ hơn ngưỡng i. Trong mô hình nơ-ron của McCulloch và Pitts, các trọng số wij thể hiện ảnh hưởng của khớp nối trong liên kết giữa nơ-ron j (nơ-ron gửi tín hiệu) và nơ-ron i (nơ-ron nhận tín hiệu). Trọng số w ij dương ứng với khớp nối kích thích, trọng số âm ứng với khớp nối ức chế còn wij bằng 0 khi không có liên kết giữa hai nơ-ron.

Hàm chuyển g ngoài dạng hàm bước nhảy còn có thể chọn nhiều dạng khác nhau và sẽ được đề cập ở các phần sau. Thông qua cách mô hình hoá đơn giản một nơ-ron sinh học như trên, McCulloch và Pitts đã đưa ra một mô hình nơ-ron nhân tạo có tiềm năng tính toán quan trọng. Nó có thể thực hiện các phép toán lô-gíc cơ bản như AND, OR và NOT khi các trọng số và ngưỡng được chọn phù hợp. Sự liên kết giữa các nơ-ron nhân tạo với các cách thức khác nhau sẽ tạo nên các loại mạng nơ-ron nhân tạo (Artificial Neural Network - ANN) với những tính chất và khả năng làm việc khác nhau.2 Mô hình mạng nơ-ron nhân tạo Như đã được giới thiệu, mạng nơ-ron nhân tạo là một hệ thống xử lý thông tin được xây dựng trên cơ sở tổng quát hoá mô hình toán học của nơ-ron sinh học và phỏng theo cơ chế làm việc của bộ não con người.

Mạng nơ-ron nhân tạo được thể hiện thông qua ba thành phần cơ bản: mô hình của nơ-ron, cấu trúc và sự liên kết giữa các nơ-ron, phương pháp học được áp dụng cho mạng nơ-ron. Các phần tử xử lý Việc xử lý thông tin tại mỗi nơ-ron có thể xem là gồm hai phần: xử lý tín hiệu vào (input) và đưa tín hiệu ra (output). Tương ứng với phần vào của mỗi nơ-ron là một hàm tương tác (interaction) f, hàm này kết hợp các thông tin truyền tới nơ-ron và tạo thành thông tin đầu vào tổng hợp (gọi là net input) của nơ-ron đó. Một nơ-ron thứ i trong mạng thường có hàm f i ở dạng tuyến tính như sau : m fi  neti   wij x j  i (1.3) j 1 Thao tác thứ hai trong mỗi nơ-ron là tính giá trị đầu ra tương ứng với giá trị đầu vào f thông qua hàm kích hoạt hay còn gọi là hàm chuyển g(f) (hàm kích hoạt).

Một số hàm chuyển thường được sử dụng:  Hàm bước nhảy (LUAN.05 TIEU LUAN MOI download : skknchat@gmail.4)  Hàm dấu  1 khi f 0  g ( f )  sgn( f )    1 khi f 0  (1.5)  Hàm sigmoid 1 2 g( f )  g( f )  1 1  e  f hoặc 1  e  f (1. Liên kết trong mạng nơ-ron nhân tạo Mạng nơ-ron nhân tạo gồm các nơ-ron và liên kết có trọng số giữa chúng. ANN tạo nên một hệ thống xử lý thông tin làm việc trên cơ sở phỏng theo cách làm việc của hệ thống các nơ-ron trong bộ não con người. Tuy nhiên, trong bộ não của con người, các tế bào nơ-ron liên kết với nhau chằng chịt và tạo nên một mạng lưới vô cùng phức tạp.

Các loại mạng nơ-ron nhân tạo được xác định bởi cách liên kết giữa các nơ-ron, trọng số của các liên kết đó và hàm chuyển tại mỗi nơ-ron. Các hình vẽ dưới đây thể hiện các cách kết nối khác nhau.3 Mạng nơ-ron nhân tạo chỉ có một nút và có sự phản hồi x y 1 1 y x .4 Mạng nơ-ron truyền thẳng một lớp (Single-layer feedforward network) (LUAN.05 TIEU LUAN MOI download : skknchat@gmail.05 17 Mạng nơ-ron truyền thẳng một lớp là loại mạng chỉ có lớp nơ-ron đầu vào và một lớp nơ-ron đầu ra (thực chất lớp nơ-ron đầu vào không có vai trò xử lý, do đó ta nói mạng chỉ có một lớp). Loại mạng này còn được gọi là mạng perceptron một lớp. Mỗi nơ-ron đầu ra có thể nhận tín hiệu từ các đầu vào x1, x2, …, xm để tạo ra tín hiệu đầu ra tương ứng.

y m n Lớp vào Các lớp ẩn Lớp ra Hình 1.5 Mạng nơ-ron truyền thẳng nhiều lớp (Multil-layer feedforward network). Trong mạng nơ-ron truyền thẳng nhiều lớp, lớp nhận tín hiệu vào của mạng gọi là lớp vào (input layer), nó thường không thực hiện việc chuyển đổi thông tin mà chỉ làm chức năng nhận tín hiệu. Tín hiệu ra của mạng được đưa ra từ lớp ra (output layer). Các lớp ở giữa lớp vào và lớp ra gọi là các lớp ẩn.

Trong mạng truyền thẳng (feedforward network) không có nút nào mà đầu ra của nó là đầu vào của một nút khác trên cùng lớp với nó hoặc lớp trước. Mạng có phản hồi (feedback network) là mạng mà đầu ra của một nơ-ron có thể trở thành đầu vào của nơ-ron trên cùng một lớp hoặc của lớp trước đó. Mạng feedback có chu trình khép khín gọi là mạng hồi quy (recurrent network) x y 1 1 y x .6 Mạng nơ-ron hồi quy một lớp (LUAN.05 TIEU LUAN MOI download : skknchat@gmail. Các luật học của mạng nơ-ron nhân tạo Như đã được đề cập ở phần đầu luật học là một trong ba yếu tố quan trọng tạo nên một mạng nơ-ron nhân tạo.

Có hai vấn đề cần học đối với mỗi mạng nơ-ron nhân tạo đó là học tham số (parameter learning) và học cấu trúc (structure learning). Học tham số là việc thay đổi trọng số của các liên kết giữa các nơ-ron trong một mạng, còn học cấu trúc là việc điều chỉnh cấu trúc của mạng bao gồm thay đổi số lớp nơ-ron, số nơ-ron của mỗi lớp và cách liên kết giữa chúng. Hai vấn đề này có thể được thực hiện đồng thời hoặc tách biệt. Về mặt phương pháp học, có thể chia ra làm ba loại: học có giám sát hay còn gọi là học có thầy (supervised learning), học tăng cường (reinforcement learning) và học không có giám sát hay còn gọi là học không có thầy ( unsupperviced learning).3 Khả năng ứng dụng của mạng nơ-ron nhân tạo Đặc trưng của mạng nơ-ron nhân tạo là khả năng học và xử lý song song.

Nó có thể gần đúng mối quan hệ tương quan phức tạp giữa các yếu tố đầu vào và đầu ra của các quá trình cần nghiên cứu và khi đã học được thì việc kiểm tra độc lập thường cho kết quả tốt. Sau khi đã học xong, mạng nơ-ron nhân tạo có thể tính toán kết quả đầu ra tương ứng với bộ số liệu đầu vào mới. Về mặt cấu trúc, mạng nơ-ron nhân tạo là một hệ thống gồm nhiều phần tử xử lý đơn giản cùng hoạt động song song. Tính năng này của ANN cho phép nó có thể được áp dụng để giải các bài toán lớn.

Về khía cạnh toán học, theo định lý Kolmogorov, một hàm liên tục bất kỳ f(x1, x2,.