Ứng dụng xử lý ảnh mạng học sâu vào thiết kế và thi công mô hình phân loại các loại chuối khác nhau

Đồ án phân loại các loại chuối bằng mạng học sâu tại Trường ĐH Sư phạm Kỹ thuật TP.HCM

Nghiên cứu ứng dụng xử lý ảnh và mạng học sâu vào thiết kế mô hình phân loại chuối tự động trên kit Raspberry Pi 4 tại ĐH Sư phạm Kỹ thuật TP.HCM.

Trường đại học

Trường Đại học Sư phạm Kỹ thuật Thành phố Hồ Chí Minh

Tác giả

Lê Tấn Luận, Phan Tấn Phúc

Thể loại

Đồ án tốt nghiệp

2023

95
0
0

Phí lưu trữ

35 Point

Tóm tắt

I. Tổng quan mô hình phân loại chuối bằng học sâu tại HCMUTE

Nông nghiệp Việt Nam đang chuyển dịch mạnh mẽ sang tự động hóa. Quá trình phân loại nông sản truyền thống phụ thuộc lớn vào sức người. Phương pháp thủ công này tốn thời gian và dễ sai sót. Tại Trường Đại học Sư phạm Kỹ thuật TP.HCM, nhóm nghiên cứu đã phát triển giải pháp mới. Đề tài ứng dụng trí tuệ nhân tạo để giải quyết bài toán phân loại chuối. Nhóm tác giả gồm sinh viên Lê Tấn Luận và Phan Tấn Phúc thực hiện đề tài. Nghiên cứu nhận sự hướng dẫn trực tiếp từ PGS. Nguyễn Thanh Hải thuộc Khoa Điện - Điện tử. Dự án hoàn thành vào tháng 12 năm 2023 với kết quả khả quan. Hệ thống kết hợp cơ điện tử, thị giác máy tính và học sâu hiện đại. Mô hình xử lý trực tiếp ba giống chuối thương phẩm phổ biến gồm chuối cau, chuối sứ và chuối lùn. Thiết bị vận hành hoàn toàn tự động từ khâu cấp phôi đến gạt sản phẩm. Công trình này mở ra hướng tiếp cận công nghệ chi phí thấp cho cơ sở chế biến nông sản vừa và nhỏ.

1.1. Bối cảnh nghiên cứu tại Đại học Sư phạm Kỹ thuật TP.HCM

Trường Đại học Sư phạm Kỹ thuật TP.HCM luôn đi đầu trong nghiên cứu ứng dụng thực tiễn. Khoa Điện - Điện tử liên tục khuyến khích sinh viên giải quyết các vấn đề sản xuất. Chuối là mặt hàng xuất khẩu chủ lực của Việt Nam. Tuy nhiên, khâu phân loại sau thu hoạch vẫn còn lạc hậu. Các phương pháp cơ học truyền thống thường làm dập nát trái cây. Nhu cầu về một dây chuyền tự động hóa thông minh trở nên cấp thiết. Đề tài tốt nghiệp ngành Điện tử Công nghiệp ra đời từ thực tế đó. Nghiên cứu tập trung giải quyết bài toán nhận dạng ngoại quan với chi phí hợp lý. Nhóm nghiên cứu kết hợp hài hòa giữa lý thuyết học sâu và kỹ thuật điều khiển nhúng. Kết quả nghiên cứu đáp ứng tiêu chuẩn khắt khe của nông nghiệp công nghệ cao.

1.2. Mục tiêu và phạm vi phân loại ba giống chuối thương phẩm

Mục tiêu cốt lõi của đề tài là xây dựng mô hình phân loại tự động đạt độ chính xác cao. Đối tượng thử nghiệm gồm ba loại chuối: chuối sứ, chuối cau và chuối lùn. Mỗi loại chuối có kích thước, độ cong và sắc thái vỏ riêng biệt. Nhóm tác giả đặt mục tiêu tích hợp mô hình học sâu vào phần cứng nhúng nhỏ gọn. Toàn bộ chu trình từ chụp ảnh, xử lý dữ liệu đến phân loại phải diễn ra liên tục. Thời gian phản hồi của cơ cấu chấp hành cần đạt dưới một giây. Về phạm vi, hệ thống xử lý từng quả chuối đơn lẻ trên băng tải chuyên dụng. Buồng chụp ảnh được thiết kế khép kín nhằm cố định điều kiện chiếu sáng. Mô hình hướng tới khả năng ứng dụng thực tế tại các vựa thu mua nông sản.

II. Thách thức phân loại chuối bằng học sâu trong nông nghiệp

Phân loại nông sản bằng phương pháp thủ công bộc lộ nhiều điểm yếu cố hữu. Con người dễ mệt mỏi sau nhiều giờ làm việc liên tục. Thị lực suy giảm dẫn đến việc đánh giá sai phẩm cấp nông sản. Năng suất lao động biến động và chi phí nhân công ngày càng tăng cao. Trong khi đó, các kỹ thuật xử lý ảnh cổ điển lại gặp hạn chế nghiêm trọng. Phương pháp nhị phân hóa ngưỡng hay trích xuất biên chỉ nhận diện tốt vật thể hình học phẳng đơn giản. Quả chuối có dạng cong tự nhiên và bề mặt bất đối xứng. Màu sắc vỏ chuối thay đổi phức tạp theo từng giai đoạn sinh trưởng. Ngoài ra, việc triển khai trí tuệ nhân tạo trên phần cứng nhúng đặt ra bài toán hóc búa về tài nguyên tính toán. Các mô hình học sâu thông thường đòi hỏi card đồ họa công suất lớn. Việc tối ưu hóa thuật toán để chạy mượt mà trên bộ xử lý nhỏ gọn là thách thức hàng đầu đối với các kỹ sư chế tạo.

2.1. Giới hạn của kỹ thuật xử lý ảnh truyền thống với nông sản

Xử lý ảnh cổ điển thường dựa vào phân đoạn ngưỡng và biến đổi hình thái học. Các kỹ thuật này chỉ phù hợp với vật phẩm công nghiệp có hình dạng cố định như vỉ thuốc hay linh kiện cơ khí. Đối với nông sản tươi, hình thái sinh học rất đa dạng và ngẫu nhiên. Chuối cau quả nhỏ thon, chuối sứ mập tròn, chuối lùn lại có đường cong đặc trưng. Sự biến thiên về góc đặt trên băng tải khiến giải thuật đo kích thước hình học cổ điển dễ mất độ chính xác. Hiện tượng phản chiếu ánh sáng trên vỏ bóng cũng làm sai lệch vector màu sắc RGB. Vì vậy, các thuật toán dựa trên quy tắc cố định không thể phân biệt chính xác từng giống chuối trong điều kiện thực tế.

2.2. Vấn đề cân bằng tài nguyên phần cứng và tốc độ xử lý

Bài toán phần cứng là rào cản lớn khi áp dụng học sâu vào thực tiễn sản xuất. Các mạng nơ-ron tích chập tiêu chuẩn như VGG hay ResNet sở hữu hàng chục triệu tham số. Các mạng nơ-ron này yêu cầu bộ nhớ RAM lớn và vi xử lý máy tính để bàn đắt tiền. Ngược lại, dây chuyền nông nghiệp đòi hỏi thiết bị nhúng gọn nhẹ, tiết kiệm điện năng và chi phí rẻ. Nhóm nghiên cứu chọn bo mạch Raspberry Pi 4 để làm trung tâm điều khiển. Tuy nhiên, chip xử lý ARM trên bo mạch có giới hạn về năng lực tính toán dấu phẩy động. Nếu mạng nơ-ron quá nặng, tốc độ xử lý ảnh sẽ bị trễ. Băng tải không thể dừng chờ quá lâu cho mỗi sản phẩm. Do đó, yêu cầu cấp thiết là tìm kiếm kiến trúc mạng nhẹ nhưng vẫn bảo toàn độ chính xác.

III. Kiến trúc mô hình phân loại chuối bằng học sâu với MobileNet

Để giải quyết triệt để rào cản tính toán, nhóm nghiên cứu đã lựa chọn kiến trúc mạng MobileNet. Đây là dòng mạng nơ-ron tích chập tối ưu riêng cho thiết bị di động và hệ thống nhúng. Điểm đột phá của MobileNet nằm ở kỹ thuật tích chập phân tách theo chiều sâu. Cấu trúc này tách phép tích chập thông thường thành hai bước riêng biệt: tích chập theo chiều sâu và tích chập điểm 1x1. Nhờ đó, số lượng phép tính và tham số mô hình giảm đi đáng kể. Ảnh đầu vào từ webcam Logitech C270p được chuẩn hóa về kích thước 224x224x3 pixel. Dữ liệu ảnh đi qua các tầng trích xuất đặc trưng để xác định loại chuối. Về phần cứng, bo mạch Raspberry Pi 4 Model B đóng vai trò bộ não điều khiển toàn hệ thống. Cảm biến hồng ngoại E18-D80NK phát hiện chuối tiến vào buồng chụp. Động cơ DC 12V kéo băng tải hoạt động nhịp nhàng. Khi mô hình phân loại xong, động cơ servo MG996R sẽ lập tức gạt chuối vào đúng khay chứa quy định.

3.1. Cơ chế tích chập phân tách chiều sâu của mạng MobileNet

Mạng MobileNet phát huy hiệu quả vượt trội nhờ cấu trúc Depthwise Separable Convolution. Phép tích chập chuẩn truyền thống thực hiện lọc và kết hợp kênh cùng một thời điểm. Ngược lại, MobileNet chia nhỏ quá trình này thành hai giai đoạn độc lập. Bước đầu tiên là Depthwise Convolution áp dụng bộ lọc đơn trên từng kênh màu riêng rẽ. Bước tiếp theo là Pointwise Convolution sử dụng bộ lọc kích thước 1x1 để tổng hợp thông tin giữa các kênh. Cách tiếp cận thông minh này cắt giảm hơn tám mươi phần trăm khối lượng tính toán lý thuyết. Mô hình nhờ vậy duy trì được dung lượng siêu nhẹ và tốc độ phản hồi tính bằng mili giây. Độ chính xác nhận diện các đặc trưng vỏ và dáng chuối vẫn tương đương các mạng nơ-ron cỡ lớn.

3.2. Quy trình thu thập dữ liệu và tích hợp phần cứng hệ thống

Quy trình thực nghiệm bắt đầu bằng việc thu thập hàng nghìn ảnh mẫu của ba loại chuối trong buồng chụp tiêu chuẩn. Buồng ảnh kín giúp loại trừ hoàn toàn nhiễu sáng từ môi trường tự nhiên bên ngoài. Ảnh chụp từ webcam Logitech C270p được gán nhãn và tiền xử lý kỹ lưỡng. Dữ liệu sau đó được dùng để huấn luyện mô hình MobileNet trên máy tính trước khi chuyển đổi sang Raspberry Pi 4. Trên mô hình thực tế, cảm biến E18-D80NK quét phát hiện vật thể và kích hoạt camera ghi hình. Raspberry Pi nhận diện hình ảnh, chạy thuật toán suy luận và gửi tín hiệu điều khiển ra chân GPIO. Động cơ servo MG996R điều khiển cánh gạt đẩy chuối vào khay tương ứng theo phân loại chuẩn xác.

IV. Đánh giá mô hình phân loại chuối bằng học sâu và ứng dụng

Mô hình phân loại chuối hoàn chỉnh đã trải qua các đợt chạy thử nghiệm liên tục trong điều kiện vận hành thực tế. Kết quả kiểm tra cho thấy mạng MobileNet nhận diện chính xác cả ba giống chuối sứ, chuối cau và chuối lùn. Tốc độ đáp ứng của toàn bộ chu trình diễn ra rất nhanh. Cơ cấu cánh gạt servo thực hiện chuyển hướng vật phẩm dứt khoát và không làm dập vỏ quả. Thiết kế buồng chụp khép kín phát huy tác dụng tốt trong việc duy trì độ ổn định nhận dạng màu sắc. Nghiên cứu của nhóm tác giả tại Trường Đại học Sư phạm Kỹ thuật TP.HCM khẳng định tính khả thi cao của công nghệ. Giải pháp chứng minh rằng trí tuệ nhân tạo hoàn toàn có thể chạy mượt mà trên phần cứng nhúng giá rẻ. Mô hình này rất phù hợp với quy mô các cơ sở thu mua vừa và nhỏ tại Đồng bằng sông Cửu Long. Khả năng mở rộng sang phân loại độ chín hoặc phát hiện sâu bệnh trên quả cũng rất triển vọng.

4.1. Hiệu năng thực nghiệm và độ chính xác phân loại nông sản

Trong giai đoạn kiểm thử, hệ thống đạt tỷ lệ nhận diện chuẩn xác cao đối với từng dòng chuối riêng biệt. Sự kết hợp giữa bộ lọc tích chập chiều sâu và dữ liệu ảnh đa dạng giúp mô hình không bị nhầm lẫn giữa chuối sứ và chuối lùn. Băng tải vận hành liên tục mà không gặp hiện tượng kẹt quả hay nghẽn dữ liệu trên bo mạch. Thời gian trễ từ khi cảm biến E18-D80NK kích hoạt đến khi cánh gạt servo tác động chỉ mất chưa tới một giây. Độ tin cậy của phần cứng được chứng minh qua hàng trăm chu kỳ phân loại liên tục. Kết quả nghiệm thu đồ án nhận được sự đánh giá rất cao từ hội đồng chuyên môn Khoa Điện - Điện tử.

4.2. Tiềm năng ứng dụng thực tế và hướng phát triển tương lai

Thành công của đề tài mở ra triển vọng to lớn trong việc thương mại hóa máy phân loại nông sản giá rẻ. Các hợp tác xã và doanh nghiệp vừa có thể ứng dụng thiết kế này để tự động hóa dây chuyền đóng gói. Chi phí đầu tư cho hệ thống Raspberry Pi kết hợp camera webcam thấp hơn nhiều so với hệ thống thị giác công nghiệp ngoại nhập. Trong tương lai, mô hình có thể nâng cấp thêm tính năng phân loại chuối theo độ chín từ xanh đến chín vàng. Việc phát hiện vết thâm sẹo hoặc sâu bệnh trên bề mặt vỏ cũng là hướng nghiên cứu khả thi. Những cải tiến này sẽ nâng cao giá trị thương phẩm của nông sản Việt Nam khi xuất khẩu.

Tóm tắt và mô tả trên trang này được tạo với sự hỗ trợ của AI. Nếu bạn thấy nội dung không chính xác hoặc có vấn đề, vui lòng Báo lỗi nội dung.

17/10/2026

Trích đoạn nội dung tài liệu

CHƯƠNG 1. TỔNG QUAN Chương 4: Thi công hệ thống. Chương này trình bày quá trình thi công hệ thống, thiết kế giao diện điều khiển, giao diện web và viết tài liệu hướng dẫn. Chương 5: Kết quả, Nhận xét và Đánh giá.

Trình bày kết quả đạt được, đưa ra những bàn luận, đánh giá về mô hình. Chương 6: Kết luận và Hướng phát triển. Kết luận chung về đề tài và hướng phát triển của đề tài. BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP – Y SINH 5 CHƯƠNG 2.

CƠ SỞ LÝ THUYẾT CHƯƠNG 2. CÁC MÔ HÌNH ỨNG DỤNG XỬ LÝ ẢNH ĐỂ PHÂN LOẠI 2. Mô hình phân loại bút chì theo màu sắc Phân loại sản phẩm dựa vào xử lý ảnh là một lĩnh vực nghiên cứu đang phát triển rất mạnh. Có nhiều phương pháp khác nhau để phân loại sản phẩm, nhưng phương pháp dựa vào màu sắc vẫn còn ít được áp dụng và có nhiều cách thực hiện như sử dụng cảm biến màu sắc, kính lọc màu.

Do đó, tác giả đã quan tâm và lựa chọn đề tài này bởi vì nó có tính chất nghiên cứu, ứng dụng cao và phù hợp với xu hướng phát triển của các ngành sản xuất. Mô hình dùng Webcam để chụp ảnh bút chì và gửi ảnh vào máy tính để phân tích màu sắc. Máy tính sẽ phân loại bút chì theo 7 màu sắc khác nhau. Board Arduino Uno R3 là bộ xử lý trung tâm nhận kết quả từ máy tính.

Mô hình không cần cảm biến phát hiện vật thể nên giảm được chi phí, và dùng không gian màu HSV để nhận dạng màu sắc chính xác hơn không gian màu RGB. Mô hình còn có buồng tối để chụp ảnh không bị nhiễu ánh sáng từ bên ngoài. Nhưng mô hình còn có nhược điểm là thuật toán chưa tốt, kém ổn định khi hoạt động thời gian dài, chưa xét được chất lượng và kích thước bút chì, và chỉ giới hạn 7 màu trong cơ sở dữ liệu màu [3]. Mô hình phân loại cà chua theo khối lượng và màu sắc Với mục tiêu tìm hiểu sâu hơn về ứng dụng của xử lý ảnh trong thực tế và thi công một mô hình phân loại mang tính ứng dụng cao trong sản xuất nông nghiệp.

Đề tài này nhằm mục đích thiết kế và thi công hệ thống phân loại cà chua theo khối lượng và màu sắc. Mô hình dùng Webcam để chụp ảnh cà chua và gửi ảnh vào máy tính để phân tích màu sắc. Arduino nano là bộ xử lý trung tâm cân khối lượng cà chua và phân loại cà chua theo kết quả từ máy tính. Hệ thống này có ưu điểm là độ chính xác tương đối cao (91.

Giao diện được xây dựng trên Matlab guid đơn giản, dễ sử dụng. Bên cạnh đó, còn nhược điểm là độ chính xác của cà chua BỘ MÔN ĐIỆN TỬ CÔNG NGHIỆP – Y SINH 6 CHƯƠNG 2. CƠ SỞ LÝ THUYẾT vàng còn thấp hơn nhiều so với các loại khác (80%), tính ổn định của hệ thống không cao, còn phụ thuộc nhiều vào máy tính [4]. Mô hình kiểm tra lỗi vỉ thuốc Nhận thấy trong sản xuất công nghiệp, nông nghiệp cũng như y dược, việc đánh giá ngoại quan liên quan đến số lượng và chất lượng thuốc là rất thiết yếu và không thể bỏ qua nên đề tài đã ra đời để đáp ứng nhu cầu thiết yếu trên.

Với mô hình này, tác giả dùng xử lý ảnh để phát hiện vỉ thuốc bị lỗi về kích thước, hình dạng hoặc màu sắc (vàng, hồng, trắng, đỏ, nâu, xanh lá), và đếm số lượng thuốc đủ trong vỉ để loại trừ vỉ thuốc thiếu.

Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ

Cách trích dẫn tài liệu này

Chuẩn Việt Nam
Lê Tấn Luận, Phan Tấn Phúc (2023), Ứng dụng xử lý ảnh mạng học sâu vào thiết kế và thi công mô hình phân loại các loại chuối khác nhau, Đồ án tốt nghiệp, Trường Đại học Sư phạm Kỹ thuật Thành phố Hồ Chí Minh, Thành phố Hồ Chí Minh.
APA 7
Lê, T. L., & Phan, T. P. (2023). Ứng dụng xử lý ảnh mạng học sâu vào thiết kế và thi công mô hình phân loại các loại chuối khác nhau [Đồ án tốt nghiệp, Trường Đại học Sư phạm Kỹ thuật Thành phố Hồ Chí Minh]. vn-document.net. https://vn-document.net/document/mo-hinh-phan-loai-chuoi-bang-hoc-sau-dh-su-pham-ky-thuat-tphcm/9768554357
IEEE
T. L. Lê and T. P. Phan, "Ứng dụng xử lý ảnh mạng học sâu vào thiết kế và thi công mô hình phân loại các loại chuối khác nhau," Đồ án tốt nghiệp, Trường Đại học Sư phạm Kỹ thuật Thành phố Hồ Chí Minh, Thành phố Hồ Chí Minh, 2023. [Online]. Available: https://vn-document.net/document/mo-hinh-phan-loai-chuoi-bang-hoc-sau-dh-su-pham-ky-thuat-tphcm/9768554357

Tạo trích dẫn cho tài liệu khác

<strong>Đồ án phân loại các loại chuối bằng mạng học sâu</strong> tại Trường ĐH Sư phạm Kỹ thuật TP.HCM cung cấp giải pháp nhận diện nông sản tự động bằng thị giác máy tính. Đề tài nổi bật ở việc xây dựng mạng học sâu giúp phân loại chính xác từng giống chuối qua hình ảnh. Đây là tài liệu tham khảo giá trị cho sinh viên và kỹ sư phát triển nông nghiệp thông minh, tiết kiệm nhân công sau thu hoạch. Nghiên cứu vận dụng hiệu quả nguyên lý về <strong>nhận dạng đối tượng thị giác</strong> để phân tích dữ liệu. Đồng thời, tác giả kết hợp kỹ thuật <strong>tìm kiếm hình ảnh học sâu</strong> nhằm đối chiếu mẫu nhanh chóng. Bạn đọc cũng có thể tham khảo thêm mô hình <strong>nhận dạng bằng nơron tích chập</strong> để tối ưu hóa hệ thống.