Luận Văn Thạc Sĩ Kỹ Thuật Cơ Điện Tử: Ứng Dụng Học Máy Để Phát Hiện Lỗi Bề Mặt Ổ Cắm

Luận văn thạc sĩ kỹ thuật cơ điện tử trình bày thiết kế hệ thống phát hiện lỗi bề mặt ổ cắm sử dụng công nghệ machine learning, ứng dụng hiệu quả trong công nghiệp.

• Tác giả: Nguyễn Thanh Hoàng Hảo
• Người hướng dẫn: Dr. Trần Việt Hồng
• Trường học: Ho Chi Minh City University of Technology
• Chuyên ngành: Mechatronics Engineering
• Đề tài: Thiết kế bộ phát hiện lỗi bề mặt của đế cắm CPU bằng học máy
• Loại tài liệu: Master's thesis
• Năm xuất bản: 2024
• Địa điểm: Ho Chi Minh City

Mục lục chi tiết

• ACKNOWLEDGEMENTS
• THE COMMITMENT OF THE THESIS’ AUTHOR
• 1. CHƯƠNG 1: INTRODUCTION
• 2. CHƯƠNG 2: TRADITIONAL METHOD

Tóm tắt

I. Giới thiệu và bối cảnh nghiên cứu

Luận văn thạc sĩ này tập trung vào việc phát hiện lỗi bề mặt của ổ cắm điện trong lĩnh vực kỹ thuật cơ điện tử bằng cách sử dụng học máy. Ổ cắm CPU đóng vai trò quan trọng trong việc kết nối cơ học và điện giữa bộ vi xử lý và bo mạch in (PCB). Trong ngành công nghiệp bán dẫn, ổ cắm được sử dụng rộng rãi để kiểm tra điện và chức năng của bộ vi xử lý. Tuy nhiên, việc phát hiện lỗi bề mặt thủ công thường không hiệu quả, dẫn đến rủi ro về chất lượng và tốn kém thời gian. Nghiên cứu này đề xuất một phương pháp tự động hóa bằng học máy để cải thiện độ chính xác và hiệu quả trong việc phát hiện lỗi.

1.1. Vấn đề và thách thức

Việc phát hiện lỗi bề mặt ổ cắm thủ công gặp nhiều thách thức như phụ thuộc vào kỹ năng của kỹ thuật viên, tốn thời gian và không đảm bảo độ chính xác cao. Các lỗi như bụi bẩn, cháy, gãy chân cắm, hoặc dính kim loại có thể gây ra sự cố điện nghiêm trọng. Học máy được xem là giải pháp tiềm năng để tự động hóa quá trình này, giảm thiểu sai sót và nâng cao hiệu quả.

1.2. Mục tiêu nghiên cứu

Nghiên cứu nhằm thiết kế một hệ thống phát hiện lỗi bề mặt ổ cắm sử dụng học máy, đạt độ chính xác cao và thời gian xử lý nhanh. Mục tiêu là tạo ra một mô hình có khả năng nhận diện các loại lỗi khác nhau và tự học từ dữ liệu mới, giúp giảm chi phí và nâng cao chất lượng sản phẩm.

II. Phương pháp và kỹ thuật học máy

Nghiên cứu sử dụng các kỹ thuật học máy như mạng nơ-ron nhân tạo (ANN), mạng nơ-ron tích chập (CNN), và tối ưu hóa bằng OpenVINO để xây dựng mô hình phát hiện lỗi. Quá trình bao gồm thu thập hình ảnh, xử lý dữ liệu, trích xuất đặc trưng và huấn luyện mô hình. CNN được chọn do khả năng xử lý hình ảnh hiệu quả và độ chính xác cao trong các bài toán phân loại.

2.1. Thu thập và xử lý dữ liệu

Dữ liệu hình ảnh được thu thập từ các ổ cắm có lỗi và không lỗi, sau đó được xử lý để loại bỏ nhiễu và tăng cường chất lượng. Các kỹ thuật như cân bằng histogram và phát hiện biên được áp dụng để cải thiện độ chính xác của mô hình.

2.2. Huấn luyện mô hình

Mô hình CNN được huấn luyện trên bộ dữ liệu đã xử lý, sử dụng phương pháp truyền ngược để tối ưu hóa các trọng số. OpenVINO được sử dụng để tăng tốc độ xử lý và giảm tài nguyên tính toán, giúp mô hình có thể triển khai trên các thiết bị di động.

III. Kết quả và đánh giá

Mô hình đạt độ chính xác trên 95% trong việc phát hiện lỗi bề mặt ổ cắm, với thời gian xử lý nhanh chóng. Kết quả cho thấy học máy là phương pháp hiệu quả để tự động hóa quá trình kiểm tra chất lượng, giảm thiểu rủi ro và chi phí trong sản xuất.

3.1. So sánh với phương pháp truyền thống

So với phương pháp thủ công, mô hình học máy cho độ chính xác cao hơn và thời gian xử lý nhanh hơn. Điều này giúp giảm thiểu lỗi do con người và nâng cao hiệu quả sản xuất.

3.2. Ứng dụng thực tế

Nghiên cứu này có thể áp dụng trong các nhà máy sản xuất bán dẫn để tự động hóa quá trình kiểm tra ổ cắm, giúp nâng cao chất lượng sản phẩm và giảm chi phí bảo trì.

IV. Kết luận và hướng phát triển

Nghiên cứu đã chứng minh hiệu quả của học máy trong việc phát hiện lỗi bề mặt ổ cắm. Các kết quả cho thấy tiềm năng lớn trong việc ứng dụng công nghệ học máy vào lĩnh vực kỹ thuật điện tử và tự động hóa. Hướng phát triển tiếp theo bao gồm cải thiện mô hình để xử lý các loại lỗi phức tạp hơn và triển khai trên quy mô lớn hơn.

4.1. Đóng góp của nghiên cứu

Nghiên cứu đã cung cấp một phương pháp mới để phát hiện lỗi bề mặt ổ cắm, giúp nâng cao hiệu quả và độ chính xác trong sản xuất. Đây là nền tảng quan trọng cho các nghiên cứu tiếp theo trong lĩnh vực này.

4.2. Hướng phát triển tương lai

Các nghiên cứu tiếp theo có thể tập trung vào việc tích hợp học sâu (DL) và dữ liệu lớn để cải thiện hiệu suất mô hình, cũng như ứng dụng trong các lĩnh vực khác như kiểm tra chất lượng sản phẩm và phân tích bề mặt.

Nội dung chính

Tổng quan nghiên cứu

Trong ngành công nghiệp bán dẫn, đế cắm CPU (socket) đóng vai trò quan trọng trong việc kết nối cơ học và truyền tải điện giữa bộ vi xử lý và bảng mạch in (PCB). Theo ước tính, việc kiểm tra và bảo trì socket định kỳ là yếu tố then chốt để đảm bảo tính ổn định và hiệu suất của hệ thống vi xử lý. Tuy nhiên, việc phát hiện lỗi bề mặt socket bằng phương pháp thủ công hiện nay gặp nhiều khó khăn do phụ thuộc vào kỹ năng và sự tập trung của kỹ thuật viên, dẫn đến tỷ lệ phát hiện lỗi chỉ đạt khoảng 80%. Các lỗi phổ biến bao gồm nhiễm bẩn, chân cắm bị cong, cháy hoặc dính vật liệu lạ, gây ảnh hưởng nghiêm trọng đến khả năng truyền tín hiệu và tuổi thọ của CPU.

Mục tiêu nghiên cứu là thiết kế một bộ phát hiện lỗi bề mặt socket sử dụng học máy nhằm tự động hóa quá trình kiểm tra, nâng cao độ chính xác và hiệu quả phát hiện lỗi trên dây chuyền sản xuất. Nghiên cứu tập trung vào hai loại lỗi chính: nhiễm bẩn bề mặt và hiện tượng chập mạch do các hạt kim loại bám giữa các chân cắm. Phạm vi nghiên cứu bao gồm thu thập và xử lý hình ảnh socket từ dây chuyền sản xuất tại một số nhà máy bán dẫn, với dữ liệu thu thập trong khoảng thời gian từ năm 2023 đến 2024.

Ý nghĩa của nghiên cứu được thể hiện qua việc giảm thiểu sai sót do con người, tăng tỷ lệ phát hiện lỗi lên trên 95%, đồng thời rút ngắn thời gian kiểm tra, góp phần nâng cao năng suất và chất lượng sản phẩm trong ngành công nghiệp vi xử lý.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Nghiên cứu dựa trên hai lý thuyết chính: học máy (Machine Learning - ML) và học sâu (Deep Learning - DL), trong đó mô hình mạng nơ-ron tích chập (Convolutional Neural Network - CNN) được sử dụng để tự động trích xuất đặc trưng từ hình ảnh socket. CNN cho phép nhận diện các đặc điểm phức tạp của lỗi bề mặt thông qua các lớp tích chập, lớp kích hoạt phi tuyến (ReLU), lớp gộp (Pooling) và lớp kết nối đầy đủ (Fully Connected).

Ngoài ra, nghiên cứu áp dụng kỹ thuật chuyển giao học (Transfer Learning) nhằm tận dụng các mô hình CNN đã được huấn luyện trên bộ dữ liệu lớn như ImageNet, giúp giảm thời gian đào tạo và cải thiện hiệu suất nhận dạng trên bộ dữ liệu socket hạn chế. Các khái niệm chính bao gồm: xử lý ảnh tiền xử lý (lọc nhiễu, cân bằng sáng), phân đoạn vùng quan tâm (ROI) bằng biến đổi Hough để xác định vị trí chân cắm, và các thuật toán tối ưu hóa mô hình như OpenVINO để tăng tốc độ xử lý.

Phương pháp nghiên cứu

Nguồn dữ liệu chính là 749 ảnh socket thu thập trực tiếp từ dây chuyền sản xuất, trong đó có 582 ảnh mẫu tốt và 167 ảnh mẫu lỗi. Dữ liệu được chia thành ba tập: 80% dùng để huấn luyện, 10% để xác thực và 10% để kiểm tra. Để cân bằng dữ liệu, kỹ thuật tăng cường dữ liệu (data augmentation) được áp dụng trên tập huấn luyện.

Phương pháp phân tích sử dụng CNN kết hợp với kỹ thuật chuyển giao học, cụ thể là tinh chỉnh các mô hình CNN đã được huấn luyện trước. Quá trình huấn luyện được thực hiện trên máy tính có GPU, với các bước tiền xử lý ảnh bao gồm lọc nhiễu bằng bộ lọc trung vị (median filter), cân bằng histogram để cải thiện độ tương phản, và trích xuất ROI bằng biến đổi Hough.

Thời gian nghiên cứu kéo dài từ tháng 9/2023 đến tháng 10/2024, bao gồm các giai đoạn thu thập dữ liệu, xây dựng mô hình, huấn luyện và đánh giá hiệu suất.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

1. Độ chính xác phát hiện lỗi đạt trên 95%: Mô hình CNN được huấn luyện và tối ưu hóa cho kết quả chính xác vượt trội so với phương pháp thủ công (80%). Ví dụ, tỷ lệ phát hiện lỗi nhiễm bẩn và chập mạch lần lượt đạt 96% và 94%.

2. Thời gian phát hiện nhanh chóng: Thời gian xử lý mỗi ảnh chỉ khoảng vài giây, giảm đáng kể so với kiểm tra thủ công mất hàng phút, giúp tăng hiệu suất kiểm tra trên dây chuyền.

3. Khả năng chống nhiễu tốt: Mô hình duy trì hiệu suất ổn định khi ảnh bị ảnh hưởng bởi các loại nhiễu như Gaussian, muối tiêu (salt and pepper) với độ chính xác giảm không quá 3%.

4. Hiệu quả của kỹ thuật chuyển giao học: Việc sử dụng mô hình đã huấn luyện trước giúp giảm thời gian đào tạo xuống còn khoảng 30% so với đào tạo từ đầu, đồng thời cải thiện khả năng nhận diện các lỗi chưa từng xuất hiện trong dữ liệu huấn luyện.

Thảo luận kết quả

Nguyên nhân chính giúp mô hình đạt hiệu quả cao là khả năng tự động trích xuất đặc trưng phức tạp từ ảnh socket, vượt trội hơn hẳn các phương pháp truyền thống dựa trên ngưỡng hay phát hiện biên. So sánh với các nghiên cứu về phát hiện lỗi bề mặt trong các lĩnh vực khác như phát hiện nứt trên cầu bê tông hay kiểm tra bề mặt thép, kết quả của nghiên cứu này có độ chính xác và tốc độ xử lý tương đương hoặc vượt trội, chứng tỏ tính ứng dụng cao của CNN trong môi trường sản xuất bán dẫn.

Dữ liệu có thể được trình bày qua biểu đồ so sánh độ chính xác giữa phương pháp thủ công và mô hình CNN, cũng như bảng thống kê thời gian xử lý và tỷ lệ lỗi bỏ sót. Ngoài ra, biểu đồ thể hiện hiệu suất mô hình dưới các điều kiện nhiễu khác nhau giúp minh họa khả năng chống nhiễu của hệ thống.

Đề xuất và khuyến nghị

1. Triển khai hệ thống tự động kiểm tra socket trên dây chuyền sản xuất: Áp dụng mô hình CNN đã huấn luyện để thay thế kiểm tra thủ công, nhằm nâng cao tỷ lệ phát hiện lỗi lên trên 95% trong vòng 6 tháng tới. Chủ thể thực hiện là bộ phận kỹ thuật và quản lý chất lượng nhà máy.

2. Đào tạo và nâng cao nhận thức cho nhân viên vận hành: Tổ chức các khóa đào tạo về vận hành hệ thống tự động và xử lý sự cố trong 3 tháng đầu triển khai, giúp giảm thiểu sai sót vận hành.

3. Cập nhật và mở rộng bộ dữ liệu hình ảnh lỗi: Thu thập thêm các mẫu lỗi mới phát sinh trong quá trình sản xuất để liên tục tinh chỉnh và cải thiện mô hình, đảm bảo khả năng nhận diện các lỗi chưa từng gặp. Thời gian thực hiện liên tục hàng năm, do bộ phận nghiên cứu phát triển đảm nhiệm.

4. Tối ưu hóa phần cứng và phần mềm xử lý ảnh: Sử dụng các công cụ tối ưu như OpenVINO để tăng tốc độ xử lý, giảm chi phí vận hành và mở rộng khả năng triển khai trên các thiết bị di động hoặc hệ thống nhúng trong vòng 12 tháng.

Đối tượng nên tham khảo luận văn

1. Các kỹ sư và nhà quản lý trong ngành bán dẫn: Nghiên cứu cung cấp giải pháp tự động hóa kiểm tra socket, giúp nâng cao chất lượng sản phẩm và giảm chi phí bảo trì.

2. Nhà nghiên cứu và phát triển trong lĩnh vực học máy và thị giác máy tính: Luận văn trình bày chi tiết phương pháp áp dụng CNN và chuyển giao học trong phát hiện lỗi bề mặt, làm tài liệu tham khảo cho các ứng dụng tương tự.

3. Các doanh nghiệp sản xuất thiết bị điện tử và linh kiện: Có thể áp dụng mô hình và quy trình nghiên cứu để phát hiện lỗi bề mặt trong các sản phẩm khác như PCB, linh kiện điện tử.

4. Sinh viên và học viên ngành kỹ thuật cơ điện tử, công nghệ thông tin: Tài liệu cung cấp kiến thức thực tiễn về ứng dụng học máy trong công nghiệp, hỗ trợ học tập và nghiên cứu chuyên sâu.

Câu hỏi thường gặp

1. Tại sao phải sử dụng học máy thay vì kiểm tra thủ công?
   Học máy giúp tự động hóa quá trình kiểm tra, giảm sai sót do con người, tăng độ chính xác lên trên 95% so với 80% của kiểm tra thủ công, đồng thời rút ngắn thời gian kiểm tra đáng kể.

2. Mô hình CNN có thể phát hiện những loại lỗi nào?
   Mô hình tập trung phát hiện các lỗi phổ biến như nhiễm bẩn bề mặt và chập mạch do hạt kim loại, đồng thời có khả năng học và nhận diện các lỗi mới chưa từng xuất hiện trong dữ liệu huấn luyện.

3. Dữ liệu huấn luyện có ảnh hưởng thế nào đến hiệu quả mô hình?
   Dữ liệu đa dạng và cân bằng giúp mô hình học tốt hơn, tránh hiện tượng quá khớp hoặc thiếu khớp. Kỹ thuật tăng cường dữ liệu được sử dụng để cân bằng số lượng ảnh lỗi và ảnh tốt.

4. Mô hình có thể hoạt động hiệu quả trong điều kiện nhiễu như thế nào?
   Mô hình duy trì độ chính xác trên 92% khi ảnh bị nhiễu Gaussian hoặc salt and pepper, nhờ các bước tiền xử lý và thiết kế mạng CNN có khả năng chống nhiễu tốt.

5. Thời gian đào tạo và triển khai mô hình mất bao lâu?
   Nhờ sử dụng chuyển giao học, thời gian đào tạo giảm xuống còn khoảng 30% so với đào tạo từ đầu, thường mất vài tuần. Triển khai trên dây chuyền có thể hoàn thành trong vòng 6 tháng.

Kết luận

• Thiết kế bộ phát hiện lỗi bề mặt socket sử dụng học máy đạt độ chính xác trên 95%, vượt trội so với phương pháp thủ công.
• Mô hình CNN kết hợp chuyển giao học giúp giảm thời gian đào tạo và tăng khả năng nhận diện lỗi mới.
• Hệ thống có khả năng chống nhiễu tốt, duy trì hiệu suất ổn định trong môi trường sản xuất thực tế.
• Giải pháp góp phần nâng cao năng suất, giảm chi phí bảo trì và tăng chất lượng sản phẩm trong ngành bán dẫn.
• Các bước tiếp theo bao gồm triển khai thực tế trên dây chuyền, mở rộng bộ dữ liệu và tối ưu hóa phần cứng để ứng dụng rộng rãi hơn.

Khuyến khích các nhà quản lý và kỹ sư trong ngành bán dẫn áp dụng nghiên cứu này để nâng cao hiệu quả kiểm tra và bảo trì socket CPU.

Trích đoạn nội dung tài liệu

VIETNAM NATIONAL UNIVERSITY HO CHI MINH CITY HO CHI MINH CITY UNIVERSITY OF TECHNOLOGY NGUYỄN THANH HOÀNG HẢO THIẾT KẾ BỘ PHÁT HIỆN LỖI BỀ MẶT CỦA ĐẾ CẮM CPU BẰNG HỌC MÁY DESIGN OF SOCKET’S SURFACE DEFECT DETECTION USING MACHINE LEARNING Major: Mechatronics Engineering Major code: 8520114 MASTER’S THESIS HO CHI MINH, June 2024 THIS THESIS IS COMPLETED AT HO CHI MINH CITY UNIVERSITY OF TECHNOLOGY – VNU-HCM Supervisor: Dr. Tran Viet Hong (Please fill in the supervisor’ full name, academic rank and signature) Examiner 1: Dr. Le Thanh Hai (Please fill in the examiner’ full name, academic rank and signature) Examiner 2: Assoc. Le My Ha (Please fill in the examiner’ full name, academic rank and signature) This master’s thesis is defended at HCM City University of Technology, VNU- HCM City on 15th June, 2024.

Master’s Thesis Committee: (Please write down full name and academic rank of each member of the Master’s Thesis Committee) 1. Nguyen Quoc Chi (Committee chair) 2. Nguyen Duy Anh (Secretary) 3. Le Thanh Hai (Examiner 1) 4.

Le My Ha (Examiner 2) 5. Ngo Ha Quang Thinh (Committee member) Approval of the Chair of Master’s Thesis Committee and Dean of Faculty of Mechanical Engineering after the thesis being corrected (If any). CHAIR OF THESIS COMMITTEE DEAN OF FACULTY VIETNAM NATIONAL UNIVERSITY - HO CHI MINH CITY HO CHI MINH CITY UNIVERSITY OF TECHNOLOGY THE TASK SHEET OF MASTER’S THESIS Full name: NGUYỄN THANH HOÀNG HẢO Student ID: 2170095 Date of birth: 12 November 1996 Place of birth: Binh Dinh Major: Mechatronics Engineering Major ID: 8520114 I. THESIS TITLE (In Vietnamese): “Thiết kế bộ phát hiện lỗi bề mặt của đế cắm CPU bằng học máy” II.

THESIS TITLE (In English): “Design of socket’s surface defect detection using machine learning” III. TASKS AND CONTENTS: Research introduction and theory to solve the problem of detecting surface defects of sockets. Through experiment, build a machine learning model and evaluate the performance when solving problems. THESIS START DAY: (According to the decision on assignment of Master’s thesis): 4th September 2023 V.

THESIS COMPLETION DAY: (According to the decision on assignment of Master’s thesis) 10th October 2024 VI. Tran Viet Hong Ho Chi Minh City, date 25th May 2024 SUPERVISOR HEAD OF DEPARTMENT (Full name and signature) (Full name and signature) DEAN OF FACULTY OF MECHANICAL ENGINEERING (Full name and signature) Note: Student must pin this task sheet as the first page of the Master’s Thesis i ACKNOWLEDGEMENTS I would like to express my sincere gratitude to Dr. Tran Viet Hong for his wholehearted encouragement, guidance, and support, which facilitated my completion of this thesis. I also wish to convey my deep appreciation to the esteemed professors of Ho Chi Minh City University of Technology for imparting valuable knowledge and experience that enabled me to complete my training program.

Thank you to the Postgraduate Department for their enthusiastic assistance throughout my study and thesis writing process. Lastly, I would like to thank my friends, family, and colleagues for their encouragement, empathy, and help during this time. Ho Chi Minh City, date 25th May 2024 Student Nguyễn Thanh Hoàng Hảo ii ABSTRACT In computer hardware, processor socket is designed to provide mechanical and electrical connection between microprocessor and printed circuit board (PCB). In microprocessor industry, sockets are widely used during electrical and functional testing of processor (CPU).

Without them, PCB cannot contact properly with processor for power and electrical signal transmission. Due to its important application in any processor facility, sockets need regular maintenance and repairing to ensure electrical their electrical characteristics. However, it is very challenging to detect all the surface defects by manual inspection with microprocessor in manufacturing line. In practice, sockets are put under microscope and scanned by technicians, then detectability and efficiency depend heavily on each person’s assessment and skill.

Therefore, defected sockets cannot be captured in repairing station and caused bad performance or even electrical failure or damages to processor during production. Moreover, manual inspection is not time-efficient and always varies on person-to-person ability (eye vision, awareness, agility). To overcome this problem and get rid of human mistakes, it is essential to automate socket’s defect detection.