Báo cáo Đồ án Khoa Cơ Điện Điện Tử - Nhận Diện Thủ Ngữ (ĐH Lạc Hồng)

Đồ án khoa Cơ Điện Điện Tử Đại học Lạc Hồng khóa 16. Tìm hiểu các dự án tốt nghiệp, đề tài nghiên cứu khoa học tiêu biểu của sinh viên.

Trường đại học

Đại Học Lạc Hồng

Người đăng

Ẩn danh

Thể loại

Báo cáo nghiên cứu khoa học

2022

51
0
0

Phí lưu trữ

30 Point

Tóm tắt

I. Tổng quan Đồ Án Khoa Cơ Điện Điện Tử Lạc Hồng Định hướng và Giá trị Nhân văn

Trong môi trường giáo dục đại học, các đồ án tốt nghiệp đóng vai trò then chốt, là minh chứng cho năng lực ứng dụng kiến thức của sinh viên. Đặc biệt, tại Khoa Cơ Điện Điện Tử Đại học Lạc Hồng, các dự án sinh viên Đại học Lạc Hồng không chỉ dừng lại ở yêu cầu học thuật mà còn hướng đến việc giải quyết các vấn đề thực tiễn, mang lại giá trị nhân văn sâu sắc. Một trong những đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng nổi bật là "Nhận diện thủ ngữ hỗ trợ người câm", một sáng kiến đầy tiềm năng của các sinh viên Cơ Điện Điện Tử Lạc Hồng nhằm cải thiện chất lượng cuộc sống cho cộng đồng người câm điếc. Đồ án này dưới sự hướng dẫn của ThS Ngô Kim Long và được thực hiện bởi Phạm Tài Năng cùng Triệu Vần Pham là một ví dụ điển hình về sự kết hợp giữa kỹ thuật điện tử Lạc Hồng, kỹ thuật cơ khí Lạc Hồngtrí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử.

Đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này không chỉ thể hiện khả năng nghiên cứu, thiết kế hệ thống mà còn phản ánh cam kết của trường trong việc đào tạo ra nguồn nhân lực có trách nhiệm xã hội. Việc thực hiện một luận văn đại học Cơ Điện Điện Tử như vậy đòi hỏi sinh viên phải nắm vững các kiến thức về công nghệ điều khiển tự động Lạc Hồng, hệ thống tự động hóa trường Lạc Hồng và đặc biệt là các thuật toán học máy tiên tiến. Mục tiêu chính của đồ án là xây dựng một hệ thống có khả năng nhận diện các ký hiệu thủ ngữ của người câm, sau đó chuyển đổi thành văn bản hoặc âm thanh, từ đó phá bỏ rào cản giao tiếp. Đây không chỉ là một bài tập học thuật mà còn là cơ hội để các nhà nghiên cứu trẻ đóng góp trực tiếp vào sự phát triển cộng đồng. Giá trị mà đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này mang lại là vô cùng to lớn, hứa hẹn mở ra nhiều hướng phát triển mới trong lĩnh vực công nghệ hỗ trợ người khuyết tật.

"Đây là một đề tài có tính nhân văn cao là cơ hội giúp người câm điếc có một cuộc sống hằng ngày gần hơn với người bình thường," nhấn mạnh tính cấp thiết và ý nghĩa của đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng. Nó không chỉ là sự tổng hợp kiến thức từ các môn học mà còn là quá trình vận dụng tư duy phản biện, kỹ năng giải quyết vấn đề. Từ việc thiết kế PCB đồ án sinh viên, lập trình PLC đồ án Lạc Hồng cho đến việc tích hợp cảm biến công nghiệp đồ án và phát triển thuật toán trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử, mỗi bước đều được thực hiện một cách tỉ mỉ và khoa học. Đồ án không chỉ dừng lại ở ý tưởng mà đã được triển khai thành mô hình hoạt động, mang lại hy vọng về một tương lai tươi sáng hơn cho người câm điếc. Sinh viên Cơ Điện Điện Tử Lạc Hồng luôn được khuyến khích thực hiện những đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng có tính ứng dụng cao, góp phần vào sự tiến bộ của xã hội.

1.1. Giới thiệu về Khoa Cơ Điện Điện Tử và tầm quan trọng của đồ án

Khoa Cơ Điện Điện Tử Đại học Lạc Hồng là một trong những đơn vị đào tạo hàng đầu, chuyên sâu vào các lĩnh vực như kỹ thuật điện tử Lạc Hồng, kỹ thuật cơ khí Lạc Hồng, công nghệ điều khiển tự động Lạc Hồnghệ thống tự động hóa trường Lạc Hồng. Chương trình đào tạo tại khoa luôn chú trọng kết hợp lý thuyết với thực hành, nhằm trang bị cho sinh viên Cơ Điện Điện Tử Lạc Hồng nền tảng vững chắc để đáp ứng yêu cầu của thị trường lao động hiện đại.

Vai trò của đồ án tốt nghiệp tại khoa là cực kỳ quan trọng. Đây không chỉ là một yêu cầu bắt buộc để hoàn thành chương trình học mà còn là cơ hội vàng để sinh viên tổng hợp, vận dụng toàn bộ kiến thức đã học vào một dự án cụ thể. Thông qua việc thực hiện một đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng, sinh viên có thể phát triển các kỹ năng chuyên môn như lập trình PLC đồ án Lạc Hồng, thiết kế PCB đồ án sinh viên, hay điều khiển nhúng Đại học Lạc Hồng. Đây là bước đệm quan trọng giúp sinh viên Cơ Điện Điện Tử Lạc Hồng tích lũy kinh nghiệm bảo vệ đồ án và chuẩn bị hành trang vững chắc cho sự nghiệp tương lai trong ngành robot công nghiệp Đại học Lạc Hồng hay Internet of Things (IoT) trong công nghiệp Lạc Hồng.

1.2. Mục tiêu chính của đồ án và đóng góp cho cộng đồng

Mục tiêu cốt lõi của đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng mang tên "Nhận diện thủ ngữ hỗ trợ người câm" là phát triển một hệ thống tự động có khả năng phiên dịch ngôn ngữ ký hiệu thành dạng dễ hiểu cho người bình thường. Điều này nhằm xóa bỏ rào cản giao tiếp mà khoảng 1 đến 2,5 triệu người câm ở Việt Nam đang phải đối mặt, đặc biệt trong các tình huống giao tiếp xã hội hay khẩn cấp.

Dự án này không chỉ là một dự án sinh viên Đại học Lạc Hồng mang tính học thuật, mà còn là một sáng kiến mang đậm tính nhân văn. Sản phẩm hỗ trợ người câm điếc giao tiếp dễ dàng hơn với mọi người xung quanh, nâng cao chất lượng cuộc sống và giúp họ hòa nhập tốt hơn vào xã hội. Bên cạnh đó, hệ thống còn hỗ trợ giảm bớt gánh nặng cho các y bác sĩ trong lĩnh vực phiên dịch, cho phép họ tập trung vào các công việc chuyên môn khác. Mô hình hóa hệ thống Cơ Điện Điện Tử và ứng dụng trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử trong đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này thể hiện rõ sự cam kết của sinh viên Cơ Điện Điện Tử Lạc Hồng trong việc đóng góp tích cực cho cộng đồng.

II. Thách thức và Vấn đề Đồ Án Khoa Cơ Điện Điện Tử Đại Học Lạc Hồng Giải Quyết

Việc giao tiếp là một nhu cầu cơ bản của con người, nhưng đối với những người câm điếc, nhu cầu này lại trở thành một thách thức lớn. Tại Việt Nam, với số lượng người câm ước tính từ 1 đến 2,5 triệu, việc thiếu hụt nghiêm trọng các phiên dịch viên ngôn ngữ ký hiệu khiến họ gặp khó khăn trong nhiều khía cạnh của cuộc sống, từ giao tiếp hàng ngày đến tiếp cận các dịch vụ y tế. Nhận thức được vấn đề này, đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng đã ra đời với mục tiêu tìm kiếm một giải pháp công nghệ hiệu quả và dễ tiếp cận. Thách thức lớn nhất mà đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng này phải đối mặt là sự phức tạp và đa dạng của ngôn ngữ ký hiệu, đòi hỏi một hệ thống có khả năng nhận diện chính xác và nhanh chóng.

Các giải pháp hỗ trợ người câm điếc hiện có trên thị trường Việt Nam còn khá hạn chế và tồn tại nhiều nhược điểm. Ví dụ, "Găng tay chuyển ngữ" giúp chuyển đổi ngôn ngữ ký hiệu thành tiếng Việt, nhưng yêu cầu người dùng phải đeo găng tay, gây bất tiện trong một số trường hợp. Một sản phẩm khác là đồng hồ thông minh đa năng cũng có khả năng tương tự nhưng vẫn chưa phổ biến rộng rãi. Những hạn chế này tạo động lực cho dự án sinh viên Đại học Lạc Hồng hướng đến một giải pháp nhận diện thủ ngữ không tiếp xúc, linh hoạt hơn. Việc phát triển một hệ thống trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử để giải quyết vấn đề này không chỉ đòi hỏi kiến thức chuyên sâu về kỹ thuật điện tử Lạc Hồng mà còn cả sự am hiểu về mô hình hóa hệ thống Cơ Điện Điện Tử và các thuật toán học máy.

Trong quá trình thực hiện báo cáo đồ án Cơ Điện Điện Tử, nhóm nghiên cứu đã phải đối mặt với nhiều khó khăn, từ việc thu thập dữ liệu thủ ngữ đa dạng, chính xác cho đến việc tối ưu hóa hiệu suất của mô hình. Dữ liệu về các hành vi thủ ngữ không nhiều, dẫn đến hạn chế trong việc mở rộng khả năng nhận diện cho tất cả các ký hiệu. Ngoài ra, các yếu tố như điều kiện ánh sáng, khoảng cách và độ mờ của hình ảnh cũng ảnh hưởng đến độ chính xác của hệ thống. Những thách thức này đòi hỏi sự kiên trì, khả năng phân tích và cải tiến liên tục từ phía sinh viên Cơ Điện Điện Tử Lạc Hồng. Đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này không chỉ là một thử thách về mặt công nghệ mà còn là một bài học về sự nỗ lực và cống hiến vì cộng đồng, góp phần vào sự phát triển của công nghệ điều khiển tự động Lạc Hồnghệ thống tự động hóa trường Lạc Hồng trong lĩnh vực y tế.

2.1. Thực trạng khó khăn giao tiếp của người câm điếc tại Việt Nam

Tại Việt Nam, cộng đồng người câm điếc gặp nhiều rào cản trong giao tiếp, dẫn đến sự hạn chế trong việc hòa nhập xã hội và tiếp cận các dịch vụ thiết yếu. Sự thiếu hụt trầm trọng các phiên dịch viên ngôn ngữ ký hiệu là một trong những nguyên nhân chính. Điều này khiến họ khó khăn khi muốn giao tiếp với người lạ không biết ngôn ngữ của người câm trong những trường hợp như giao lưu với mọi người ngoài xã hội hay trường hợp khẩn cấp như muốn hỏi đường về nhà khi đi lạc.

Thực trạng này không chỉ ảnh hưởng đến đời sống cá nhân mà còn gây áp lực lên hệ thống y tế, khi các y bác sĩ phải dành thêm thời gian và công sức cho việc phiên dịch. Chính vì vậy, đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng về nhận diện thủ ngữ không chỉ là một giải pháp công nghệ mà còn là một sáng kiến nhân văn, nhằm cải thiện trực tiếp chất lượng cuộc sống cho một bộ phận lớn cộng đồng. Các sinh viên Cơ Điện Điện Tử Lạc Hồng thông qua dự án sinh viên Đại học Lạc Hồng này đã đặt ra mục tiêu cao cả là thu hẹp khoảng cách giao tiếp, mang lại sự tự tin và bình đẳng cho người câm điếc.

2.2. Hạn chế của các giải pháp hỗ trợ thủ ngữ hiện có trên thị trường

Mặc dù đã có một số thiết bị hỗ trợ người câm điếc xuất hiện trên thị trường Việt Nam, nhưng chúng vẫn còn tồn tại những hạn chế nhất định. Ví dụ, "Găng tay chuyển ngữ" được phát triển vào năm 2017 có khả năng chuyển đổi ngôn ngữ ký hiệu thành tiếng Việt. Tuy nhiên, nhược điểm của sản phẩm này là yêu cầu người dùng phải đeo găng tay, điều này có thể gây bất tiện và không phải lúc nào cũng khả thi.

Một sản phẩm khác là đồng hồ đa năng tích hợp điện thoại thông minh, giúp chuyển đổi ngôn ngữ ký hiệu thành giọng nói và ngược lại. Sản phẩm này nhỏ gọn, nhưng vẫn là một thiết bị cần đeo trên người. Những hạn chế này cho thấy nhu cầu cấp thiết về một giải pháp nhận diện thủ ngữ không tiếp xúc, tự nhiên và linh hoạt hơn. Đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng hướng đến việc khắc phục những nhược điểm này bằng cách ứng dụng công nghệ trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử và thị giác máy tính, mở ra một hướng tiếp cận mới mẻ và hiệu quả hơn. Mục tiêu của luận văn đại học Cơ Điện Điện Tử này là tạo ra một hệ thống tự động, không yêu cầu thiết bị đeo, tăng cường sự thoải mái và tự nhiên trong giao tiếp cho người câm điếc.

III. Phương pháp Đồ Án Khoa Cơ Điện Điện Tử Lạc Hồng Ứng dụng AI và Deep Learning

Đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng về nhận diện thủ ngữ đã áp dụng các phương pháp tiên tiến nhất trong lĩnh vực trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử và học sâu (Deep Learning). Cách tiếp cận này giúp hệ thống học hỏi và nhận biết các mẫu ký hiệu phức tạp từ dữ liệu hình ảnh một cách hiệu quả. Deep Learning, với nguyên lý hoạt động mô phỏng bộ não con người thông qua các mạng nơ-ron nhân tạo (Neural Network), đã mở ra nhiều ứng dụng đột phá trong khoa học máy tính, đặc biệt là trong thị giác máy tính (Computer Vision) – lĩnh vực trọng tâm của đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này.

Trong số các mô hình học sâu, Mạng nơ-ron tích chập (Convolutional Neural Network - CNN) là lựa chọn tối ưu cho các bài toán nhận dạng và phân loại hình ảnh. CNN có khả năng tự động học các đặc trưng từ hình ảnh, từ các đường nét cơ bản đến các cấu trúc phức tạp hơn, giúp hệ thống nhận diện thủ ngữ đạt độ chính xác cao. Kiến trúc CNN thường bao gồm nhiều lớp tích chập chồng lên nhau, sử dụng các hàm kích hoạt phi tuyến tính để tạo ra các thông tin trừu tượng hơn cho các lớp tiếp theo. Điều này cho phép đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng xử lý hiệu quả các biến thể của ký hiệu thủ ngữ, dù trong các điều kiện ánh sáng hay góc quay khác nhau.

Để triển khai đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này, nhóm sinh viên Cơ Điện Điện Tử Lạc Hồng đã sử dụng ngôn ngữ lập trình Python và môi trường phát triển tích hợp Visual Studio Code. Python được chọn vì những ưu điểm vượt trội như cú pháp dễ đọc, dễ nhớ, tính đa năng và khả năng tương thích trên nhiều nền tảng. Ngôn ngữ này cũng được hỗ trợ bởi một hệ sinh thái thư viện khổng lồ, rất hữu ích cho các tác vụ xử lý dữ liệu và xây dựng mô hình học máy như data mining Scikit-learn, Pandas. Visual Studio Code, một trình biên tập lập trình mã nguồn mở, miễn phí và mạnh mẽ, cung cấp các tính năng như debug, syntax highlighting và tự hoàn thành mã thông minh, tối ưu hóa quá trình phát triển phần mềm. Việc lựa chọn công cụ phù hợp là một phần quan trọng trong hướng dẫn làm đồ án Lạc Hồng hiệu quả, đảm bảo dự án sinh viên Đại học Lạc Hồng được triển khai một cách suôn sẻ và chuyên nghiệp, từ việc lập trình PLC đồ án Lạc Hồng cho đến tích hợp cảm biến công nghiệp đồ án.

3.1. Cơ sở lý thuyết Deep Learning và mạng Convolution Neural Network CNN

Deep Learning là một nhánh của trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử tập trung vào việc phát triển các mô hình học máy có khả năng học từ dữ liệu thông qua các mạng nơ-ron nhiều lớp. Trong đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng, Deep Learning được áp dụng để xử lý dữ liệu hình ảnh của các cử chỉ thủ ngữ. Quy trình này bao gồm việc thu thập dữ liệu, tiền xử lý (làm sạch, chuẩn hóa), xây dựng mô hình phù hợp, huấn luyện và kiểm thử, sau cùng là đánh giá hiệu suất.

Một trong những mô hình phổ biến và hiệu quả nhất cho thị giác máy tính là Convolutional Neural Network (CNN). CNN được thiết kế đặc biệt để xử lý dữ liệu có cấu trúc lưới như hình ảnh, với các lớp tích chập (Convolutional Layer) có nhiệm vụ trích xuất các đặc trưng quan trọng từ ảnh. Kiến trúc CNN sử dụng các bộ lọc (filter) để quét qua hình ảnh, phát hiện các mẫu như cạnh, góc, và các hình dạng phức tạp. Sau đó, các lớp pooling sẽ giảm kích thước dữ liệu, giúp mô hình tập trung vào các đặc trưng quan trọng nhất và giảm tải tính toán. Sự kết hợp giữa lý thuyết Deep Learning và kiến trúc CNN là nền tảng vững chắc cho khả năng nhận diện thủ ngữ của đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng này.

3.2. Ngôn ngữ lập trình Python và môi trường phát triển Visual Studio Code

Để triển khai hệ thống nhận diện thủ ngữ, sinh viên Cơ Điện Điện Tử Lạc Hồng đã lựa chọn Python là ngôn ngữ lập trình chính. Python nổi bật với cú pháp đơn giản, dễ đọc, giúp quá trình phát triển trở nên nhanh chóng và hiệu quả. Ngôn ngữ này cũng tương thích với nhiều hệ điều hành (Windows, Mac OS, Linux) và sở hữu hệ sinh thái thư viện phong phú, bao gồm các thư viện chuyên dụng cho học máy như TensorFlow, PyTorch, và OpenCV cho xử lý ảnh.

Visual Studio Code (VS Code) được sử dụng làm môi trường phát triển tích hợp (IDE). Đây là một công cụ miễn phí, mạnh mẽ, hỗ trợ nhiều ngôn ngữ lập trình và cung cấp các tính năng như gỡ lỗi (debug), tự động hoàn thành mã (IntelliSense), và tích hợp Git. VS Code giúp các sinh viên Cơ Điện Điện Tử Lạc Hồng tối ưu hóa quá trình viết mã, quản lý dự án và khắc phục lỗi một cách dễ dàng. Sự kết hợp giữa PythonVS Code tạo nên một môi trường làm việc hiệu quả, hỗ trợ đắc lực cho việc phát triển đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng, từ các tác vụ lập trình PLC đồ án Lạc Hồng cơ bản đến các ứng dụng phức tạp trong trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử.

IV. Giải pháp Đồ Án Khoa Cơ Điện Điện Tử Lạc Hồng Tối ưu với Thuật toán YOLOv5

Để đạt được tốc độ và độ chính xác cao trong bài toán nhận diện thủ ngữ, đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng đã quyết định sử dụng thuật toán YOLOv5 (You Only Look Once phiên bản 5). YOLO là một bước đột phá trong lĩnh vực thị giác máy tính với khả năng phát hiện đối tượng theo thời gian thực, đáp ứng yêu cầu khắt khe của một hệ thống hỗ trợ giao tiếp. Sự lựa chọn YOLOv5 phản ánh sự am hiểu về các công nghệ mới nhất trong lĩnh vực trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử của nhóm sinh viên Cơ Điện Điện Tử Lạc Hồng.

Thuật toán YOLO nổi bật với ba đặc điểm chính: tốc độ xử lý nhanh, độ chính xác cân bằng và khả năng triển khai linh hoạt. Về tốc độ, YOLO có thể phát hiện đối tượng theo thời gian thực, điều cực kỳ quan trọng cho ứng dụng nhận diện thủ ngữ. Về độ chính xác, YOLOv5 đạt được sự cân bằng tốt giữa tốc độ và độ chính xác, mang lại hiệu suất đáng tin cậy. Khả năng triển khai của YOLO cũng rất ấn tượng, hoạt động hiệu quả trên cả các thiết bị phần cứng nhỏ và hệ thống máy chủ mạnh mẽ. Đây là một yếu tố then chốt cho một dự án sinh viên Đại học Lạc Hồng có tiềm năng ứng dụng thực tế.

Trong quá trình thực hiện đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng, nhóm nghiên cứu đã tìm hiểu và so sánh các phiên bản YOLO từ v1 đến v5. Mỗi phiên bản đều có những cải tiến riêng, khắc phục các điểm yếu của phiên bản trước. YOLOv1 là phiên bản đầu tiên, lấy cảm hứng từ kiến trúc Googlenet. YOLOv2 cải thiện độ chính xác bằng cách bổ sung batch normalization và cho phép dự đoán nhiều bounding boxes hơn. YOLOv3 tiếp tục tăng tốc độ và cải thiện nhận diện đối tượng nhỏ bằng cách sử dụng kiến trúc residual networks và skip connections. YOLOv4 đạt kết quả SOTA (State-of-the-Art) vào thời điểm ra mắt với các cải tiến về trọng số, Mini Batch Normalization và các phương pháp tăng cường ảnh. Cuối cùng, YOLOv5 được chọn vì là phiên bản cải tiến mạnh mẽ về tốc độ và được xây dựng trên framework PyTorch, dễ dàng tùy chỉnh và tối ưu hóa. Việc áp dụng YOLOv5 trong đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng này chứng tỏ khả năng nắm bắt và vận dụng công nghệ mới của sinh viên Cơ Điện Điện Tử Lạc Hồng vào các bài toán thực tiễn phức tạp.

4.1. Kiến trúc và ưu điểm nổi bật của thuật toán YOLO trong nhận diện đối tượng

YOLO (You Only Look Once) là một thuật toán phát hiện đối tượng sử dụng mạng nơ-ron, nổi bật với khả năng xử lý nhanh và chính xác. Khác với các phương pháp truyền thống phải chạy qua nhiều bước xử lý, YOLO thực hiện phát hiện đối tượng chỉ trong một lần nhìn duy nhất. Điều này mang lại tốc độ vượt trội, cho phép ứng dụng trong các hệ thống thời gian thực như xe tự hành hay giám sát thông minh.

Trong đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng, YOLOv5 được lựa chọn với kiến trúc CSPDarknet làm backbone để trích xuất các đặc trưng từ ảnh đầu vào. PANet được sử dụng để tổng hợp các đặc trưng thu được từ backbone, sau đó chuyển về head để dự đoán. Output trong YOLOv5 là các head tạo ra các anchor boxes để phát hiện đối tượng. Ưu điểm của YOLOv5 nằm ở sự cân bằng giữa tốc độ và độ chính xác, cùng với khả năng triển khai trên nhiều loại phần cứng, từ các thiết bị có tài nguyên hạn chế đến các hệ thống máy chủ mạnh mẽ. Đây là một giải pháp lý tưởng cho dự án sinh viên Đại học Lạc Hồng về nhận diện thủ ngữ, nơi tốc độ phản hồi là yếu tố then chốt để hỗ trợ giao tiếp hiệu quả.

4.2. Quy trình huấn luyện kiểm thử mô hình YOLOv5 và quản lý dữ liệu hiệu quả

Quy trình phát triển hệ thống nhận diện thủ ngữ trong đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng bao gồm các bước huấn luyện và kiểm thử mô hình YOLOv5 một cách chặt chẽ. Đầu tiên, dữ liệu thực nghiệm được thu thập từ nhiều nguồn như Kaggle, video trên Youtube và tự quay, sau đó được gán nhãn thủ công. Tổng cộng có 792 ảnh được gán nhãn, chia thành các ký hiệu 'A' và 'B'.

Quá trình tiền xử lý dữ liệu bao gồm làm sạch, tăng cường dữ liệu (argument data) và chuẩn hóa ảnh từ RGB [0-255] về miền [0-1]. Dữ liệu sau đó được chia thành ba tập: huấn luyện (training data), xác nhận (validation data) và kiểm thử (testing data) để đảm bảo tính khách quan trong đánh giá. Mô hình YOLOv5 được huấn luyện trên cấu hình máy tính mạnh mẽ (Intel core i5-10400F, Nvidia RTX-3060-12GB, Ram DDR4) sử dụng framework PyTorch trên hệ điều hành Ubuntu. Các tham số mô hình như learning rate, batch size và số epoch được tinh chỉnh để đạt hiệu suất tối ưu. Kết quả huấn luyện và kiểm thử được đánh giá bằng các độ đo tiêu chuẩn của bài toán Object detection, đảm bảo báo cáo đồ án Cơ Điện Điện Tử có căn cứ khoa học vững chắc.

V. Kết quả Thực nghiệm Đồ Án Khoa Cơ Điện Điện Tử Lạc Hồng Hiệu suất và Đánh giá

Đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng về nhận diện thủ ngữ đã đạt được những kết quả thực nghiệm ấn tượng, chứng minh hiệu quả của mô hình YOLOv5 trong việc giải quyết bài toán đặt ra. Quá trình đánh giá hiệu suất của mô hình là một phần không thể thiếu, giúp xác định mức độ chính xác và độ tin cậy của hệ thống. Các sinh viên Cơ Điện Điện Tử Lạc Hồng đã sử dụng nhiều độ đo chuẩn trong lĩnh vực Object detection để phân tích kỹ lưỡng các kết quả thu được, từ đó đưa ra những nhận định khách quan về ưu điểm và hạn chế của dự án sinh viên Đại học Lạc Hồng này.

Các độ đo quan trọng như Precision, Recall, F1 score, Intersection over Union (IoU), Average Precision (AP) và mean Average Precision (mAP) đã được áp dụng để đánh giá mô hình. Precision cho biết tỉ lệ số điểm true positive trong số những điểm được phân loại là positive, trong khi Recall thể hiện tỉ lệ số điểm true positive trong số những điểm thực sự là positive. F1 score là sự kết hợp hài hòa giữa Precision và Recall. Đặc biệt, IoU là hàm đánh giá độ chính xác của object detector, tính toán sự chồng lấn giữa bounding box dự đoán và bounding box thực tế. AP (Area Under the Curve) và mAP (mean Average Precision) là những chỉ số tổng hợp, phản ánh hiệu suất tổng thể của mô hình trên tất cả các lớp đối tượng.

Kết quả thực nghiệm cho thấy mô hình YOLOv5 rất hiệu quả đối với bài toán phân biệt ký hiệu thủ ngữ. Mô hình có khả năng phát hiện nhanh chóng và chính xác các ký hiệu trong các điều kiện ánh sáng và vị trí khác nhau trong ảnh. Quan trọng hơn, hệ thống có thể nhận diện nhiều hành động cùng lúc. Giá trị mAP đạt được chứng tỏ mô hình học rất tốt với tập dữ liệu đã huấn luyện. Tuy nhiên, đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này cũng gặp phải một số hạn chế như dữ liệu về các hành vi thủ ngữ còn chưa nhiều, dẫn đến khó khăn trong việc cài đặt cho tất cả các ký hiệu của thủ ngữ. Ngoài ra, trong một số trường hợp ảnh bị mờ hoặc ký hiệu ở xa, mô hình vẫn có tình trạng nhận diện sai. Những đánh giá này cung cấp cái nhìn toàn diện về báo cáo đồ án Cơ Điện Điện Tử, đồng thời là cơ sở để định hướng cho các nghiên cứu và phát triển tiếp theo trong lĩnh vực robot công nghiệp Đại học Lạc Hồnghệ thống tự động hóa trường Lạc Hồng.

5.1. Phân tích các độ đo đánh giá hiệu suất mô hình nhận diện thủ ngữ mAP IoU

Trong đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng, việc đánh giá hiệu suất của mô hình nhận diện thủ ngữ là rất quan trọng. Các độ đo chính được sử dụng bao gồm mAP (mean Average Precision) và IoU (Intersection over Union). IoU là một đại lượng đo lường mức độ chồng lấn giữa khung giới hạn dự đoán (predicted bounding box) và khung giới hạn thực tế (ground-truth bounding box), được tính bằng tỉ lệ diện tích phần giao chia cho diện tích phần hợp. IoU cao (ví dụ, > 0.5) cho thấy một dự đoán chính xác về vị trí đối tượng.

AP là sự kết hợp giữa Precision và Recall, thường được biểu diễn trên biểu đồ PR-Curve. mAP là giá trị trung bình của AP trên tất cả các lớp đối tượng, cung cấp cái nhìn tổng quan về hiệu suất của mô hình trên toàn bộ tập dữ liệu. Trong đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này, kết quả mAP cao trên cả tập validation và testing dataset chứng minh rằng mô hình YOLOv5 đã học tốt các đặc trưng của ký hiệu thủ ngữ. Điều này khẳng định tiềm năng ứng dụng của đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng trong thực tế, mang lại giải pháp hiệu quả cho người câm điếc.

5.2. Các thành tựu và hạn chế của dự án trong thực tiễn

Thành tựu nổi bật của đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng là đã phát triển thành công một hệ thống nhận diện thủ ngữ sử dụng YOLOv5 có khả năng nhận diện chính xác các ký hiệu 'A' và 'B' từ hình ảnh, sau đó phát ra âm thanh tương ứng. Hệ thống này hoạt động hiệu quả trong các điều kiện ánh sáng khác nhau và có thể nhận diện nhiều hành động cùng lúc, chứng tỏ khả năng ứng dụng thực tế cao. Kết quả này không chỉ giúp người câm điếc giao tiếp dễ dàng hơn mà còn giảm tải áp lực cho các y bác sĩ phiên dịch ngôn ngữ.

Tuy nhiên, dự án sinh viên Đại học Lạc Hồng này vẫn còn một số hạn chế. Do dữ liệu về các hành vi thủ ngữ còn hạn chế, mô hình chưa thể cài đặt để nhận diện tất cả các ký hiệu. Ngoài ra, trong các trường hợp ảnh bị mờ hoặc ký hiệu ở xa, độ chính xác của mô hình có thể giảm. Những hạn chế này là cơ sở để định hướng các nghiên cứu và cải tiến trong tương lai, nhằm nâng cao tính hoàn thiện và mở rộng khả năng ứng dụng của đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng này, đặc biệt trong bối cảnh phát triển của Internet of Things (IoT) trong công nghiệp Lạc Hồngcảm biến công nghiệp đồ án.

VI. Kết luận và Hướng phát triển Tương lai của Đồ Án Khoa Cơ Điện Điện Tử Đại Học Lạc Hồng

Đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng về "Nhận diện thủ ngữ hỗ trợ người câm" đã thành công trong việc nghiên cứu và thử nghiệm ứng dụng YOLOv5 để giải quyết một vấn đề xã hội quan trọng. Đây là một minh chứng rõ ràng cho năng lực của sinh viên Cơ Điện Điện Tử Lạc Hồng trong việc kết hợp kiến thức học thuật với khả năng ứng dụng thực tiễn trong lĩnh vực trí tuệ nhân tạo ứng dụng Cơ Điện Điện Tử. Các kết quả đạt được không chỉ đáp ứng yêu cầu của một luận văn đại học Cơ Điện Điện Tử mà còn mở ra những triển vọng đáng kể cho tương lai của công nghệ hỗ trợ người khuyết tật.

Trong phạm vi nghiên cứu và thực nghiệm, đề tài đồ án tốt nghiệp Cơ Điện Điện Tử Lạc Hồng đã tiến hành tìm hiểu sâu rộng về các thuật toán liên quan đến mạng nơ-ron nhân tạo và các kiến trúc YOLO từ v1 đến v5. Nhóm nghiên cứu đã phân tích ưu nhược điểm của từng mô hình và lựa chọn YOLOv5 là giải pháp tối ưu nhất cho bài toán nhận diện thủ ngữ. Việc thử nghiệm thuật toán với các tham số khác nhau và đưa ra bộ tham số tốt nhất đã giúp mô hình đạt được hiệu suất cao, thể hiện năng lực chuyên môn vững vàng trong việc mô hình hóa hệ thống Cơ Điện Điện Tử.

Giá trị nhân văn của đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng này là không thể phủ nhận. Nó đã tạo ra một cơ hội để người câm điếc có một cuộc sống gần gũi hơn với người bình thường, phá bỏ các rào cản giao tiếp và thúc đẩy sự hòa nhập xã hội. Điều này không chỉ là thành tựu khoa học mà còn là đóng góp ý nghĩa vào cộng đồng, thể hiện tinh thần trách nhiệm của sinh viên Cơ Điện Điện Tử Lạc Hồng.

Dựa trên những kết quả đã đạt được, đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng cũng đã đưa ra các kiến nghị và hướng phát triển trong tương lai, nhằm nâng cao hơn nữa hiệu quả và tính ứng dụng của hệ thống. Những định hướng này bao gồm việc mở rộng tập dữ liệu, cải tiến tốc độ và tối ưu chi phí, cũng như triển khai trên các nền tảng phần cứng nhỏ gọn như Raspberry Pi, mở ra tiềm năng lớn cho các dự án sinh viên Đại học Lạc Hồng tiếp theo trong lĩnh vực công nghệ điều khiển tự động Lạc Hồngrobot công nghiệp Đại học Lạc Hồng.

6.1. Tóm tắt những đóng góp chính của đồ án

Đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng đã có những đóng góp quan trọng. Thứ nhất, nghiên cứu đã thành công trong việc tìm hiểu, phân tích các thuật toán học sâu và các kiến trúc YOLO, từ đó chọn ra mô hình YOLOv5 phù hợp nhất cho bài toán nhận diện thủ ngữ. Thứ hai, nhóm nghiên cứu đã thử nghiệm và tinh chỉnh các tham số, đưa ra bộ tham số tối ưu giúp mô hình đạt hiệu suất cao. Thứ ba, sản phẩm đã chứng minh khả năng nhận diện các ký hiệu thủ ngữ cơ bản ('A', 'B') và phát ra âm thanh, mở ra hướng đi mới cho việc hỗ trợ giao tiếp cho người câm điếc.

Cuối cùng, đóng góp lớn nhất của đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng là giá trị nhân văn cao cả. Nó tạo cơ hội để người câm điếc có một cuộc sống gần gũi và hòa nhập hơn với cộng đồng, giảm bớt khó khăn trong giao tiếp hàng ngày. Những thành quả này là niềm tự hào của sinh viên Cơ Điện Điện Tử Lạc Hồng và là nguồn cảm hứng cho các thế hệ sau.

6.2. Triển vọng mở rộng và ứng dụng công nghệ trong tương lai

Nhằm phát triển hơn nữa đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng, có nhiều hướng đi tiềm năng cho tương lai. Đầu tiên, cần tiếp tục thực nghiệm với các ký tự khác trong bảng chữ cái Latin, và sau đó là các hành động hay gặp trong giao tiếp xã hội hàng ngày, để mở rộng khả năng nhận diện của hệ thống. Thứ hai, cải tiến tốc độ khi triển khai thực tế là rất quan trọng để đảm bảo hoạt động theo thời gian thực (realtime) và tiết kiệm chi phí tính toán ở mức tối thiểu. Điều này đặc biệt phù hợp với sự phát triển của Internet of Things (IoT) trong công nghiệp Lạc Hồng.

Cuối cùng, một hướng phát triển hứa hẹn là triển khai mô hình lên các thiết bị phần cứng nhỏ gọn như Raspberry Pi 4. Việc này sẽ đem lại tính ứng dụng thực tế cao, giúp người câm điếc có thể sử dụng hệ thống một cách tiện lợi và di động trong cuộc sống hàng ngày. Những cải tiến này sẽ nâng cao giá trị của đồ án Khoa Cơ Điện Điện Tử Đại học Lạc Hồng và đưa công nghệ hỗ trợ người khuyết tật lên một tầm cao mới, hướng tới một xã hội hòa nhập hơn.

27/09/2025

Trích đoạn nội dung tài liệu

Đặt vấn đề Hiện nay các bệnh nhân bị câm rất khó tiếp xúc được với các thiết bị y tế, do thiếu phiên dịch viên ngôn ngữ. Ở nước ta hiện có khoảng 1 đến 2,5 triệu người câm, tuy nhiên có rất ít phiên dịch viên ngôn ngữ ký hiệu. Đối tượng áp dụng là : sản phẩn dùng hỗ trợ cho những đối tượng bị dị tật không thể giao tiếp được bằng lời nói và gặp nhiều khó khăn khi muốn giao tiếp với những người lạ không biết ngôn ngữ của người câm trong những trường hợp như: giao lưu với mọi người ngoài xh hay trường hợp khẩn cấp như muốn hỏi đường về nhà khi đi lạc .Đây là một đề tài có tính nhân văn cao là cơ hội giúp người câm điếc có một cuộc sống hằng ngày gần hơn với người bình thường. Người bình thường cũng có thể giao tiếp dễ dàng với người câm điếc mà không bị rào cản bởi các ngôn ngữ kí hiệu.

Nhóm hy vọng dự án này có thể được phát triển mở rộng để đóng góp cho cộng đồng người câm điếc hòa nhập hơn với xã hội. Ở Việt Nam có rất ít thiết bị hỗ trợ cho người câm điếc như: Găng tay chuyển ngữ. Sản phẩm găng tay chuyển ngữ của 2 bạn Phạm Thiên Tân và Chử Hoàng Minh Đức nghiên cứu và sáng tạo ra năm 2017 nó có khả năng chuyển đổi ngôn ngữ ký hiệu thành tiếng Việt xóa bỏ những rào cản vô hình. Về mặt ưu điểm: Người đeo vào găng tay sẽ đưa ra các kí hiệu ngôn ngữ sau đó trên màn hình sẽ xuất hiện văn bản cùng âm thanh tương ứng với từng cử chỉ tay của người dùng.

Nhược điểm: Cần phải đeo găng tay mới thực hiện được 9 Hình 1. 1 Găng tay chuyển ngữ Một sản phẩm của 2 bạn Trần Thị Thanh Ngân và Nguyễn Hiền Thảo Chi học trường THPT chuyên Trần Phú – Hải Phòng đã nghiên cứu ra sản phẩm đồng hồ đa năng giúp người câm điếc nói chuyện. Chiếc đồng hồ này tích hợp một chiếc điện thoại thông minh để chuyển đổi ngôn ngữ ký hiệu của người câm điếc thành giọng nói và giọng nói thành chữ viết.Nhưng điều đặc biệt sản phẩm này nhìn bên ngoài không khác gì các đồng hồ thông thường. Nhỏ gọn giúp người khuyết tật cảm thấy bớt sự tự ti trong giao tiếp, nâng cao cuộc sống hằng ngày.

2 Đồng hồ thông minh giúp người câm điếc Còn hôm nay chúng em làm về sản phẩm mô hình nhận dạng thủ ngữ hỗ trợ người câm giúp cho những người không được may mắn về mặt giọng nói họ có thể nói lên 10 được nỗi lòng của mình đồng thời giúp các y bác sĩ trong lĩnh vực phiên dịch giảm bớt gánh nặng công việc để có thể tập trung và phát triển các lĩnh vực khác của ngành y tế.3 Mục đích và phạm vi nghiên cứu. Đối tượng áp dụng là : sản phẩm dùng hỗ trợ cho những đối tượng bị dị tật không thể giao tiếp được bằng lời nói và gặp nhiều khó khăn khi muốn giao tiếp với những người lạ không biết ngôn ngữ của người câm trong những trường hợp như: giao lưu với mọi người ngoài xã hội hay trường hợp khẩn cấp như muốn hỏi đường về nhà khi đi lạc .4 Phương pháp nghiên cứu. Nghiên cứu qua các sách báo, tài liệu trên các website khoa học công nghệ trong nước và quốc tế sau đó phân tích và tổng hợp lại với nhau. Nghiên cứu các kí hiệu thủ ngữ và xây dựng dữ liệu liên quan đến xử lí ảnh, viết chương trình điều khiển lập trình trên phần mềm Visual Studio Code bằng ngôn ngữ Python.

11 CHƯƠNG 2 CƠ SỞ LÝ THUYẾT 2.1 Giới thiệu phần mềm. Sử dụng IDE visual studio code Hình 2. 1 Phần mềm lập trình visual code Là một trình biên tập lập trình code miễn phí dành cho Windows, Linux và macOS, Visual Studio Code được phát triển bởi Microsoft. Nó được xem là một sự kết hợp hoàn hảo giữa IDE và Code Editor.

Visual Studio Code hỗ trợ chức năng debug, đi kèm với Git, có syntax highlighting, tự hoàn thành mã thông minh, snippets, và cải tiến mã nguồn. Nhờ tính năng tùy chỉnh, Visual Studio Code cũng cho phép người dùng thay đổi theme, phím tắt, và các tùy chọn khác. Tính năng của visual code: Hỗ trợ nhiều ngôn ngữ lập trình. Visual Studio Code hỗ trợ nhiều ngôn ngữ lập trình như C/C++, C#, F#, Visual Basic, HTML, CSS, JavaScript, … Vì vậy, nó dễ dàng phát hiện và đưa ra thông báo nếu chương chương trình có lỗi.

Hỗ trợ đa nền tảng, cung cấp kho tiện ích mở rộng, hỗ trợ web, lưu trữ dữ liệu dạng phân cấp, lưu trữ dữ liệu dạng phân cấp, hỗ trợ viết Code, lưu trữ dữ liệu dạng phân cấp, màn hình đa nhiệm, Intellisense, hỗ trợ Git, bình luận. 12 Lý do chọn visual code. Lý do bạn nên sử dụng Visual Studio Code là vì nó có rất nhiều ưu điểm vượt trội so với bất kỳ IDE nào khác: Hỗ trợ đa nền tảng: Windows, Linux, Mac Hỗ trợ đa ngôn ngữ: C/C++, C#, F#, Visual Basic, HTML, CSS, JavaScript, JSON, ít dung lượng, Tính năng mạnh mẽ, Intellisense chuyên nghiệp, Giao diện thân thiện, Và trên hết, Visual Studio Code là phần mềm miễn phí, được đông đảo lập trình viên trên thế giới sử dụng Nghiên cứu về các động tác thủ ngữ của người câm thông qua sách, báo, trên các thông tin đại chúng và một số thiết bị và máy đã được ứng dụng vào trong cuộc sống. Trong đó cũng có nghiên cứu và chọn lọc với các tác giả trong và ngoài nước chuyên về xử lí ảnh, các nghiên cứu đã được công bố.

Sử dụng ngôn ngữ lập trình Python Hình 2. 2 Ngôn ngữ lập trình Python 3.7 Python là một ngôn ngữ lập trình bậc cao đa năng hướng đối tượng đã ra đời từ khá lâu, nhưng đến hiện tại vẫn là ngôn ngữ lập trình có nhiều ứng dụng thực tế và được sử dụng nhiều nhất hiện nay. Vì Python có ưu điểm dễ đọc, dễ nhớ cấu trúc rõ ràng và ngắn gọn tương thích trên nhiều nền tảng hệ điều hành khác nhau như Windows, Mac OS và Linux. 13 Uư điểm của ngôn ngữ lập trình python Dù là một trong những ngôn ngữ được sử dụng nhiều nhất hiện nay, Python có những ưu và nhược điểm riêng phù hợp với từng đối tượng khác nhau.

So với những ngôn ngữ lập trình hiện nay Python có cấu trúc đơn giản, rõ ràng ngắn gọn đặc biệt là rất dễ học đây được coi là ngôn ngữ nhập môn cho những người muốn theo nghề lập trình viên. Ngoài ứng dụng của Python rất đa năng thì ngôn ngữ này còn có mặt trên tất cả các hệ điều hành như Windows, MacOS, MS-DOS, Unix,. Một ưu điểm lớn không thể bỏ qua của Python chính là tương thích với thư viện lớn nhất hiện nay với 400 triệu người sử như data mining Scikit-learn, Pandas. Có tốc độ xử lý cực nhanh, Python có thể phát triển để tạo ra những script siêu nhỏ tới những phần mềm cực lớn như Blender 3D.

Nhược điểm của ngôn ngữ lập trình python: Dù có rất nhiều ưu điểm và có ứng dụng đa năng thì Python cũng có một vài khuyết điểm như: Python không có các thuộc tính như :protected,private hay public, không có vòng lặp do…while và switch…. Dù có nhiều ưu điểm tốt hơn so với các ngôn ngữ lập trình khác nhưng lại có tốc độ chậm hơn ngôn ngữ lập trình C++, Java. Tuy cũng có một vài nhược điểm nhỏ nhưng Python vẫn là ngôn ngữ lập trình mà bất cứ lập trình viên nào cũng nên học hỏi và làm quen, để tiết kiệm thời gian trong công việc cũng như phát triển hơn nữa trong nghề nghiệp. ứng dụng của pyhon trong thực tế.

Ứng dụng của Python trong tự động hóa công việc.2 Giới thiệu deep learning và ứng dụng. Trong những năm gần đây, trí tuệ nhân tạo (Artificial Intelligence) đang nổi lên như một bằng chứng của cuộc cách mạng công nghiệp lần thứ tư, với sự phát triển vượt bậc của deep learning đã giúp cho con người tiến lên một bậc trong ngành khoa học máy tính, mở ra các hướng nghiên cứu, những ứng dụng trong thực tế. Trí tuệ nhân tạo đang ngày càng chiếm một phần quan trọng trong cuộc sống của chúng ta, từ những chiếc xe ô tô tự hành của tesla, google đến các mạng xã hội sử dụng trí tuệ nhân tạo cũng như các hệ thống gợi ý tiên tiến của Netflix, Tiktok đó chỉ là một trong các ứng dụng của trí tuệ nhân tạo. Deep learning được xây dựng dựa trên nguyên lý giống như cấu tạo bộ não của con người bao gồm các mạng neural network bằng các liên kết với nhau giúp cho máy có thể học tập tương tự như con người.

Các hướng chính nghiên cứu và ứng dụng chính của deep learning hiện nay chính là computer vision, natural language processing, reinforcement learning, trong đó computer vision bao gồm các bài toán chính như phân loại ảnh, video, phát hiện đối tượng, sinh ảnh, natural language processing áp dụng trong các bài toán về text trong đó có dịch máy, phân loại văn bản, phân tích ngữ nghĩa, các hệ thống tìm kiếm. Reinforcement learning được ứng dụng trong các ứng dụng mô phỏng, các hệ thống trò chơi điện tử, robot… 2.3 Sơ đồ về deep learning. 3 Quy trình cho một bài toán học sâu. 15 Giai đoạn 1: Thu thập dữ liệu.

Quá trình thu thập dữ liệu phụ thuộc vào bài toán mà chúng ta muốn giải quyết, đối với các bài toán có liên quan đến dữ liệu hình ảnh, video ta có thể sử dụng các camera để thu lưu trữ hoặc chúng ta có thể thu thập nguồn dữ liệu từ internet. Đối với dữ liệu text ta thường phải thu thập cũng như truy xuất từ database các nguồn phong phú trên internet. Qúa trình thu thập dữ liệu cần chú ý đến chất lượng của dữ liệu như sự đa dạng của dữ liệu, độ sạch của dữ liệu, tính nhất quán của dữ liệu. Quá trình thu thập dữ liệu phụ thuộc vào bài toán mà chúng ta muốn giải quyết, đối với các bài toán có liên quan đến dữ liệu hình ảnh, video ta có thể sử dụng các camera để thu lưu trữ hoặc chúng ta có thể thu thập nguồn dữ liệu từ internet.

Đối với dữ liệu text ta thường phải thu thập cũng như truy xuất từ database các nguồn phong phú trên internet. Qúa trình thu thập dữ liệu cần chú ý đến chất lượng của dữ liệu như sự đa dạng của dữ liệu, độ sạch của dữ liệu, tính nhất quán của dữ liệu. Giai đoạn 2: Tiền xử lý dữ liệu. Tiền xử lý dữ liệu là một trong những giai đoạn quan trọng trong học máy, nó giúp xây dựng mô hình học máy chính xác.

Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ