Đồ án tốt nghiệp thiết kế hệ thống điều khiển các thiết bị trong lớp học thông minh ứng dụng nhận dạng tiếng nói

Đồ án tốt nghiệp thiết kế hệ thống điều khiển thiết bị lớp học thông minh ứng dụng công nghệ nhận dạng tiếng nói, nâng cao trải nghiệm học tập.

Chuyên ngành

Công Nghệ Thông Tin

Người đăng

Ẩn danh

Thể loại

Đồ án tốt nghiệp

2023

76
2
0

Phí lưu trữ

30 Point

Mục lục chi tiết

LỜI CẢM ƠN

1. CHƯƠNG 1: TỔNG QUAN VỀ ĐỀ TÀI

1.1. Đặt vấn đề

1.2. Lý do lựa chọn đề tài

1.3. Mục tiêu, phạm vi nghiên cứu và ứng dụng của đề tài

2. CHƯƠNG 2: CƠ SỞ LÝ THUYẾT

2.1. Tổng quan về hệ thống lớp học thông minh

2.2. Mô hình IoT và các ứng dụng

2.3. Mô hình lớp học thông minh - ứng dụng IoT

2.4. Tổng quan về mô hình nhận dạng tiếng nói

2.4.1. Lựa chọn mô hình nhận dạng tiếng nói

2.4.2. Tổng quan về mô hình Transformer

2.4.3. Tổng quan về mô hình Whisper

2.5. Tổng quan về ứng dụng Android trên điện thoại

2.5.1. Lựa chọn công cụ xây dựng ứng dụng điều khiển trên điện thoại

2.5.2. Tổng quan về Android Studio

2.6. Tổng quan về Firebase

2.6.1. Giới thiệu về Firebase

2.6.2. Các nhóm sản phẩm/dịch vụ của Firebase

2.6.3. Cách thức hoạt động của Firebase

2.6.4. Ưu điểm và hạn chế của Firebase

3. CHƯƠNG 3: THIẾT KẾ PHẦN CỨNG HỆ THỐNG

3.1. Khối MCU và truyền thông

3.2. Khối cảm biến

3.2.1. Cảm biến ánh sáng

3.2.2. Cảm biến nhiệt độ, độ ẩm và chất lượng không khí

3.3. Khối cơ cấu chấp hành

3.3.1. Cửa sổ, cửa ra-vào

3.3.2. Quạt, rèm cửa

3.3.3. Hệ thống đèn và điều hòa

3.4. Mạch điều khiển

4. CHƯƠNG 4: THIẾT KẾ PHẦN MỀM HỆ THỐNG

4.1. Triển khai Firebase Realtime Database

4.2. Lập trình hệ thống lớp học thông minh

4.3. Fine Tuning mô hình nhận dạng tiếng nói

4.3.1. Thiết lập môi trường và các thư viện cần thiết

4.3.2. Tải dữ liệu Training và Validation

4.3.3. Tiến hành Feature Extraction và Tokenizer

4.3.4. Định nghĩa Metric đánh giá mô hình

4.3.5. Cấu hình tham số huấn luyện

4.3.6. Huấn luyện mô hình

4.4. Triển khai mô hình tiếng nói

4.5. Thiết kế ứng dụng Android trên điện thoại

5. CHƯƠNG 5: KẾT QUẢ ĐÁNH GIÁ VÀ HƯỚNG PHÁT TRIỂN

5.1. Đánh giá của mô hình nhận dạng tiếng nói

5.1.1. Mục đích của đánh giá

5.1.2. Cách thực hiện đánh giá

5.1.3. Kết quả và nhận xét

5.2. Đánh giá mô hình điều khiển các thiết bị trong lớp học thông minh

5.2.1. Mục đích của đánh giá

5.2.2. Cách thức đánh giá

5.2.3. Kết quả đánh giá và nhận xét

5.3. Kết quả đạt được

5.4. Những hạn chế còn tồn tại và hướng phát triển

TÀI LIỆU THAM KHẢO

Tóm tắt

I. Tổng quan về đồ án thiết kế hệ thống điều khiển lớp học thông minh

Đồ án này tập trung vào việc thiết kế một hệ thống điều khiển các thiết bị trong lớp học thông minh, ứng dụng công nghệ nhận dạng tiếng nói. Hệ thống này không chỉ giúp nâng cao trải nghiệm học tập mà còn tối ưu hóa việc quản lý và điều khiển các thiết bị điện trong lớp học. Việc áp dụng công nghệ IoT và AI trong giáo dục đang trở thành xu hướng tất yếu, mang lại nhiều lợi ích cho cả giáo viên và học sinh.

1.1. Lý do lựa chọn đề tài thiết kế hệ thống thông minh

Việc áp dụng công nghệ vào giáo dục giúp tạo ra môi trường học tập hiện đại. Hệ thống điều khiển bằng giọng nói giúp giáo viên dễ dàng quản lý thiết bị mà không cần phải thao tác trực tiếp, từ đó tăng cường sự tập trung của học sinh.

1.2. Mục tiêu và phạm vi nghiên cứu của đồ án

Mục tiêu chính của đồ án là xây dựng một hệ thống hoàn chỉnh có khả năng nhận diện và thực hiện các lệnh điều khiển bằng giọng nói cho các thiết bị trong lớp học. Phạm vi nghiên cứu bao gồm công nghệ nhận diện giọng nói và thiết kế hệ thống giám sát.

II. Vấn đề và thách thức trong thiết kế hệ thống điều khiển thông minh

Mặc dù công nghệ nhận dạng tiếng nói đã phát triển mạnh mẽ, nhưng vẫn còn nhiều thách thức trong việc áp dụng vào lớp học thông minh. Các vấn đề như độ chính xác của hệ thống, khả năng xử lý tiếng ồn và sự đa dạng trong giọng nói của người dùng cần được giải quyết.

2.1. Độ chính xác của hệ thống nhận dạng tiếng nói

Độ chính xác của hệ thống nhận dạng tiếng nói phụ thuộc vào nhiều yếu tố như chất lượng mic, môi trường xung quanh và ngữ điệu của người nói. Cần có các giải pháp để cải thiện độ chính xác trong môi trường lớp học.

2.2. Khả năng xử lý tiếng ồn trong lớp học

Lớp học thường có nhiều tiếng ồn từ học sinh và thiết bị khác. Việc phát triển các thuật toán xử lý tiếng ồn là cần thiết để đảm bảo hệ thống hoạt động hiệu quả trong mọi điều kiện.

III. Phương pháp thiết kế hệ thống điều khiển lớp học thông minh

Để thiết kế hệ thống điều khiển lớp học thông minh, cần áp dụng các phương pháp hiện đại như mô hình IoT, AI và các công nghệ truyền thông. Việc lựa chọn linh kiện phần cứng và phần mềm cũng đóng vai trò quan trọng trong sự thành công của dự án.

3.1. Lựa chọn linh kiện phần cứng cho hệ thống

Việc lựa chọn linh kiện như cảm biến, vi điều khiển và các thiết bị truyền thông là rất quan trọng. Các linh kiện này cần đảm bảo tính tương thích và hiệu suất cao trong môi trường lớp học.

3.2. Phát triển phần mềm điều khiển trên điện thoại

Phần mềm điều khiển cần được phát triển trên nền tảng Android, sử dụng Firebase để quản lý dữ liệu và kết nối với các thiết bị. Điều này giúp người dùng dễ dàng giám sát và điều khiển thiết bị từ xa.

IV. Ứng dụng thực tiễn của hệ thống điều khiển thông minh trong giáo dục

Hệ thống điều khiển lớp học thông minh không chỉ mang lại tiện ích cho giáo viên mà còn tạo ra môi trường học tập tương tác cho học sinh. Việc áp dụng công nghệ này có thể cải thiện hiệu quả giảng dạy và học tập.

4.1. Tăng cường sự tương tác trong lớp học

Hệ thống cho phép học sinh tham gia vào việc điều khiển thiết bị, từ đó tăng cường sự hứng thú và tương tác trong quá trình học tập. Điều này giúp học sinh cảm thấy mình có vai trò quan trọng trong lớp học.

4.2. Tối ưu hóa việc sử dụng năng lượng

Hệ thống giám sát trạng thái các thiết bị giúp tối ưu hóa việc sử dụng năng lượng, giảm thiểu lãng phí điện năng khi các thiết bị không cần thiết vẫn hoạt động.

V. Kết luận và hướng phát triển tương lai của hệ thống

Hệ thống điều khiển lớp học thông minh ứng dụng nhận dạng tiếng nói có tiềm năng lớn trong việc nâng cao chất lượng giáo dục. Việc tiếp tục nghiên cứu và phát triển sẽ mở ra nhiều cơ hội mới trong tương lai.

5.1. Đánh giá kết quả hoạt động của hệ thống

Kết quả thử nghiệm cho thấy hệ thống hoạt động ổn định với độ chính xác cao. Tuy nhiên, cần tiếp tục cải tiến để đáp ứng tốt hơn nhu cầu thực tế trong lớp học.

5.2. Hướng phát triển và cải tiến trong tương lai

Hệ thống có thể được mở rộng để tích hợp thêm nhiều tính năng mới, như hỗ trợ học sinh khuyết tật và cải thiện khả năng nhận diện tiếng nói trong môi trường ồn ào.

10/07/2025
Đồ án tốt nghiệp thiết kế hệ thống điều khiển các thiết bị trong lớp học thông minh ứng dụng nhận dạng tiếng nói

Trích đoạn nội dung tài liệu

Đặt vấn đề Trong thời đại cách mạnh công nghiệp 4.0 đang bùng nổ, các môi trường thông minh như nhà thông minh, trường học thông minh và thành phố thông minh đang ngày càng phổ biến nhờ vào sự phát triển của công nghệ: - Nhà thông minh sử dụng Internet of Things (IoT) để kết nối và điều khiển các thiết bị gia dụng từ xa, mang lại tiện ích và an toàn cao hơn. - Trường học thông minh ứng dụng các công nghệ như trí tuệ nhân tạo (AI) và phần mềm quản lý học tập để cá nhân hóa giáo dục và tối ưu hóa việc giảng dạy. - Thành phố thông minh tập trung vào việc sử dụng dữ liệu và công nghệ để quản lý hiệu quả các dịch vụ công cộng như giao thông, năng lượng và quản lý rác thải, tạo ra môi trường sống tốt hơn cho cư dân. Xu hướng này không chỉ cải thiện chất lượng cuộc sống mà còn góp phần bảo vệ môi trường và tiết kiệm tài nguyên.

Trí tuệ nhân tạo và tự động hóa đang trở thành những yếu tố then chốt trong việc phát triển và vận hành các môi trường thông minh, hứa hẹn mang lại nhiều lợi ích thiết thực trong tương lai. Trong thực tế, các mô hình ứng dụng IoT đang ngày càng phổ biến ở Việt nam và trên thế giới. Cụ thể: - Hoa Kỳ: o Tích hợp công nghệ IoT: Các trường học tại Hoa Kỳ đã và đang áp dụng IoT để nâng cao trải nghiệm học tập. Ví dụ, các trường học sử dụng cảm biến để theo dõi và điều chỉnh nhiệt độ và độ ẩm trong lớp học, giúp tạo ra môi trường học tập thoải mái.

Hình TỔNG QUAN VỀ ĐỀ TÀI.1: Lớp học thông minh ở Mỹ 1 o Tấm bảng thông minh và thiết bị di động: Học sinh và giáo viên sử dụng bảng tương tác thông minh và thiết bị di động để tăng cường sự tương tác và hiệu quả trong việc truyền đạt kiến thức. - Singapore: o Học tập cá nhân hóa: Singapore áp dụng IoT để thu thập dữ liệu về tiến độ học tập của học sinh và điều chỉnh nội dung học tập theo nhu cầu cá nhân. Họ sử dụng các công cụ phân tích dữ liệu để cá nhân hóa trải nghiệm học tập và cải thiện kết quả học tập. o Mô hình lớp học 4.0: Các lớp học tại Singapore được trang bị công nghệ hiện đại, bao gồm cảm biến và thiết bị kết nối, giúp theo dõi tình trạng học tập và sức khỏe của học sinh.

- Nhật Bản: tích hợp robot và AI trong lớp học để hỗ trợ giáo viên và tạo ra các phương pháp giảng dạy mới. Robot có thể giúp hướng dẫn học sinh, cung cấp thông tin và thậm chí hỗ trợ trong việc dạy học các kỹ năng xã hội. Hình TỔNG QUAN VỀ ĐỀ TÀI.2: Robot hỗ trợ học tập tại Nhật Bản - Việt Nam: o Sử dụng bảng thông minh: Nhiều trường học tại Hà Nội và thành phố Hồ Chí Minh đã bắt đầu sử dụng bảng thông minh và máy chiếu để nâng cao chất lượng giảng dạy. Các thiết bị này giúp giáo viên dễ dàng trình bày bài học và tạo sự tương tác với học sinh.

o Ứng dụng IoT trong quản lý lớp học: Một số trường học đang thử nghiệm việc sử dụng cảm biến để theo dõi môi trường lớp học và các thiết bị kết nối để cải thiện điều kiện học tập. Có những số liệu cụ thể chứng minh sự phát triển của ứng dụng của AI và IoT trong quản lý lớp học và cơ sở giáo dục: - Ứng dụng AI và IoT trong giáo dục trên thế giới: 2 o Thị trường AI trong giáo dục: Theo báo cáo của HolonIQ, thị trường AI trong giáo dục dự kiến sẽ đạt khoảng 6 tỷ USD vào năm 2025, với tỷ lệ tăng trưởng hàng năm là 39,8% từ năm 2020 đến 2025. o Ứng dụng IoT trong điều khiển lớp học: Một báo cáo của Deloitte cho thấy 62% các tổ chức giáo dục lớn đã triển khai hoặc đang thử nghiệm các giải pháp IoT để điều khiển và giám sát lớp học vào năm 2023. Các giải pháp này bao gồm cảm biến môi trường, hệ thống quản lý năng lượng, và công nghệ giám sát lớp học.

- Tại Việt Nam o Ứng dụng AI trong giám sát lớp học: Theo một nghiên cứu của IDC, khoảng 30% trường học tại Việt Nam đã tích hợp AI vào hệ thống quản lý lớp học để theo dõi hiệu suất học tập và hành vi của học sinh vào năm 2023. o IoT và giám sát lớp học: Theo báo cáo từ Bộ Giáo dục và Đào tạo Việt Nam, khoảng 25% trường học ở các thành phố lớn đã triển khai các giải pháp IoT để giám sát môi trường lớp học và tài nguyên vào năm 2024. Bảng TỔNG QUAN VỀ ĐỀ TÀI.1: Tỷ lệ áp dụng AI và IoT trong điều khiển và giám sát lớp học tại các nước Khu vực Tỷ lệ áp dụng AI (%) Tỷ lệ áp dụng IoT (%) Toàn cầu 62% 62% Mỹ 65% 68% Châu Âu 60% 57% Châu Á 55% 60% Việt Nam 30% 25% 1.2 Lý do lựa chọn đề tài Trong bối cảnh công nghệ ngày càng phát triển, việc áp dụng các giải pháp công nghệ thông tin và tự động hóa vào lĩnh vực giáo dục trở nên ngày càng quan trọng và cần thiết. Lớp học thông minh với khả năng điều khiển thiết bị bằng giọng nói không chỉ mang lại tiện ích cho giáo viên và học sinh mà còn tạo ra một môi trường học tập hiện đại, tương tác và hiệu quả.

Vì vậy, đề tài "Thiết kế hệ thống điều khiển các thiết bị trong lớp học thông minh ứng dụng nhận dạng tiếng nói" được lựa chọn nhằm giải quyết những vấn đề thiết thực trong giáo dục hiện nay. Hệ thống điều khiển bằng giọng nói giúp giáo viên dễ dàng điều chỉnh các thiết bị trong lớp học như máy chiếu, đèn, máy điều hòa mà không cần phải thao tác trực tiếp, giảm thiểu gián đoạn trong quá trình giảng dạy. Điều này không chỉ 3 giúp tiết kiệm thời gian mà còn tăng cường sự tập trung của học sinh. Hơn nữa, học sinh cũng có thể tham gia vào việc điều khiển một số thiết bị, tăng cường sự tương tác và hứng thú trong học tập.

Khi học sinh cảm thấy mình có thể trực tiếp tham gia và tương tác với môi trường học tập, họ sẽ cảm thấy hứng thú hơn với bài học và dễ dàng tiếp thu kiến thức hơn. Việc giám sát trạng thái các thiết bị qua điện thoại còn giúp tối ưu hóa việc sử dụng năng lượng trong lớp học, giảm thiểu lãng phí điện năng khi các thiết bị không cần thiết vẫn hoạt động. Đây không chỉ là một bước tiến quan trọng trong việc tạo ra các lớp học thông minh mà còn góp phần bảo vệ môi trường, giảm thiểu chi phí vận hành cho các trường học. Công nghệ nhận dạng tiếng nói hiện nay đã trở nên khá phổ biến và có khả năng ứng dụng rộng rãi trong nhiều lĩnh vực, từ gia đình, công nghiệp đến giáo dục.

Việc nghiên cứu và phát triển hệ thống điều khiển thiết bị trong lớp học thông minh không chỉ có ý nghĩa thực tiễn mà còn mở ra nhiều hướng nghiên cứu và ứng dụng mới trong tương lai. Hệ thống có thể được thiết kế để đáp ứng nhu cầu học tập của học sinh khuyết tật, giúp họ dễ dàng tham gia vào các hoạt động học tập mà không gặp nhiều khó khăn. Tóm lại, việc lựa chọn đề tài "Thiết kế hệ thống điều khiển các thiết bị trong lớp học thông minh ứng dụng nhận dạng tiếng nói" không chỉ mang tính thực tiễn cao mà còn góp phần nâng cao chất lượng giáo dục, tạo ra môi trường học tập hiện đại và hiệu quả hơn. Đây là một hướng nghiên cứu có tiềm năng lớn, đáp ứng được các nhu cầu cấp thiết của giáo dục hiện đại, đồng thời mở ra nhiều cơ hội phát triển trong tương lai.

Với các lí do trên, ý tưởng về đề tài “Thiết kế hệ thống điều khiển các thiết bị trong lớp học thông minh ứng dụng nhận dạng tiếng nói” được nhóm em tiếp cận và tiến hành thực hiện.3 Mục tiêu, phạm vi nghiên cứu và ứng dụng của đề tài. Mục tiêu của đề tài: - Đưa ra mô hình mô phỏng hệ thống lớp học thông minh, đáp ứng được các yêu cầu điều khiển bằng tay và kịch bản điều khiển tự động đề ra. - Xây dựng ứng dụng giám sát, điều khiển các thiết bị trong mô hình - Xây dựng một hệ thống hoàn chỉnh có khả năng nhận diện và thực hiện các lệnh điều khiển bằng giọng nói cho các thiết bị trong lớp học như máy chiếu, đèn, máy điều hòa, rèm cửa và các thiết bị khác. - Đảm bảo hệ thống hoạt động với độ chính xác cao và tốc độ phản hồi nhanh, phù hợp với môi trường lớp học có nhiều tiếng ồn và giọng nói khác nhau.

- Kết nối, ứng dụng mô hình nhận dạng tiếng nói để điều khiển. Phạm vi nghiên cứu: - Nghiên cứu và phát triển công nghệ nhận diện giọng nói. 4 - Thiết kế và tích hợp hệ thống giám sát và điều khiển thiết bị. - Kiểm thử và đánh giá hệ thống.

Dưới đây là bảng phân chia công việc của nhóm em để hoàn thành đồ án: Bảng TỔNG QUAN VỀ ĐỀ TÀI.2: Bảng phân công công việc của các thành viên thực hiện đồ án Nội dung Đỗ Minh Đức Nguyễn Hồng Phong Tìm hiểu về Tìm hiểu về hệ thống điều Tìm hiểu về hệ thống điều các mô hình khiển các thiết bị trong lớp học. khiển các thiết bị trong lớp học. IoT và mô hình lớp học thông minh - Thiết kế mạch nguyên lý và - Tìm hiểu mô hình nhận dạng làm mạch in. - Thiết kế, lập trình phần mềm - Thu thập dữ liệu để huấn ứng dụng điện thoại để điều luyện mô hình.

khiển và giám sát. - Xử lý nhận dạng dữ liệu Triển khai tiếng nói thu được trên điện thiết kế - Lập trình thu âm tệp âm thanh của lệnh điều khiển trên thoại thành lệnh điều khiển. điện thoại và xử lý dữ liệu sau - Đưa kết quả nhận dạng về nhận dạng. điện thoại để điều khiển.

- Lập trình chương trình cho MCU để xử lý dữ liệu và điều khiển. Xây dựng Xây dựng mô hình, lắp ráp linh Xây dựng mô hình, lắp ráp linh mô hình kiện, đi dây. Đánh giá và - Chạy thử nghiệm mô hình. - Chạy thử nghiệm mô hình.

kiểm thử - Thử các kịch bản tự động đã - Thử các kịch bản tự động đã cấu hình.

Nội dung được bảo vệ bản quyền — Tải xuống đầy đủ

Tài liệu này tập trung vào việc xây dựng và phát triển hệ thống thông tin quản lý giáo dục, đặc biệt là trong bối cảnh các trường trung học phổ thông. Nó cung cấp cái nhìn tổng quan về cách thức tổ chức và quản lý thông tin giáo dục, từ đó giúp nâng cao hiệu quả trong việc quản lý học sinh, giáo viên và các hoạt động giáo dục. Độc giả sẽ nhận được những lợi ích như cải thiện quy trình quản lý, tăng cường khả năng truy cập thông tin và hỗ trợ ra quyết định tốt hơn trong môi trường giáo dục.

Để tìm hiểu sâu hơn về các khía cạnh liên quan, bạn có thể tham khảo các tài liệu sau: Xây dựng website hệ thống quản lý học tập trực tuyến, nơi bạn sẽ khám phá cách xây dựng nền tảng học tập trực tuyến hiệu quả. Ngoài ra, tài liệu Đồ án tốt nghiệp công nghệ thông tin xây dựng hệ thống websites cung cấp dịch vụ quản lý học tập của cơ sở đào tạo trực tuyến sẽ giúp bạn hiểu rõ hơn về việc phát triển các dịch vụ học tập trực tuyến. Cuối cùng, tài liệu Khóa luận tốt nghiệp mạng máy tính và truyền thông dữ liệu nghiên cứu phát triển hệ thống điểm danh cho lớp học thông minh sử dụng công nghệ bluetooth năng lượng thấp và nhận diện gương mặt sẽ cung cấp cái nhìn sâu sắc về công nghệ hiện đại trong việc quản lý lớp học. Những tài liệu này sẽ mở rộng kiến thức của bạn về các hệ thống quản lý giáo dục hiện đại.