CHƯƠNG 1. GIỚI THIỆU ĐỀ TÀI học giám sát một phần, hoặc học không giám sát [2]. Về tính chất của của tai nạn: Tai nạn thường diễn ra rất nhanh bất ngờ và đột ngột, chính vì vậy việc tối ưu quá quá trình nhận dạng cũng là một bài toán được đặt ra. Các công trình nghiên cứu như [2] sử dụng quá nhiều mô hình như cả Object Detection, Optical Flow, Mạng Nơ-ron hồi tiếp GRU và thêm các tính toán logic khác khá hợp lý để đưa ra kết quả với độ chính xác cao, nhưng lại đòi hỏi chi phí lớn cho phần cứng để đáp ứng việc nhận dạng ở thời gian thực đối với một vụ tai nạn có thời gian diễn ra rất nhanh.
Thêm vào đó về độ đa dạng vào sự bao quát: như đã trình bày ở trên, các vụ tai nạn và bất thường đều hiếm gặp và có độ đa dạng rất cao, các nạn hầu như rất ít điểm chung trừ việc hai phương tiện giao nhau với tốc độ cao, ngay cả việc giao nhau này cũng rất dễ nhận dạng nhằm trong điều kiện giao thông di chuyển dày đặt và đông đúc. Vì thế việc chọn lựa, trích xuất đặc trưng cũng là một việc khó khăn. Các nghiên cứu đều tận dụng 2 đặc trưng chính là đặc trưng về hình ảnh như ảnh RGB hoặc ảnh xám, đặc trưng thứ hai và về chuyển động như Optical Flow để hô hình hóa một vụ tai nạn [8]. Nhưng, việc mô hình hóa này chưa đem lại được sự thống nhất chung cho cả 2 loại đặc trưng.
Trong mỗi nghiên cứu từng bộ dữ liệu, các nhóm tác giả đều thử nghiệm nhiều trường hợp và chọn lọc so sánh giữa hai loại đặc trưng, hoặc kết hợp cả hai. Chính vì thế việc tạo nên mô hình tổng quát để mô hình hóa chung cho giao thông là thật sự cần thiết. Điều kiện quan sát: vì các camera được đặt ngoài trời và điều kiện quan sát giao thông là ngoài trời nên chịu ảnh hưởng trực tiếp từ thời tiết và khí hậu, ngày – đêm, mưa lớn, sương mù, ngược sáng, ánh đèn ô tô chiếu thẳng vào camera. Các điều kiện ngoại cảnh này là một khó khăn không nhỏ cho việc nhận dạng và chọn lựa các mô hình phát hiện đối tượng.
Các nghiên cứu đa phần đều giới hạn ở điều kiện thời tiết tốt để triển khai, một số cố gắng cải thiện chất lượng hình ảnh bằng thuật toán Retinax [9] cũng đạt hiệu quả cả thiện chất lượng hình ảnh nhưng không giải quyết được triệt để nếu điều kiện thời tiết quá xấu do kết quả của họ phụ thuộc trực tiếp vào mô hình Yolo. Bên cạnh các thách thức khách quan trên, cũng còn tồn tại một số yếu tố chủ quan khác trong nghiên cứu về tai nạn như các bộ dữ liệu không được chia sẽ rộng rãi nên phần nào cũng làm việc so sánh, đánh giá các giải thuật gặp nhiều 3 CHƯƠNG 1. GIỚI THIỆU ĐỀ TÀI trở ngại do không có bộ dữ liệu chung, thống nhất. Như vậy tóm lại, Phát hiện tai nạn và các tình huống bất thường cho video giao thông là bài toán vừa có ý nghĩa thực tiễn vừa có ý nghĩa khoa học.
Bài toán có nhiều các khó khăn đã nêu ở trên nhưng bên cạnh đó có nhiều thuận lợi về việc số lượng các nghiên cứu về video nói chung và phát hiện bất thường cho video nói riêng tăng trong những năm gần đây giúp luận văn có nhiều ý tưởng kế thừa từ các nghiên cứu phía đó để thiết kế một môt hình tốt.2 Mục tiêu nghiên cứu Với những tiềm năng rất đang mong đợi của các mạng nơ-ron học sâu, trong nghiên cứu tôi tận dụng các thế mạng của những mạng nơ-ron cụ thể ở đây là mạng Conditional Variational Autoencoder ( mã hoá tự động biến thể có điều kiện ) sự xuất hiện của hình ảnh và chuyển động vào việc phát hiện bất thường và tai nạn. Nghiên cứu sẽ sử dụng những tập dữ liệu về video giao thông từ camera giám sát đặt cố định như UCSD Ped2, Avenue, ShanghaiTech, UCF-Crime và một số video tai nạn ở Việt Nam để huấn luyện và đánh giá hiệu quả của mô hình. Ngoài ra, nghiên cứu cũng so sánh với các cách tiếp cận khác trong khoảng thời gian gần đây. Từ những kết luận rút ra, cho ta thấy được cái nhìn tổng quan của các cách tiếp cận, và những yếu tố nào quan trọng khi áp dụng vào thực tiễn.3 Ý nghĩa đề tài Cùng với việc tăng nhanh của số lượng camera hiện tại và các nghiên cứu gần đây dần tập trung vào xử lý video.
Luận văn thực hiện đề tài hẹp hơn cho video là video giao thông với các đặc thù riêng. Qua đó, đề tài đạt được một số ý nghĩa sau đây cả về thực tiễn lẫn khoa học. Ý nghĩa thực tiễn : – Góp phần giảm chi phí thuê người giám sát các camera giao thông. – Góp phần đáp ứng nguồn nhần lực giám sát camera giao thông khi số lượng đang tăng lên nhanh chóng như hiện nay ở nhiều thành phố lớn, cao tốc và 4 CHƯƠNG 1.
GIỚI THIỆU ĐỀ TÀI ở cả nông thôn. – Giúp lực lượng chức năng phát hiện các tình huống bất thường trong video giao thông nói riêng và video nói chung. – Giúp lực lượng chức nặng phát hiện kịp thời các tình huống tai nạn, cứu được nhiều người hơn giảm thiệt hại về người. Ý nghĩa khoa học : – Giải quyết vấn đề kết hợp hình ảnh và chuyển động một cách hợp lý trong phát hiện bất thường cho video.
– Tìm hiểu, ứng dụng và cải thiện mạng mã hoá tự động biến thể nhiều điều kiện vào việc sinh khung ảnh tiếp theo trong tương lai và phát hiện bất thường. – Chỉ ra điểm mạnh và yếu của phương pháp hiện tại và đưa ra thêm nhiều gợi ý để cải tiến cho các nghiên cứu tiếp theo.4 Kết quả đạt được Trong nghiên cứu này, chung tôi xây dựng thành công mô hình từ việc kế thừa mạng sinh từ nghiên cứu [1] để tối ưu hoá ràng buộc giữa việc tạo sinh hình ảnh và một số điều kiện liên quan mật thiết với nó trên không gian như luồng quang và mặt nạ tiền cảnh. Đảm bảo cân bằng được tính quá khớp vừa đủ để phát hiện bất thường trên tập dữ liệu kiểm tra và vẫn duy trì tính tổng quát hoá tốt để dự đoán được các hình ảnh bình thường của tập kiểm tra. Kết quả đạt được với độ cải thiện AUC trên Ped2, Avenue và Shanghaitech so với mô hình gốc và kết quả lần lượt là 99.
Bên cạnh đó bài luận cũng thử ứng dụng vào phát hiện tai nạn trên UCF-Crime và một bộ dư liệu tự chuẩn bị trên đường phố Việt Nam cho thấy có thể có khả năng để giải quyết vấn đề phát hiện tại nạn và bất thường tự động trong tương lai.5 Cấu trúc của luận văn Cấu trúc của luận văn được tổ chức như sau: 5 CHƯƠNG 1. GIỚI THIỆU ĐỀ TÀI – Chương 1 - Giới thiệu đề tài: nhằm giới thiệu tổng quan về bài toán phát hiện tai nạn và bất thường cho video giao thông các khó khăn và hướng giải quyết. – Chương 2 - Cơ sở lý thuyết: trình bày những lý thuyết liên quan được sử dụng trong bài nghiên cứu. – Chương 3 - Tổng quan tình hình nghiên cứu: bao gồm các công trình nghiên cứu liên quan đến bài toán phát hiện bất thường trong video, các hướng tiếp cận, phân tích các ưu và nhược điểm để có thể khắc phục và tăng cường trong phương pháp đề xuất.
– Chương 4 - Phương pháp nghiên cứu: trình bày cụ thể mô hình đề xuất và cách thức mô hình hoạt động. – Chương 5 - Kết quả thực nghiệm: phân tích đặc điểm của các bộ dữ liệu được sử dụng trong bài toán, các phương pháp đánh giá, kết quả đánh giá của mô hình đề xuất và so sánh với công trình gần đây. – Chương 6 - Kết luận: nêu ra các kết luận đúc kết được trong quá trình nghiên cứu và hướng phát triển tiếp theo trong tương lai. 6 Chương 2 Cơ sở lý thuyết Sau đây là trình bài ngắn gọn các lý thuyết được sử dụng trong luận văn, trong mỗi phần bao gồm các phần trình bài về lý thuyết và phần tổng kết nhận xét tính ứng dụng các lý thuyết đó cho đề tài ở cuối.1 Bất thường và phát hiện bất thường 2.1 Bất thường Nhiều nỗ lực đã được thực hiện trong cộng đồng thống kê và khoa học máy tính để xác định sự bất thường.
Những thứ phổ biến nhất bao gồm: Một ngoại lệ là một quan sát sai lệch quá nhiều so với các quan sát khác để làm dấy lên nghi ngờ rằng nó được tạo ra bởi một cơ chế khác. Dị thường là các trường hợp hoặc tập hợp các mẫu dữ liệu rất hiếm khi xảy ra trong tập dữ liệu và có các tính năng khác biệt đáng kể so với hầu hết dữ liệu. Ngoại lệ là một quan sát (hoặc một tập hợp con các quan sát) dường như không phù hợp với phần còn lại của tập dữ liệu đó. Điểm dị thường là một điểm hoặc tập hợp các điểm tương đối xa với các điểm khác trong không gian đa chiều của các miền phân bố.
Dị thường là các mẫu trong dữ liệu không tuân theo một khái niệm được xác định rõ ràng về hành vi bình thường. Gọi T là các quan sát từ phân phối Gaussian đơn biến và O là một điểm từ T. Khi đó, Z-score của O lớn hơn ngưỡng 7 CHƯƠNG 2. CƠ SỞ LÝ THUYẾT Hình 2.1: Minh hoạ các điểm bất thường màu cam nằm xa các cụm phân bố chính.
được chọn trước nếu và chỉ O là một ngoại lệ. Tính năng phát hiện bất thường có thể áp dụng trong một số lượng rất lớn và nhiều lĩnh vực khác nhau và là một phân khu quan trọng của học máy không được giám sát. Vì vậy, nó có các ứng dụng trong phát hiện xâm nhập an ninh mạng, phát hiện gian lận, phát hiện lỗi, giám sát tình trạng hệ thống, phát hiện sự kiện trong mạng cảm biến, phát hiện nhiễu loạn hệ sinh thái, phát hiện lỗi trong hình ảnh bằng thị giác máy, chẩn đoán y tế và thực thi pháp luật. Nó thường được sử dụng trong tiền xử lý để loại bỏ dữ liệu bất thường khỏi tập dữ liệu.
Điều này được thực hiện bởi vì cần: Thống kê dữ liệu như giá trị trung bình và độ lệch chuẩn sẽ chính xác hơn sau khi loại bỏ các điểm bất thường và việc hiển thị dữ liệu cũng có thể được cải thiện. Trong học tập có giám sát, việc xóa dữ liệu bất thường khỏi tập dữ liệu thường dẫn đến sự gia tăng đáng kể về mặt thống kê về độ chính xác.