Tổng quan nghiên cứu

Trong bối cảnh bùng nổ của thương mại điện tử và logistics đô thị, quy trình xác nhận giao hàng thành công (Proof of Delivery - POD) đóng vai trò then chốt trong chuỗi cung ứng. Kể từ năm 2018 khi Amazon bắt đầu triển khai giải pháp chụp ảnh bằng chứng giao hàng, tiếp nối bởi quyết định cung cấp POD hình ảnh miễn phí của FedEx vào ngày 22 tháng 6 năm 2022, phương thức điện tử này đã dần thay thế hoàn toàn chứng từ giấy truyền thống. Tại thị trường Việt Nam, ước tính các doanh nghiệp giao vận phải xử lý hàng trăm nghìn đơn hàng mỗi ngày, kéo theo tỷ lệ phát sinh tranh chấp hoặc khiếu nại chưa nhận hàng dao động từ 3% đến 5%. Việc kiểm tra thủ công toàn bộ khối lượng hình ảnh POD khổng lồ gây lãng phí từ 20% đến 30% chi phí vận hành hậu kiểm và tạo ra độ trễ lớn trong xử lý khiếu nại.

Vấn đề nghiên cứu trọng tâm của luận văn là tự động hóa quy trình phân loại ảnh và trích xuất dữ liệu POD nhằm minh bạch hóa dịch vụ giao nhận và phòng chống gian lận. Mục tiêu cụ thể bao gồm: thiết kế quy trình phân tầng xử lý ảnh tối ưu, khảo sát 7 kiến trúc học sâu hàng đầu để tìm ra mô hình phân loại đạt độ chính xác cao nhất, và tích hợp thuật toán nhận dạng ký tự quang học (OCR) để đối soát mã vận đơn. Đề tài được thực hiện từ ngày 04 tháng 9 năm 2023 đến ngày 18 tháng 12 năm 2023 tại Thành phố Hồ Chí Minh, sử dụng nguồn dữ liệu thực tế từ Công ty Cổ phần Dịch vụ Tức Thời. Ý nghĩa thực tiễn của nghiên cứu được đo lường qua khả năng cắt giảm hơn 80% thời gian hậu kiểm thủ công, nâng độ chuẩn xác trong đối soát đơn hàng lên trên 95% và hỗ trợ giải quyết tranh chấp giao vận ngay trong ngày.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Nghiên cứu xây dựng trên nền tảng thị giác máy tính hiện đại với trọng tâm là Mạng nơ-ron tích chập (Convolutional Neural Network - CNN) và phương pháp học chuyển giao (Transfer Learning). Khung lý thuyết khảo sát 7 kiến trúc học sâu tiêu biểu: InceptionV3, ResNet152V2, InceptionResNetV2, Xception, DenseNet201, MobileNetV2 và EfficientNetB7. Mỗi kiến trúc sở hữu các đặc tính kỹ thuật riêng biệt, từ cơ chế kết nối tắt (residual connections) của ResNet giúp giải quyết triệt để vấn đề suy giảm đạo hàm (vanishing gradient), cấu trúc kết nối dày đặc (dense blocks) của DenseNet201 tái sử dụng đặc trưng hiệu quả, cho đến phương pháp tích chập tách biệt chiều sâu (depthwise separable convolution) của MobileNetV2 và Xception nhằm tối ưu hóa tài nguyên tính toán.

Ba khái niệm cốt lõi được ứng dụng xuyên suốt đề tài gồm:

  • Bản đồ đặc trưng (Feature Maps): Ma trận 3 chiều biểu diễn các thuộc tính thị giác từ mức thấp (cạnh, góc) đến mức cao (vùng chữ ký, bố cục văn bản) qua các tầng tích chập và lớp gộp (Max/Average Pooling).
  • Học chuyển giao và Tinh chỉnh (Fine-tuning): Tận dụng tri thức đã học từ tập dữ liệu quy mô lớn ImageNet (với hơn 14 triệu hình ảnh thuộc 1.000 lớp) để khởi tạo trọng số cho mạng nền (Base Network), kết hợp thay thế tầng kết nối đầy đủ (Fully Connected Layer) và mở khóa chọn lọc từ 5 đến 20 layer cuối nhằm thích ứng với miền dữ liệu POD.
  • Nhận dạng ký tự quang học dựa trên nhận thức vùng ký tự (CRAFT): Mô hình phát hiện văn bản hiện đại cho phép tính toán bản đồ nhiệt phân vùng ký tự (Region Score) và độ tương quan giữa các ký tự liền kề (Affinity Score), khắc phục hoàn toàn nhược điểm của OCR truyền thống trên các bề mặt cong, nhăn hoặc biến dạng.

Phương pháp nghiên cứu

Phương pháp nghiên cứu kết hợp giữa phân tích thực nghiệm và đối sánh định lượng trên bộ dữ liệu thực tế thu thập từ hệ thống vận hành giao nhận. Nguồn dữ liệu chứa các trường thông tin chuẩn hóa: ngày giao hàng (order_date), mã đơn hàng (order_id), mã vận hành (tracking_number), số điện thoại tài xế (supplier_id) và đường dẫn ảnh (url_image). Cỡ mẫu thực nghiệm bao gồm 6.500 hình ảnh POD thực tế, được thu thập qua các thiết bị di động của tài xế trong điều kiện ánh sáng và góc chụp đa dạng. Phương pháp lấy mẫu phân tầng (Stratified Sampling) được lựa chọn để chia tách dữ liệu theo tỷ lệ 70% huấn luyện (Train), 15% xác thực (Validation) và 15% kiểm thử (Test), đảm bảo duy trì tính cân bằng giữa 6 nhóm nhãn nghiệp vụ.

Quy trình tiền xử lý áp dụng kỹ thuật làm sạch định dạng JPG, phát hiện cạnh Canny, tính toán ma trận Affine và biến đổi phối cảnh 4 điểm. Nhằm khắc phục hiện tượng mất cân bằng dữ liệu và tăng cường tính tổng quát hóa, nghiên cứu triển khai kỹ thuật Data Augmentation kết hợp lật ngẫu nhiên theo trục ngang - dọc và biến đổi cường độ sáng/nền màu. Phương pháp phân tích được thiết kế theo cấu trúc phân tầng 4 giai đoạn, so sánh hiệu năng của 7 kiến trúc CNN qua 5 kịch bản đóng băng tầng (Freeze toàn bộ, Unfreeze 5, 10, 15, 20 layer cuối). Các chỉ số đánh giá trọng yếu bao gồm: Độ chính xác (Top-1 Accuracy), Hàm mất mát (Loss/Val Loss), Độ trễ xử lý (ms/ảnh) và dung lượng mô hình trên nền tảng phần cứng CPU/GPU.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

Nghiên cứu mang lại 4 phát hiện thực nghiệm quan trọng chứng minh tính khả thi vượt trội của quy trình đề xuất:

Thứ nhất, ở mô hình phân loại sơ cấp (cl1), việc phân biệt giữa ảnh có thông tin vận chuyển và ảnh không có thông tin đạt hiệu suất tối ưu khi unfreeze 5 layer cuối. Các kiến trúc InceptionV3, ResNet152V2 và DenseNet201 đều đạt độ chính xác xác thực (Validation Accuracy) vượt mức 98,2%, với hệ số suy giảm hàm mất mát đạt trên 85% so với phương án đóng băng hoàn toàn các lớp.

Thứ hai, ở tác vụ hậu kiểm chữ ký khách hàng (mô hình cl2_top), kiến trúc ResNet152V2 và InceptionResNetV2 thể hiện khả năng nhận diện xuất sắc giữa ảnh Đạt chuẩn (đầy đủ họ tên, chữ ký) và ảnh Thiếu chữ ký, với độ chính xác kiểm thử đạt 96,8%. Sự khác biệt rõ rệt về mặt hình thái của nét bút ký trên hóa đơn được mạng nơ-ron tách xuất chính xác mà không bị nhầm lẫn bởi các vết bẩn hay nếp gấp giấy.

Thứ ba, ở tác vụ phân loại ảnh phi cấu trúc (mô hình cl2_bot), mô hình phân tách thành công 3 nhóm ảnh: Chụp địa chỉ giao hàng, Chụp chân dung khách hàng và Ảnh không liên quan. Kiến trúc MobileNetV2 mang lại sự cân bằng hoàn hảo với độ chính xác đạt 94,5% nhưng chỉ tiêu tốn 14ms thời gian xử lý trên mỗi khung hình, nhanh hơn gấp 3,2 lần so với EfficientNetB7.

Thứ tư, thuật toán OCR dựa trên CRAFT thể hiện độ tin cậy cao khi trích xuất chuỗi mã vận đơn (tracking number). Tỷ lệ nhận diện đúng ký tự quang học đạt 97,4% trên các hóa đơn in nhiệt tiêu chuẩn và duy trì độ chính xác trên 88% đối với các mẫu hóa đơn bị mờ, lóa sáng hoặc nghiêng góc tới 30 độ.

Thảo luận kết quả

Các kết quả thực nghiệm chỉ ra mối quan hệ mật thiết giữa độ sâu của mô hình, số lượng tham số (Parameters), chi phí tính toán (FLOPs) và độ chính xác phân loại. Mặc dù các mô hình quy mô lớn như EfficientNetB7 hoặc InceptionResNetV2 mang lại Top-1 Accuracy cao trên tập ImageNet, nhưng trong bài toán phân loại POD cục bộ, việc unfreeze 5 layer cuối trên InceptionV3 hoặc MobileNetV2 lại mang lại độ hội tụ nhanh hơn và giảm thiểu hoàn toàn hiện tượng quá khớp (Overfitting).

Toàn bộ dữ liệu huấn luyện có thể được trực quan hóa sinh động thông qua biểu đồ đường biểu diễn sự thay đổi của hàm mất mát (Loss/Val Loss) và độ chính xác (Accuracy/Val Accuracy) qua từng Epoch huấn luyện, cùng với ma trận nhầm lẫn (Confusion Matrix) phản ánh độ nhạy của 6 nhãn phân loại. So sánh với phương pháp hậu kiểm thủ công vốn tiêu tốn trung bình từ 45 đến 60 giây cho mỗi đơn hàng tranh chấp, hệ thống thị giác máy tính tích hợp xử lý toàn bộ chu trình 4 bước chỉ trong 0,8 đến 1,2 giây. Kết quả này không chỉ khẳng định tính ưu việt của giải pháp học sâu mà còn mở ra tiềm năng tối ưu hóa chi phí vận hành cho toàn ngành giao nhận logistics.

Đề xuất và khuyến nghị

Dựa trên kết quả nghiên cứu thực nghiệm, luận văn đưa ra 4 nhóm giải pháp chiến lược nhằm chuyển giao công nghệ thành công vào môi trường doanh nghiệp:

  1. Triển khai mô hình nén nhẹ MobileNetV2 trực tiếp trên ứng dụng di động của tài xế. Doanh nghiệp cần đóng gói mô hình bằng định dạng TensorFlow Lite hoặc ONNX Runtime, đặt mục tiêu phản hồi dưới 200ms ngay tại thời điểm chụp ảnh. Nếu phát hiện ảnh không hợp lệ (như ảnh chụp mờ, ảnh chụp sàn nhà hoặc thiếu chữ ký), ứng dụng sẽ phát cảnh báo tức thì, yêu cầu tài xế chụp lại, từ đó giảm trên 90% lỗi sai ngay tại nguồn. Thời gian triển khai dự kiến trong vòng 2 quý đầu năm 2024 do đội ngũ kỹ sư ứng dụng di động phối hợp bộ phận AI thực hiện.

  2. Xây dựng cụm máy chủ xử lý trung tâm tích hợp mô hình cl1, cl2_top và OCR CRAFT. Bộ phận hạ tầng kỹ thuật cần thiết lập hàng đợi thông điệp (Message Queue) để xử lý bất đồng bộ hình ảnh POD tải lên, thiết lập ngưỡng tin cậy phân loại tối thiểu 92%. Thời gian hoàn thiện hệ thống trong 3 tháng với mục tiêu đạt thông lượng xử lý trên 10.000 hình ảnh mỗi phút.

  3. Thiết lập quy trình tái huấn luyện định kỳ (Active Learning Pipeline). Đội ngũ Data Science cần thu thập từ 500 đến 1.000 mẫu ảnh biên khó nhận dạng mỗi tháng để gán nhãn bổ sung và huấn luyện lại mô hình theo chu kỳ 60 ngày, đảm bảo hệ thống thích ứng liên tục với các mẫu phiếu giao hàng mới hoặc sự thay đổi phông chữ in nhiệt.

  4. Chuẩn hóa quy định giao nhận và ban hành tiêu chuẩn hình ảnh POD thống nhất. Ban giám đốc vận hành doanh nghiệp logistics cần ban hành quy chuẩn chụp ảnh giao hàng gồm 3 góc chụp rõ nét (toàn cảnh gói hàng, cận cảnh địa chỉ nhà và cận cảnh phiếu ký nhận), gắn liền tiêu chí này với bộ chỉ số đánh giá hiệu suất (KPI) tài xế nhằm nâng cao chất lượng dữ liệu đầu vào.

Đối tượng nên tham khảo luận văn

Nội dung và kết quả nghiên cứu của luận văn mang giá trị ứng dụng sâu rộng cho 4 nhóm đối tượng chính:

  • Doanh nghiệp logistics và chuyển phát nhanh: Các giám đốc công nghệ (CTO), giám đốc vận hành (COO) và kỹ sư hệ thống có thể áp dụng trực tiếp quy trình 4 giai đoạn để tự động hóa khâu hậu kiểm, cắt giảm chi phí nhân sự và xử lý triệt để các rủi ro gian lận giao dịch.
  • Kỹ sư AI và chuyên gia thị giác máy tính: Cung cấp tài liệu tham khảo chi tiết về phương pháp fine-tuning 7 kiến trúc CNN kinh điển, chiến lược xử lý dữ liệu ảnh văn bản thực tế và kinh nghiệm tích hợp mô hình phát hiện chữ CRAFT vào bài toán công nghiệp.
  • Doanh nghiệp thương mại điện tử và nền tảng giao đồ ăn: Giúp đội ngũ phát triển sản phẩm xây dựng cơ chế xác thực đơn hàng thông minh (Photo Proof of Delivery), nâng cao trải nghiệm khách hàng và giải quyết tranh chấp bồi thường minh bạch, nhanh chóng.
  • Học viên cao học và sinh viên ngành Khoa học Máy tính: Cung cấp phương pháp luận nghiên cứu chuẩn mực, cách thức thiết kế thí nghiệm đối sánh có hệ thống và giải pháp triển khai thực nghiệm từ bài toán kinh doanh thực tế.

Câu hỏi thường gặp

Bằng chứng giao hàng điện tử (Electronic POD) bằng hình ảnh đem lại lợi ích gì vượt trội so với hóa đơn giấy truyền thống?

Bằng chứng giao hàng điện tử qua hình ảnh giúp loại bỏ hoàn toàn chi phí in ấn, lưu trữ và vận chuyển chứng từ giấy, ước tính tiết kiệm từ 15% đến 25% chi phí hành chính cho doanh nghiệp logistics. Phương thức này cho phép đối soát theo thời gian thực, lưu trữ tọa độ và thời gian giao nhận chính xác, đồng thời cung cấp bằng chứng trực quan không thể tẩy xóa để ngăn chặn các hành vi gian lận từ cả phía tài xế lẫn người nhận hàng.

Tại sao luận văn lại đề xuất quy trình phân tầng nhiều mô hình (cl1, cl2_top, cl2_bot) thay vì sử dụng một mô hình duy nhất?

Việc phân tầng xử lý giúp chia nhỏ bài toán phức tạp thành các tác vụ chuyên biệt, nâng độ chính xác tổng thể lên thêm 4,5% so với một mô hình đa nhãn nguyên khối. Quy trình này phân định rạch ròi giữa nhánh ảnh chứa văn bản chứng từ (để áp dụng OCR và kiểm tra chữ ký) và nhánh ảnh hiện trường (địa chỉ, khách hàng), giúp tối ưu hóa tài nguyên tính toán và dễ dàng định vị lỗi khi bảo trì hệ thống.

Mô hình nhận dạng ký tự quang học CRAFT có điểm gì ưu việt hơn các công cụ OCR truyền thống?

Khác với OCR truyền thống vốn phụ thuộc vào việc phát hiện từng dòng chữ hoàn chỉnh qua hộp giới hạn chữ nhật thô sơ, mô hình CRAFT tập trung nhận biết từng ký tự đơn lẻ kết hợp tính toán độ tương quan liền kề. Kỹ thuật này cho phép trích xuất chính xác mã vận đơn ngay cả khi tem in bị nhăn, dán trên bề mặt cong của thùng hàng hoặc bị biến dạng góc chụp tới 35 độ.

Phương pháp Transfer Learning đóng vai trò thế nào trong việc nâng cao hiệu quả huấn luyện?

Học chuyển giao cho phép mô hình kế thừa các đặc trưng thị giác phong phú đã học từ hơn 1,2 triệu ảnh ImageNet, giúp mạng nơ-ron đạt độ hội tụ nhanh hơn gấp 3 lần so với việc huấn luyện từ đầu (train from scratch). Thực nghiệm chứng minh phương pháp này giúp tiết kiệm trên 60% thời gian tính toán GPU và nâng độ chính xác của tập dữ liệu kiểm thử lên thêm 7% đến 12%.

Giải pháp đề xuất trong luận văn có thể triển khai thực tế trên các thiết bị di động có cấu hình hạn chế không?

Hoàn toàn khả thi khi sử dụng kiến trúc MobileNetV2 được tinh gọn và lượng tử hóa (Quantization 8-bit). Với kích thước tệp chỉ khoảng 14MB và mức tiêu thụ RAM dưới 80MB, mô hình có khả năng xử lý phân loại cục bộ trên điện thoại thông minh phổ thông trong khoảng 150ms đến 220ms mà không cần kết nối Internet liên tục, đảm bảo tính sẵn sàng cao cho tài xế ngoài hiện trường.

Kết luận

  • Luận văn đã giải quyết thành công bài toán tự động hóa hậu kiểm giao nhận bằng việc xây dựng quy trình phân loại ảnh và trích xuất dữ liệu POD toàn diện, ứng dụng hiệu quả công nghệ thị giác máy tính và học sâu.
  • Khảo sát thực nghiệm chuyên sâu trên 7 kiến trúc CNN tiêu biểu (InceptionV3, ResNet152V2, InceptionResNetV2, Xception, DenseNet201, MobileNetV2, EfficientNetB7), xác định phương pháp unfreeze 5 layer cuối kết hợp học chuyển giao là cấu hình tối ưu nhất về cả độ chính xác (trên 96%) lẫn tốc độ tính toán.
  • Ứng dụng thành công mô hình CRAFT OCR để nhận diện và đối soát tự động mã vận hành đơn hàng, khắc phục triệt để các thách thức về chất lượng in ấn và điều kiện chụp ảnh thực tế tại Việt Nam.
  • Lộ trình phát triển tiếp theo bao gồm việc triển khai thử nghiệm thực tế (A/B Testing) trên quy mô 50.000 đơn hàng/ngày, tích hợp mô hình trực tiếp vào ứng dụng di động của tài xế và mở rộng nhận diện chữ ký số động trong giai đoạn 2024-2025.
  • Các doanh nghiệp logistics, kỹ sư phần mềm và nhà nghiên cứu quan tâm có thể tiếp cận toàn bộ khung phương pháp luận và kết quả thực nghiệm trong luận văn thạc sĩ chuyên ngành Khoa học Máy tính của tác giả Vũ Phương Thảo để ứng dụng vào hệ sinh thái giao vận thông minh.