Tổng quan nghiên cứu

Trong bối cảnh phát triển nhanh chóng của khoa học kỹ thuật, các công trình cầu dây văng ngày càng được xây dựng nhiều trên thế giới và tại Việt Nam. Theo ước tính, đến năm 2025, dung lượng dữ liệu toàn cầu sẽ tăng lên tới 175 Zettabytes, tạo ra thách thức lớn trong việc thu thập, lưu trữ và phân tích dữ liệu quan trắc cấu trúc công trình. Cầu dây văng, với vai trò quan trọng và chi phí xây dựng cao, đòi hỏi công tác duy tu, bảo dưỡng thường xuyên và kịp thời để đảm bảo an toàn và hiệu quả khai thác. Tuy nhiên, việc quản lý và xử lý dữ liệu quan trắc hiện nay còn nhiều khó khăn do thiếu chuyên gia và phần mềm chuyên dụng, đặc biệt khi phần lớn thiết bị và phần mềm do các công ty nước ngoài cung cấp, gây khó khăn trong việc can thiệp và khắc phục sự cố.

Luận văn tập trung nghiên cứu xây dựng hệ thống cảnh báo bất thường cho cầu dây văng dựa trên dữ liệu thô thu thập từ các cảm biến quan trắc cấu trúc công trình, ứng dụng công nghệ Big Data mã nguồn mở. Mục tiêu cụ thể gồm: phát triển Dashboard giám sát dữ liệu thời gian thực, thiết lập ngưỡng cảnh báo cho các thông số kỹ thuật như tốc độ gió, lực căng cáp, độ nghiêng tháp, dao động dầm và cáp; đồng thời gửi cảnh báo qua các kênh thông báo đa dạng như email, SMS, Slack. Phạm vi nghiên cứu tập trung vào cầu dây văng Phú Mỹ, TP. Hồ Chí Minh, với dữ liệu thu thập liên tục mỗi phút từ hệ thống cảm biến trong năm 2022. Nghiên cứu có ý nghĩa quan trọng trong việc nâng cao hiệu quả quản lý, vận hành và bảo trì cầu dây văng, giảm thiểu rủi ro và chi phí vận hành.

Cơ sở lý thuyết và phương pháp nghiên cứu

Khung lý thuyết áp dụng

Luận văn dựa trên hai khung lý thuyết chính: công nghệ Big Data và giám sát sức khỏe kết cấu (Structural Health Monitoring - SHM). Big Data được định nghĩa là tập hợp dữ liệu có kích thước lớn, tốc độ phát triển nhanh, khó xử lý bằng các công cụ truyền thống. Các công nghệ Big Data được phân thành bốn lĩnh vực: lưu trữ (InfluxDB, Hadoop), khai thác (Apache Spark), phân tích (Kafka, Spark Structured Streaming) và trực quan hóa (Grafana). SHM là phương pháp giám sát liên tục trạng thái kỹ thuật của công trình, thu thập dữ liệu từ cảm biến để phát hiện bất thường và dự báo sự cố.

Ba khái niệm chính được sử dụng gồm: dữ liệu chuỗi thời gian (Time-series Data) thể hiện các điểm dữ liệu được đánh dấu theo thời gian; mô hình kiến trúc phân lớp Big Data gồm các lớp thu thập, xử lý, lưu trữ và trực quan hóa dữ liệu; và phương pháp biến đổi nhanh Fourier (FFT) dùng để phân tích tần số dao động riêng của cáp dây văng.

Phương pháp nghiên cứu

Nghiên cứu sử dụng phương pháp kết hợp lý thuyết và thực nghiệm. Dữ liệu thu thập từ 16 cảm biến trên cầu dây văng Phú Mỹ, bao gồm cảm biến đo nghiêng, gia tốc, thời tiết, gió, được ghi lại dưới dạng file CSV mỗi phút với khoảng 3000 bản ghi mỗi file. Cỡ mẫu dữ liệu là toàn bộ dữ liệu thu thập trong năm 2022.

Phương pháp phân tích dữ liệu sử dụng kiến trúc Big Data phân lớp: dữ liệu được truyền tải liên tục qua nền tảng Kafka (publish-subscribe messaging) đảm bảo độ tin cậy và khả năng chịu lỗi cao; xử lý dữ liệu thời gian thực bằng Apache Spark Structured Streaming; lưu trữ dữ liệu chuỗi thời gian trong InfluxDB; trực quan hóa và cảnh báo qua Grafana. Việc lựa chọn các công nghệ này dựa trên ưu điểm về khả năng mở rộng, xử lý dữ liệu lớn, và chi phí thấp nhờ mã nguồn mở.

Quá trình nghiên cứu gồm các bước: thu thập dữ liệu từ cảm biến, truyền dữ liệu vào Kafka, xử lý và phân tích dữ liệu bằng Spark, lưu trữ kết quả trong InfluxDB, xây dựng Dashboard và thiết lập cảnh báo trên Grafana. Timeline nghiên cứu kéo dài trong năm 2022, với các giai đoạn thu thập, triển khai hệ thống, đánh giá kết quả và đề xuất giải pháp.

Kết quả nghiên cứu và thảo luận

Những phát hiện chính

  1. Hiệu quả thu thập và truyền dữ liệu: Hệ thống thu thập dữ liệu từ 16 cảm biến trên cầu Phú Mỹ với tần suất 1 phút/lần, mỗi file CSV chứa khoảng 3000 bản ghi, đảm bảo dữ liệu liên tục và đầy đủ. Dữ liệu được truyền tải qua Kafka với độ trễ thấp và khả năng chịu lỗi cao, không mất dữ liệu trong quá trình truyền.

  2. Xử lý và lưu trữ dữ liệu thời gian thực: Apache Spark Structured Streaming xử lý dữ liệu streaming hiệu quả, cho phép cập nhật bảng kết quả liên tục với ba chế độ (Complete, Append, Update). Dữ liệu sau xử lý được lưu trữ trong InfluxDB, một cơ sở dữ liệu chuỗi thời gian hàng đầu, hỗ trợ lưu trữ lâu dài và truy vấn nhanh. Tỷ lệ dữ liệu được xử lý thành công đạt trên 99%.

  3. Phân tích kỹ thuật và cảnh báo: Sử dụng phương pháp biến đổi nhanh Fourier (FFT), hệ thống xác định tần số dao động riêng của cáp dây văng, tính toán lực căng cáp dựa trên các thông số vật lý. Các ngưỡng cảnh báo được thiết lập cho các thông số: tốc độ gió, lực căng cáp, độ nghiêng đỉnh và chân tháp, dao động dầm và cáp. Hệ thống cảnh báo phân loại thành ba mức: bình thường, cảnh báo, nguy hiểm, với tỷ lệ cảnh báo chính xác trên 95% so với dữ liệu thực tế.

  4. Trực quan hóa và thông báo: Dashboard trên Grafana hiển thị đa dạng các biểu đồ về độ nghiêng, dao động, thời tiết và trạng thái thiết bị. Hệ thống gửi cảnh báo qua email, SMS và Slack khi các thông số vượt ngưỡng, giúp đơn vị vận hành kịp thời xử lý. Tỷ lệ cảnh báo đúng thời điểm đạt khoảng 90%, giảm thiểu cảnh báo giả.

Thảo luận kết quả

Kết quả cho thấy việc ứng dụng công nghệ Big Data mã nguồn mở trong giám sát cầu dây văng là khả thi và hiệu quả. Việc sử dụng Kafka đảm bảo truyền dữ liệu liên tục, Spark Structured Streaming xử lý dữ liệu thời gian thực với độ trễ thấp, InfluxDB lưu trữ dữ liệu chuỗi thời gian phù hợp với đặc thù dữ liệu quan trắc. So với các nghiên cứu quốc tế, hệ thống này có ưu điểm về chi phí thấp, khả năng mở rộng và dễ dàng tùy chỉnh.

Nguyên nhân thành công là do thiết kế kiến trúc phân lớp rõ ràng, lựa chọn công nghệ phù hợp với đặc điểm dữ liệu và yêu cầu vận hành. Việc áp dụng FFT giúp phân tích chính xác tần số dao động riêng, từ đó tính toán lực căng cáp và thiết lập ngưỡng cảnh báo hợp lý. So sánh với các hệ thống do nước ngoài cung cấp, hệ thống này cho phép can thiệp và tùy chỉnh linh hoạt hơn, phù hợp với điều kiện thực tế tại Việt Nam.

Dữ liệu có thể được trình bày qua các biểu đồ thời gian thực trên Dashboard, bảng tổng hợp các giá trị min, max, mean theo ngày, tuần, tháng, giúp người quản lý dễ dàng theo dõi và ra quyết định. Hệ thống cảnh báo đa kênh cũng nâng cao hiệu quả phản ứng nhanh với các sự cố tiềm ẩn.

Đề xuất và khuyến nghị

  1. Mở rộng hệ thống giám sát: Triển khai hệ thống cảnh báo bất thường cho các cầu dây văng khác trên toàn quốc, đặc biệt các công trình có nhịp dài trên 150m theo quy định của Bộ GTVT. Thời gian thực hiện trong 2 năm, chủ thể là các cơ quan quản lý công trình giao thông.

  2. Nâng cao năng lực vận hành: Đào tạo chuyên gia vận hành và bảo trì hệ thống Big Data, đảm bảo khả năng phân tích và xử lý dữ liệu tại chỗ, giảm phụ thuộc vào chuyên gia nước ngoài. Thời gian đào tạo 6 tháng, chủ thể là các đơn vị quản lý cầu và viện nghiên cứu.

  3. Phát triển phần mềm phân tích chuyên sâu: Tích hợp các thuật toán học máy để dự báo sự cố và tự động điều chỉnh ngưỡng cảnh báo dựa trên dữ liệu lịch sử, nâng cao độ chính xác và giảm cảnh báo giả. Thời gian phát triển 1 năm, chủ thể là các nhóm nghiên cứu công nghệ thông tin và kỹ thuật xây dựng.

  4. Tăng cường hạ tầng công nghệ: Đầu tư nâng cấp hạ tầng mạng và máy chủ để đảm bảo khả năng xử lý dữ liệu lớn, độ trễ thấp và độ tin cậy cao trong vận hành hệ thống. Thời gian thực hiện 1 năm, chủ thể là các đơn vị quản lý hạ tầng công nghệ thông tin.

Đối tượng nên tham khảo luận văn

  1. Các nhà quản lý công trình giao thông: Luận văn cung cấp giải pháp giám sát và cảnh báo bất thường giúp nâng cao hiệu quả quản lý, giảm thiểu rủi ro và chi phí bảo trì cầu dây văng.

  2. Chuyên gia kỹ thuật và vận hành cầu: Cung cấp kiến thức về ứng dụng Big Data, phân tích dữ liệu chuỗi thời gian và thiết lập cảnh báo kỹ thuật, hỗ trợ công tác vận hành và bảo trì.

  3. Nhà nghiên cứu công nghệ thông tin và kỹ thuật xây dựng: Tham khảo mô hình kiến trúc Big Data, phương pháp xử lý dữ liệu thời gian thực và ứng dụng FFT trong phân tích dao động kết cấu.

  4. Các đơn vị phát triển phần mềm và thiết bị giám sát: Hướng dẫn triển khai hệ thống tích hợp phần mềm mã nguồn mở, xây dựng Dashboard và hệ thống cảnh báo đa kênh phù hợp với đặc thù công trình cầu dây văng.

Câu hỏi thường gặp

  1. Hệ thống cảnh báo bất thường hoạt động như thế nào?
    Hệ thống thu thập dữ liệu từ cảm biến mỗi phút, truyền qua Kafka, xử lý bằng Spark Structured Streaming, lưu trữ trong InfluxDB và hiển thị trên Grafana. Khi các thông số vượt ngưỡng đã thiết lập, hệ thống tự động gửi cảnh báo qua email, SMS hoặc Slack, giúp kịp thời phát hiện sự cố.

  2. Tại sao chọn công nghệ mã nguồn mở cho hệ thống?
    Công nghệ mã nguồn mở như Kafka, Spark, InfluxDB và Grafana có ưu điểm chi phí thấp, khả năng mở rộng cao, dễ tùy chỉnh và cộng đồng hỗ trợ lớn, phù hợp với điều kiện thực tế và yêu cầu vận hành lâu dài của các công trình tại Việt Nam.

  3. Làm thế nào để xác định ngưỡng cảnh báo cho các thông số kỹ thuật?
    Ngưỡng cảnh báo được xác định dựa trên mô hình phân tích 3D của công trình, kết hợp với dữ liệu thực nghiệm và phân tích tần số dao động riêng bằng FFT, đảm bảo cảnh báo chính xác và phù hợp với điều kiện vận hành thực tế.

  4. Hệ thống có thể áp dụng cho các loại cầu khác không?
    Mô hình và kiến trúc hệ thống có thể điều chỉnh để áp dụng cho các loại cầu khác có hệ thống cảm biến tương tự, tuy nhiên cần hiệu chỉnh ngưỡng cảnh báo và phân tích đặc thù từng công trình.

  5. Làm sao để đảm bảo dữ liệu không bị mất trong quá trình truyền?
    Kafka sử dụng cơ chế lưu trữ và sao lưu dữ liệu trên các partition và replicas, đảm bảo dữ liệu được lưu trữ an toàn và có thể phục hồi khi có sự cố, giúp hệ thống chịu lỗi và không mất dữ liệu trong quá trình truyền tải.

Kết luận

  • Xây dựng thành công hệ thống cảnh báo bất thường cho cầu dây văng Phú Mỹ dựa trên dữ liệu thu thập từ 16 cảm biến, xử lý bằng công nghệ Big Data mã nguồn mở.
  • Hệ thống đảm bảo thu thập, truyền tải, xử lý và lưu trữ dữ liệu thời gian thực với độ tin cậy cao, hỗ trợ giám sát và cảnh báo chính xác các thông số kỹ thuật quan trọng.
  • Ứng dụng phương pháp biến đổi nhanh Fourier (FFT) giúp phân tích tần số dao động riêng và tính toán lực căng cáp hiệu quả.
  • Dashboard trực quan và hệ thống cảnh báo đa kênh giúp đơn vị vận hành kịp thời phát hiện và xử lý sự cố, nâng cao an toàn và giảm chi phí bảo trì.
  • Đề xuất mở rộng hệ thống, nâng cao năng lực vận hành và phát triển phần mềm phân tích chuyên sâu trong các giai đoạn tiếp theo nhằm hoàn thiện và ứng dụng rộng rãi.

Luận văn là tài liệu tham khảo quý giá cho các nhà quản lý, chuyên gia kỹ thuật, nhà nghiên cứu và đơn vị phát triển công nghệ trong lĩnh vực giám sát và bảo trì công trình cầu dây văng. Để tiếp tục phát triển, cần triển khai thử nghiệm mở rộng và tích hợp các thuật toán dự báo nâng cao nhằm tối ưu hóa hiệu quả vận hành.