工业大数据平台

构建端到端数据管道,日处理3000万+数据点,用于工厂OEE/良率分析。

首席数据工程师
2022年1月 - 至今
HadoopKafkaSparkSpring Cloud Alibaba

Overview

一个综合性的工业物联网平台,旨在摄取、处理和可视化来自500多个工厂传感器的实时生产数据。该系统为工厂管理者提供OEE(整体设备效率)的即时可见性和预测性维护警报。

Challenges

  • 在无数据丢失的情况下处理高速数据摄取(3000万+点/天)。
  • 统一来自旧PLC系统的不同数据格式。
  • 降低实时仪表盘的查询延迟。

Results

  • 将数据处理延迟从15分钟降低到3秒以内。
  • 识别瓶颈,使生产线效率提高了12%。
  • 统一了3个工厂站点的数据治理。