探秘Inventec大数据平台构建与演变

发布者:肖燃发布时间:2025-05-20浏览次数:10

主题:探秘Inventec大数据平台构建与演变

主讲人:闫硕

主讲时间:2025年5月14日(星期三) 15:00 – 16:00

主讲人简介:闫硕,软件架构师,Inventec英业达大数据平台的主要设计、负责人之一,经历了大数据平台发展的各个阶段,对各层面技术细节有比较深入的了解。

主讲内容:

基于多技术栈的数据全生命周期管理模式

大数据平台的数据管理体系在数据存储层针对结构化数据采用Greenplum和PostgreSQL集群分别存储OLAP全量历史数据(5-10 年,10-50T)和OLTP近期生产数据(<3 个月,1-2T),并通过KeepAlived、Patroni、Etcd等技术实现数据的高可用和备份;数据处理服务层分为实时和定时处理过程,实时处理借助Flink、Kettle、Kafka、Debezium等工具实现数据的秒级快速整理、解析和结构;定时处理通过Dkron调度Kettle、Python脚本等任务进行数据库同步、结转和整理;数据查询与可视化方面借助DAVI Web、DAVI Query提供交互式查询,并结合Grafana、Tableau生成涵盖效率管理、品质管理、工单管理等多维度的生产看板和分析报表,便于生产状态查询、历史分析和改善。

数据上云、AI应用及多元场景案例展示

英业达大数据平台在数据上云与AI能力应用层面的创新实践。面对大数据领域存储计算分离、计算无服务器化的趋势,平台将热数据与预处理数据逐步迁移至云端S3存储,利用其低成本、高可靠性优势降低本地存储压力,通过Azure、AWS等云平台实现全球厂区数据聚合分析。

AI能力集成方面,平台基于Geniespace构建生产知识图谱,结合OpenAI的自然语言处理技术,开发了RCCA推荐系统,可根据历史故障数据自动匹配解决方案;通过Qwen大语言模型分析多厂区数据血缘关系,实现生产流程异常的智能预警与根因定位。典型应用场景:利用计算机视觉技术解析AOI图片,结合深度学习模型降低误判率;通过实时数据流分析预测设备稼动率,提前触发预防性维护。这些实践将AI深度融入生产全流程,推动决策模式从“经验驱动”向 “数据智能驱动”转型,助力企业数字化升级。

讲座现场


欢迎光临天津财经大学珠江学院!
您是访问本网站的第位访客
  • 官方微信
  • 官方微博