深度报告-20250116-哪吒智慧科技_上海_-哪吒科技_SelectDB实时数仓在智慧港口中的应用实践_30页_9mb
报告摘要
哪吒科技的数据平台负责人邓宇超分享了SelectDB实时数仓在智慧港口应用的实践经验。首先,他回顾了哪吒科技的数仓发展历程,公司客户覆盖中国各地及海外,2022-2023年新增超80家客户,涉及智慧港口全生命周期解决方案。数仓从第一阶段的单一场景数据整合,演进到第二阶段的实时数仓V10和V20架构,强调高可靠性和性能提升。
SelectDB被选中主要因其秒级数据导入能力(支持多种导入方式如StreamLoad)、高并发查询性能(如点查、大宽表查询和多表Join优化)、以及弹性架构(计算隔离和存算分离)。实时数仓架构包括ODS层(实时数据采集)、DWD层(数据归一化)、DWS层(指标预聚合),并应用于日志分析、堆场机械效率统计等场景。挑战如数据复杂性和查询性能,通过物化视图和分区优化有效解决,查询响应时间从分钟级降至秒级。
在智慧港口实战中,SelectDB用于钢材作业量统计、码头集疏运分析等,提升数据实时性和决策效率。指标计算案例显示,通过SQL代码实现快速查询;物化视图实践显著提升了维度聚合查询性能,平均响应时间减少约10倍,并降低CPU使用率。
收益方面,SelectDB优化了成本结构:存储压缩比提升70%,减少运维费用;业务益处包括查询延迟从1-2天降至5秒内,即席分析响应速度提高80%,支持7*24小时技术支持和快速问题修复,保障港口运营稳定。
未来展望聚焦SelectDB存算分离、多表物化视图增强及集群管理工具应用,以进一步提升效率和运维可靠性。总结,SelectDB实时数仓为哪吒科技注入了强大的数据处理能力,推动智慧港口数字化转型。
展开完整摘要
试读结束,高清完整版pdf/doc/ppt,请点下载