大数据技术是实现智慧水利的关键技术。首先,大数据技术可以帮助完成智慧水利数字底板所需的海量数据存储、管理和处理,包括采集现场数据、传输数据、筛选数据和清洗数据等工作,从而构建工程所需的L2-L3级数据底板。其次,大数据技术可以为智慧水利数字孪生提供强大的数学分析和建模能力,支持从大量的历史数据中提取规律和趋势,通过机器学习和深度学习算法快速识别隐藏在数据背后的关联性和规律性,预测工程安全、进度等相关的行为和演化趋势,进而为数字孪生工程的建监管提供更加高效、准确、智能的手段。最后,大数据技术能够为智慧水利数字孪生工程的应用提供有力保障,通过对数字孪生模型的实时、异地监控和维护,及时发现施工现场的问题、预警风险,防止建设过程中的故障、安全事故等对施工造成不利影响。
星环科技是国内较早专注于大数据基础软件研发的公司,围绕数据的集成、存储、治理、建模、分析、挖掘和流通等数据全生命周期提供基础软件及服务,已形成大数据与云基础平台、分布式关系型数据库、数据开发与智能分析工具的软件产品矩阵,在分布式技术、SQL编译技术、数据库技术、多模型数据的统一处理技术、基于容器的数据云技术以及大数据开发与智能分析技术等领域积累了31项核心技术,致力于解决采用传统集中式软件架构的信息系统所面临的大数据处理难题,为企业提供处理海量规模、快速流转和多样化类型数据的大数据处理技术,帮助用户发掘数据价值。
星环科技依托完善的数据产品体系,整合水利工程建设相关数据,形成资源池,构建数据汇集、治理、分析、服务、建模相关功能,全面支撑智慧水利数据工程建设。
1. 水利数据汇集
依托星环科技大数据基础平台TDH建设一体化多模数据计算存储开发平台,提供:(1)统一基础资源管理,实现计算、存储、网络等资源的统一调度,支持夸资源混合部署;(2)多源异构数据存储:对多种存储模型进行统一管理,有效保障数据一致性、数据高可用,降低企业运维成本;(3)统一数据处理:针对不同存储模式,使用统一的计算引擎,便捷的实现跨库关联;(4)全场景技术支撑:遵从统一的标准SQL规范,兼容完整方言,平滑迁移成本低。
2. 水利数据治理
依循决策层-管理层-业务层的组织架构,逐级推进水利数据治理工作,调研、梳理业务流程,盘点水利数据,收集字典与规范。依托星环科技大数据开发工具TDS提供的数据开发调试工具、元数据与血缘管理工具、数据质量与标准管理工具,可以实现定义数据标准与数据模型,制定数据质量规则;跨数据域的数据整合拉通,形成单一数据视图,进行数据质量检核,并对数据质量实施监控和预警;为业务部门提供生产经营指标分析服务,提供数据快速检索与数据资产全景可视服务。
3. 水利数据分析
星环科技智能分析工具Sophon作为数据要素的智能底座,可一站式实现从数据到智能的全链路流程,实现智慧水利数据的分析建模。能够快速打通“多模型”样本的管理和标注、“多模态”的机器学习建模、模型上架服务、模型运维以及持续提升等智能分析全生命周期的各个环节,从模型和数据双驱动的角度出发,为智慧水利中大数据的“智能化”落地提供支撑。
通过深度融合智慧水利建设过程中的物联网数据与业务数据,结合数据挖掘和智能查询技术,构建了统一的数据底板、实现数据一屏展示、一键查询,提升系统的易用性、便捷性。解决了传统水利工程管理过程中存在的数据量多、查询不便、异常数据预警不及时、数据可视化程度不够等问题。