供热大数据平台

供热大数据平台，主要是梳理现有信息系统、已有数据以及业务特点等现状，设计大数据结构模型，形成多维合一的数据标准，逐步形成供热企业特有的数据生态体系。明确数据的内容和格式要求，明确数据责任人，统筹整个企业的数据资源，在系统中形成企业主数据、元数据及相关配置数据。建设统一大数据中心，对数据“纵向管理、横向贯通”，实现数据融合共享，实现数据价值流动。推进各系统之间的数据融合，实现数据统一管理，为供热企业数字化系统的长期持续健康发展提供保障。

本系统采用包含流处理能力的下一代批处理框架Apache Spark，主要侧重于通过完善的内存计算和处理优化机制加快批处理工作负载的运行速度。

可创建代表所需执行的全部操作，需要操作的数据，以及操作和数据之间关系的处理协调器，借此处理器可以对任务进行更智能的协调。使用RDD的模型来处理数据，并通过RDD在无需将每个操作的结果写回磁盘的前提下实现容错。