1、流式计算平台基于Storm，采用在线开发平台和拓扑开发框架，支持实时数据流canal监控的延迟统计和报警而离线计算则基于Hadoop，包括原始数据接入事实与衍生事实的存储，以及数据仓库和数据挖掘应用场景的部署架构数据管理体系是平台的重要组成部分，包括自研的调配系统数据质量监控和资源管理，确保数据的准确性和成本。...