大数据在水电工程行业的应用v1.1课件.ppt

? CCIDConsulting 2009 实时数据分析-客户360分析 * 实时数据分析-运营状态监测 利用大数据探索实现大坝、发电等基础设施（设备）运行状态信息库的充实和监测管理的准确。 水电行业需要储备规模巨大的状态库，部分国家正在将大数据技术用于基础设施运营状态监控，其收集到的数据除了解基础设施的运行状态提高运维效率以外，还可用于风险预警、应急指挥等管理。物联网技术的发展使人与物的沟通成为可能，物联网对物体状态的实时反馈满足了大数据的全数据、高频采样特点，只有大数据技术才能对这些数据进行分析。 中国电子信息产业发展研究院 云平台是基础设施架构 云平台如何整合既有BIM、GIS系统？ 大数据是核心资产 如何获取多种类、可靠、标准化储存的信息数据？ 分析、挖掘是重要手段 数学理论、方法是基础 发现、预测是最终目标 新知识、新方法 研发运管模式是支撑 水电工程领域如何集成研发和应用？ 大数据应用研究方向 华为大数据一体化平台 京东大数据平台 目录 * 大数据概述 项目背景 项目目标与内容 大数据应用场景 项目流程与方法 1 2 3 4 5 项目总体咨询流程 上级信息化战略 贵阳院业务战略 企业内部访谈和调研 需求分析 行业调研 大数据技术发展趋势 大数据技术 框架设计 应用场景设计 可行性研究 完善 启发 参考 大数据应用最佳实践 启发 参考 谢谢！ 2015年8月 赛迪顾问股份有限公司 中国电建贵阳勘测设计研究院有限公司大数据在水电工程行业的应用研究 目录 * 大数据概述 项目背景 项目目标与内容 大数据应用场景 项目流程与方法 1 2 3 4 5 大数据概念的提出 最早提出“大数据”时代已经到来的机构是全球知名咨询公司麦肯锡。 2011年，麦肯锡出版了研究报告《大数据：创新、竞争和生产力的下一个新领域》，产学研界对“大数据”的关注达到历史性新高度。 麦肯锡在研究报告中指出，数据已经渗透到每一个行业和业务职能领域，逐渐成为重要的生产因素；而人们对于海量数据的运用将预示着新一波生产率增长和消费者盈余浪潮的到来。 互联网、移动互联网、物联网、云计算的快速兴起以及移动智能终端的快速普及，正使得当前人类社会的数据增长比以往任何一个时期都要快。 越来越大、越来越快、越来越复杂，数据特性的演变和发展，催生了一个全新的概念——大数据。 IBM定义大数据的3 个特征： 数量、种类和速度 IDC定义大数据的四大特征(4V)： 海量的数据规模(Volume) 多样的数据类型(Variety) 快速的数据流转和动态的数据体系(Velocity) 巨大的数据价值和低密度(Value) Mckinsey定义： 量极大，无法用常规数据软件进行获取、存储、 管理和分析的数据集 1P=106G 1Z=1012G 大数据的定义 结构化数据：存在于关系数据库中，多年来一直主导着IT应用； 半结构化数据：包括电子邮件、文字处理文件以及大量发布在网络上的新闻等，以内容为基础，这也是谷歌和百度存在的理由； 非结构化数据：广泛存在于社交网络、物联网、电子商务之中。伴随着社交网络、移动计算和传感器等新技术不断产生，有报告称，超过80%的数据属于非结构化数据。 更广的信息范围 新的数据与分析类型 实时信息 来自新技术的数据 非传统形式的媒体 大数据量 社交媒体数据 最新流行词 * 2012年IBM对95个国家中26个行业的1144名专业人员调查结果 大数据的范围 描述 技术 海量数据存储技术 分布式文件系统 实时数据处理技术 Streaming Data 流计算引擎 数据分析技术 Text Analytics Engine Visual Data Modeling 自然语言处理、文本情感分析、机器学习、聚类关联、数据模型 数据高速传输技术 服务器/存储间高速通信 Infini Band Hadoop，x86/MPP Map Reduce 搜索技术 文本检索、智能搜索、实时搜索 Enterprise Search 大数据涉及的关键技术 能源与公用事业 智能电表分析 资产管理 零售 全渠道营销 实时促销 司法执法 多点监测 网络安全检测 交通运输 物流优化 缓解交通拥堵 金融服务业 欺诈检测 360°客户视图 数字媒体 实时广告定位 属性分析 健康与生命科学 病历分析 疾病监测 通讯 客户资料货币化 网络分析优化 大数据已应用于各行各业 目录 * 大数据概述 项目背景 项目目标与内容 大数据应用场景 项目流程与方法 1 2 3 4 5 全球进入大数据时代，数据呈现爆炸式增长趋势 随着互联网/移动互联网、数码设备、物联网/传感器等技术的发展，全球数据生产在高速增长 信息处理技术的发展使数据价值能