宝马娱乐平台

【精品】大数据分析处理概述及案例分析PPT课件

来源:首页 | 时间:2019-01-22

  【精品】大数据分析处理概述及案例分析PPT课件_互联网_IT/计算机_专业资料。大数据分析处理概述 大数据分析处理理念 智能 决策 深度 分析 数据 加工 数据 采集 传输 存储 知识 归纳总结形成知识资产 电子商务 生产制造 形成商品上架的时机和策 略分析以及个性化

  大数据分析处理概述 大数据分析处理理念 智能 决策 深度 分析 数据 加工 数据 采集 传输 存储 知识 归纳总结形成知识资产 电子商务 生产制造 形成商品上架的时机和策 略分析以及个性化的用户 推荐系统 形成商品排行榜、好评度, 用户等级、积分等信息 形成如市场走势、成本控制、 供应链策略等分析报告 形成比如合格率、损耗、占 有率、单位成本等生产经营 指标信息 信息 建模计算形成有价值的信息 数据 采集、清理并存储原始数据集 按时间、地域、种类等维 度对数据进行清理和存储 数据清理、融合和存储 企业经营活动以及消费者行为等产 生的海量数据 大量的商品、用户以及在 线消费行为数据 生产全流 程数据 供应商相 关数据 客户、订 单、市场 数据 大数据分析处理 从数据到决策支撑 大数据分析处理应用 大数据分析处理示例 大数据分析处理示例 大数据分析处理示例 大数据分析处理前景 数据来源: 麦肯锡 全球研究所 未来十年全球大数据的产业规模将会至少以万亿美元来进行衡量! 未来十年中国大数据的产业规模将超过千亿美元! 未来十年中国能源行业相关的大数据分析处理将带来400亿人民币的收入! ? 大数据分析处理技术思路 IT系统的数据类型及特 性 数据鲜活性:毫秒 》秒-分钟 》小时-天 指数级变化 访问吞吐量:几万IOPS 》几百万IOPS 》几百IOPS 存储总容量:GB-TB 》TB-PB 》PB-EB 交易型 数据 流式业务和用户数据 10 归档型数据 大数据分析处理的核心 挑战-数据库云化 流式 数据 交易 数据 归档 数据 大数据压力下的关系型数据库: ? 性能瓶颈 ? 延展难度大 ? 访问模型单一 ? 单点失效 ? 全集中架构 数据库云化的实现 关系型数据库集群 分布式数据库 流式 活跃 数据 交易 数据 归档 数据 分布式文件/对象存储 大数据分析处理技术分类 大数据分析处理技术流程 ? 对多种类、多 来源的全业务 流程数据进行 多样化的采集 ? 通过恰当的存 储技术,在满 足一致性要求 的基础上,安 ? 通过数据切片、 ETL、数据分类 聚合、数据索 引标记等技术 ? 对海量数据分 析、探索和挖 掘,探寻数据 的模式及特征, ? 通过对分析结 果概念化、系 统化,将数据 和信息转化成 获取,并进行 层级化的抽取、 清洗、过滤等 数据预处理 全、可靠、快 速、有效地对 多类型、多格 式、多特性的 对数据进行处 理,并提供统 一高效的查询 访问服务 寻找数据背后 的信息变化和 价值 知识,并多维 度多样化立体 地向不同受众 进行展现。 数据进行存储 整合/聚集/表 达 数据采集 数据存储 分析/建模 结果展示 规模性 实时性 异构性 共享协同 安全隐私 大数据分析处理技术关键 ? 跨域、异构、可信、独立的数据采集 ? ? ? ? ? ? 支持数据采集点的地理分布和网络跨域; 支持不同业务系统不同数据类型的采集; 近实时的数据抓取; 能够检测到数据的前后状态变化; 无需对原业务系统进行更改; 不影响业务系统的正常运行。 ? 高性能、高可靠、多模式、海量弹性的数据存储 采集 分析 存储 展现 Raw Data ? Index&Parameter Decision-Making 从局部到全景、从建模计算到决策支撑的层级化数据分析 ? 多维度、立体、动态的结果展现 云计算技术帮助解决三大问题


[!--vurl--]

宝马娱乐平台相关

    无相关信息