PDF《第1章》

10 非常巨大,整体市场饱和度高. (2) 需求分析 一方面,流量和用户的激增,给现有网络带来了巨大的压力.如何保持现有网 络的稳定高效运转,成为各大运营商首先需要考虑的问题.而大数据技术能解决这 一问题,例如中兴通讯提出的 基于大数据技术的电信系统反馈环理念 . 另一方面,运营商面临着从业务提供者到管道提供者的转变.如何在这个转变 过程中,高效、合理地优化网络建设,同时能够发现潜在的信息应用需求并转变为 商业价值,也需要大数据技术的支撑. 4. 金融行业 (1) 业务特征 金融业有着数据池积累巨大的天然优势,但同时如何挖掘数据价值也成为挑 战.另外,金融业是高风险行业,有着其他行业不可比拟的安全性要求. (2) 需求分析 从大量数据中挖掘有价值的信息,并将其作为判断的依据,及时准确地进行金 融智能决策,是金融业迫切的需求. 金融业对安全的苛刻要求,成为大数据技术的挑战. 5. 交通行业 (1) 业务特征 1) 数据量大,数据类型多.随着车辆保有量的不断攀升,交通综合监控呈多 维、立体化趋势,数据分析面对的是文本、语音、图片、视频等多种类型数据的飞 速增长. 2) 实时性要求高.交通系统受很多因素的影响,时间、天气、路况、突发事件 等都让交通状况产生突然并且累积性的变化. (2) 需求分析 面对多种类型的海量数据加上极高的实时性要求,大数据技术需要在存储、计算、分析、处理等方面表现出超强的性能,才能满足对瞬息万变的交通状况进行及 时调度和快速响应的要求. 第1章大数据概述

11 1.4? 大数据的技术发展趋势 随着大数据技术的发展,IT相关系统也正发生着变革.系统的硬件设计、软件 设计,甚至商业部署都开始以数据为中心.也正是在这些实践和应用中,发现痛点 并解决痛点的过程和探索,反过来推动大数据技术的发展. 从技术层面讲,以下几个方面将是大数据的热点. (1) 硬件对架构的冲击 大数据对性能的要求非常高,而硬件的变化对性能会产生直接而巨大的影响, 因此当硬件提升时,会推动大数据系统架构的变革,以达到充分利用硬件、大幅度 提升性能的目的. 例如,下一代非易失内存(NVRAM) 的性能接近DRAM(最短延迟为DRAM的2~3倍),这将对文件系统为主的存储架构产生巨大影响;

同时,远程直接数据存取 (RDMA)可将NVRAM连接成PB级(或更大)资源池,实现更简洁的内存计算,这将促 进内存计算发展. 而针对数据的不同场景的专用硬件,将直接改变对应的系统架构.例如,对于 很少使用的大容量数据,可以开发高密度/低IO/低功耗的低成本存储. 当大数据系统部署在云/虚拟化系统上........