PDF《第1章》

6 这是大数据在价值维度的两个特征.挖掘出大数据的有用价值并加以利用,是数据 拥有者的自然目标.但市场形势瞬息万变,因此,如何在海量的、多样化的、低价 值密度的数据中快速挖掘出其蕴含的有用价值,是大数据技术的使命. 虽然后续不断有人增加对 V 的理解,如veracity(真实和准确),强调真实而准 确的数据才能让对数据的管控和治理真正有意义;

如vitality(动态性),强调数据体 系的动态性等.这些对大数据的内涵都有一定的推动作用,但都不及开始的4V具 有广泛性. 1.2? 大数据的本质 所有技术的发展都是为社会进步服务的,大数据技术也不例外.但是,大数据 技术对社会生产的促进作用是变革性甚至是颠覆性的. 大数据商业应用第一人 Viktor Mayer-Sch?nberger在其著作《大数据时代》 中,前瞻性地指出,大数据正在变革我们的生活、工作和思维.大数据开启了一次 重大的时代转型,为我们带来了思维变革、商业变革和管理变革.其中最重要的三 个思维变革颠覆了千百年来人类的思维惯例,对人类的认知和与世界交流的方式提 出了全新的挑战. (1) 全样本 我们将使用更多的数据甚至是全部数据来进行分析,而不再采用随机样本.从 可能性角度,当前的技术能力已经可以支撑海量数据的处理;

从必要性角度,有时 候数据分析的目的就是要发现大量正常数据中的少数异常情况,例如跨境汇款中的 异常交易,这无法通过采样分析获得. (2) 概率化 我们将不再沉迷于精确性,而是允许劣质数据混杂其中.大数据时代不可能实 现精确,反之用概率来表示事物发展的大方向,混杂性变成了一种标准途径. (3) 相关性 我们将更关心相关关系,因果关系被放到次要的位置.在很多场景下, 是什 么 比 为什么 对决策的帮助更大,可以在快速变化的环境中帮助你先发一步. 第1章大数据概述

7 甚至,在一些不知道 为什么 的场景下,知道 是什么 反而有助于人们取得发 现 为什么 的突破. 基于这种思维发展起来的大数据技术,具有以往的各种技术不具备的准确性和实 时性优势,当它应用到社会各行业生产中时,对社会生产效率的提升是异常显著的. 很多人对于大数据应用的认识,都始于Google对于流行性疾病的成功预测. Google利用当前人们喜欢上网搜索解决方案(如搜索流感症状或者治疗药物)的习惯, 找出了对应时段内某些特定字段的搜索频率与美国疾控中心历史记录中某些流行性 疾病在空间和时间上的相关性,并据此而建立了一个数学模型.利用这个数学模 型,Google成功预测了2009年H1N1流感的发展过程. 而这个成功应用带来的振奋远不止如此.首先,作为一家互联网公司,Google 在与其毫无关联的医学专业领域获得了成功;

更重要的是,它的预测在准确性特别 是实时性方面,远远超过专业的美国疾控中心. 于是,更多的人在更多的行业开始了大数据应用尝试. 在零售业:梅西百货(Macys)已经实现对多达7300万种货品进行实时调价,以实 现销量和利润的双重最大化;

塔吉特(Target)公司通过对用户历史消费记录的大数据 分析,实现对用户下一阶段消费行为的预测,从而实现精准投放. 在博彩业:Tipp24 AG公司用KXEN软件来分析数十亿计的交易以及客户的特 性,然后通过预测模型对特定用户进行动态的营销活动.这项举措减少了90%的预测 模型构建时间. 在通信业:中兴通讯创新性地提出了基于大数据技术的电信系统反馈环理念, 让电信网络作为一个整体获得实时的系统反馈,从而使网络性能更加稳定,网络运 维更加高效;