编辑: Mckel0ve | 2019-07-10 |
电话: (0791)
86849251 86849970
邮箱: jxrbxys@163.
com JIANGXI DAILY 为全面从严治党提供铁的纪律保障 走进大数据 乔金霞 随着移动互联、电子商务、云计算、 物联网等信息技术的快速发展,社会信息 化、企业信息化进程的不断加快, 大数 据 一词越来越多地被人们提及.大数据 分析、大数据产业、大数据与智慧城市、 大数据时代等,这充分反映大数据已经不 知不觉地影响并改变着我们的社会发展以 及生产生活方式.那么,什么是大数据, 大数据到底有哪些特征,大数据又会给我 们的生活带来哪些变化呢? 要了解大数据,首先要了解什么是数 据?从字面意义上理解, 数据 由两个 字组成,一个是 数 ,一个是 据 . 数 指的是数值、数字、数字化的信 息,或者以数的形式存储的信息;
而 据 则指的是证据或者依据. 数据 从 字面意义上理解就是数字化的证据和依 据,是事物存在和发展状态或者过程的数 字化记录,是事物发生和发展留存下来的 证据.所以,数据不仅仅包括数字,还包 括文字、声音、图像、视频等,只要是用 数据化的方式记录下来的事物发生和发展 状态,我们都称之为数据.比如,我们用 手机浏览一个网页,或者发送一张图片、 一条消息,这些都会产生数据.何谓大数 据?尽管学术界和企业界对此有不同理 解,但对大数据最通俗易懂的解释就是数 据规模超大.更为全面的理解则是,大数 据不仅仅表示当今这个信息大爆炸时代所 产生的海量数据,还包括以之命名的与之 相关的技术发展和创新,包括分析海量数 据的数据挖掘工具、运行平台、计算系统 等.因此,从更完整的角度来讲,大数据 应当是数据、技术与应用三者的统一. 一般认为,大数据具有 4V 特征: 一是数据的数量庞大 (Volume) .大数据 首先是数据体量大,表示一些大型的数据 系统集合.虽然大数据的规模尚是一个不 断变化的指标,但一般在 10TB 规模左 右.而且数据分析量级还在扩大,已经从 TB 发展到 PB 乃至跃升到 ZB 级.二是数 据类型的多样化 (Variety) .大数据需要分 析处理的数据已由
图表、文字数据扩展到 网络日志、音频、视频、图片、地理位置 信息等.多类型的数据对数据的处理能力 提出了更高的要求.三是数据处理的高速 性(Velocity).高速描述的是数据被创建和 移动的速度.数字化时代,数据增加和变 化的速度越来越快,高速实时变化的数据 流,必然要求处理和分析数据的技术和方 法能够快速响应,实现数据即时处理分 析.四是价值密度低(Value).在海量数据 中,真正有价值的信息可能仅在少部分数 据当中,大量数据是不相关的信息,价值 密度的高低与数据总量的大小成反比.以 视频监控为例,一部一小时的视频数据, 在连续不间断的监控中,有用数据可能仅 有一两秒.大数据就是通过强大的机器算 法更迅速地完成数据的价值 提纯 . 古希腊哲学家毕达哥拉斯认为,数是 万物的本源.也就是说,世界万物归根结 底都是由某种数量关系决定的.大数据就 是通过对海量数据进行高效地搜集和运 算,分析总结出事物发展背后的特点和规 律,从而为我们更好地认识事物提供科学 分析工具和思路,是我们认识事物的思维 方式变革. 大数据分析具有以下特性:一是处理 的是全部的数据,而不是随机抽样的数 据.在以往统计数据分析中,由于技术和 成本的限制,人们无法收集、储存和分析 大量的数据,往往是通过随机抽样调查, 以部分样本来预估总体特征.而在大数据 时代,对数据搜集和进行处理的能力大大 提高,可以处理和某个特别现象相关的所 有数据.二是大数据强调快速趋势分析, 而不是精确地全面分析.以往数据分析强 调精确量化,而大数据分析更注重分析事 物发展大体的方向,并适当忽略微观层面 上的精确度.三是大数据追求不同事物之 间的相关性,而不分析其因果性.在大数 据时代,我们更注重寻求事物之间的关 系,即 是什么 ,而不去深究背后原 因,即 为什么 . 当前,大数据正改变着我们的生活,改变着我们的世界.企业应用云计 算等大数据分析工具,对海量数据进行 充分挖掘和快速分析,为高效决策提供 参考依据,从而有效改善企业的产品性 能和服务水平,提升客户和受众的消费 体验.比如,电子商务平台通过对用户 浏览网页、消费购买情况等数据进行分 析,就能够精准挖掘用户的不同类型和 消费偏好.消费者进入购物网站,就会 惊奇地发现它所推荐的商品基本上就是 自己正在寻找或者说正好需要的东西, 而这其中的奥妙都要归功于企业大数据.再比如,我们经常使用共享交通工 具,企业平台也会根据大数据的算法实 现供给与需求最优匹配.同时,大数据 还会根据消费者的搜索习惯及偏好,预 测消费者需求.随着目前智能手环等大 量可穿戴设备的出现,企业数据平台采 集顾客不同的运动数据并进行实时动态 评估,在数据分析基础上对顾客运动行 为提供反馈建议.此外,大数据还推动 智慧城市建设.利用大数据技术,政府 交通管理部门通过对交通信息、交通环 境及路况数据进行采集,可以得知一个 城市的道路分布状况及拥堵点的具体位 置,从而更好地指挥交通,提升监管效 率.政府经济管理部门还可以利用大数 据的预测能力,对经济发展过程中的数 据进行汇集和关联分析,从而作出科学 的宏观经济预测和前瞻性决策. 当然,任何事物发展都具有两面性. 大数据的广泛应用给我们带来方便的同 时,也产生诸如隐私泄露等问题.因此, 我们必须深刻认识大数据,有效利用大数 据,实现趋利避害,让大数据更好地造福 社会、造福人类.毕竟,大数据发展的潮 流已经势不可当. (作者系江西省社科院副研究员) 每次到四川成都,朋友都会 约我逛宽窄巷子.徜徉于历史厚 重的宽巷子、窄巷子和井巷子, 那错落有致的建筑、熙熙攘攘的 人流,总会激发起我的思古幽 情,感悟宽与窄的辩证法. 在当地,有一个妇孺皆知的 故事:古代西蜀边境有一个穷和 尚和一个富和尚.一天,穷和尚 对富和尚说: 我想到南海去, 怎么样? 富和尚说: 你依靠什 么去呢? 穷和尚说: 我只要带 一只水瓶和一个饭钵就够了. 富和尚不以为然: 我这几年一 直想要雇船顺江而去,到现在还 没能够去成呢,你一无所有,就 别做美梦吧! 可到了第二年, 穷和尚竟然从南海回来了.他把 自己的云游经历告诉了富和尚, 富和尚不免惭愧难当.川西距离 南海好几千里,富和尚没能到 达,穷和尚反而到了,这里面不 正包含着宽与窄的辩证法吗?有 条件和优势的反为条件所累、被 优势所误,其云游南海之路由宽 变窄,终无所成;