PDF《中国移动广东为用户提供详单账单的 实时查询》

1 - N 个节点集群.早期研究表 明,大数据可能适合非结构化数据处理, 但目前的计费系统需要处理静态结构的大 型电话详单文件.另一方面,MPP 数据仓库 基于专为至强处理器而优化 的英特尔? Hadoop 发行版的中 国移动广东公司话费查询系统,确保了原系统在性能、服 务可持续性和成本方面效率低 下的问题,满足了我们运营商 对海量以及实时信息的要求, 使其能够为日益增长的移动用 户群提供出色的服务. 唐辉 项目经理 中国移动集团广东有限公司 系统与 Hadoop 之间的总拥有成本模型在数 据处理费用上形成了鲜明的对比:传统 MPP 为57000 美元/TB,而Hadoop 大数据只有 不到

1000 美元.作为一个开源解决方案, Hadoop 解决了在开放的商品化服务器硬件上 建立未来解决方案的又一个要求,这种解决 方案可以很容易地升级,以利用未来的低成 本处理器.最基本的准则是,避免被限制在 一家供应商上.最后的问题是企业有没有做 好引进一个开源 Hadoop 发行版的准备,以 及是否具备未来修补、部署、调整和支持的 专业技能,以确保未来可持续发展. 从RISC 平台迁移到 Hadoop 软件解 决方案来改进账单系统 中国移动广东公司团队首先专注于服务器 硬件上的问题,因为 RISC 的保修期即将 过期,未来的高扩展能力是需要解决的一 个基本问题.通过比对性能基准测试的数 据,团队发现基于英特尔至强5600系列处 理器的解决方案足以在高性能、通用化硬 件上来替代RISC-based IBM POWER*系列小 型机方案. 在交流期间,中国移动广东公司团队了 解到英特尔有一个企业级软件产品:英 特尔Hadoop 发行版 (Intel Distribution ),它 包含了 Apache Hadoop开源项目的完整发 行版以及一个增值的监测和管理控制台 Intel Manager for Hadoop* 软件.此产品由 英特尔提供充分支持,英特尔将承担起发 行版密集的更新和维护流程. 英特尔提供的概念验证(POC)设计、安装、部署和配置等专业服务选项缓解了中国 移动广东公司对于团队经验的担心.在部署 英特尔?Hadoop 发行版和至强TM 5600处理器成功 帮助中国移动广东公司构建新一代详单查询系 统,为其持续改进高业务量下的客户服务提供 了坚实的基础. 之后,使用英特尔管理员培训与开发培训软 件包,将为广东公司团队提供有效培训,使 其在日常运营中逐步掌握整个系统. 尽管也考虑了其他单点解决方案 Hadoop 发 行版供应商,但英特尔?可以同时提供硬件 和软件解决方案,可构成完整的大数据解 决方案,性能专为通用的垂直分析模型而 调优,这是一个决定性因素. 中国移动广东公司最终选择了IntelDistribution软 件和英特尔至强5600系列处理器来建立新的 系统,新系统将使用133台服务器. 中国移动广东公司为用户提供详单的 实时查询 英特尔基于大数据量优化的软硬件解决 方案使中国移动广东公司的个人用户能 解决方案亮点 ? 性能更高.基于 Intel Distribution 的基 本优化算法,应用程序变得更高效, 计算存储数据可以更均衡地分布.借 助至强?系列硬件技术,英特尔至强 处理器安装程序控制的自动调谐配置 有助于无缝地优化性能. ? 稳定运行.经过充分测试的企业级 Hadoop 版本可确保长期稳定运行.与 最新的开放源码相集成,确保了各个组 成部分之间的一致性,并且得到英特尔 充分支持,从而简化了运营管理. ? 易于管理.Intel Manager for Hadoop 软 件提供了一个基于浏览器的安装和管 理控制台,用于解决因难以管理开源 版本而造成的问题.它提供积极主动 的客户服务,通过网页、电子邮件和 短信发送异常情况系统报警. ? 英特尔的增强功能.Intel Distribution 包含数百种英特尔的增强功能,包括 一个覆盖整个数据中心的 HBase 数据 库虚拟大表.英特尔通过关注开放的 硬件和软件大数据平台来回馈开源社 区,这正是其宗旨所在. ? 全新的信息产品.新的分析能力为开 发更多新的信息产品创造了条件,这 些新产品可以出售给有针对性的客户 群,而不是为所有客户提供同一种产 品.分析数据可显示实际客户使用情 况、偏好和按照细分客户群提供服务 的成本之间的联系.