大数据运营管理信息系统应用

前言:寻找写作灵感?中文期刊网用心挑选的大数据运营管理信息系统应用,希望能为您的阅读和创作带来灵感,欢迎大家阅读并分享。

大数据运营管理信息系统应用

编者按:

针对某省运营管理系统存在的数据问题和现状,中国移动江苏有限公司网络部赵恒特撰写《基于大数据的M运营商运营管理信息系统应用》一文,该文有针对性地提出了Hadoop处理框架和数据集市云化的架构应用,描述了基于大数据平台的某运营商运管管理信息系统,其内部优化了KPI管理、产品管理、决策管理、生产服务、客户服务、投诉管理、市场营销等管理流程,在项目实施过程中形成了统一大数据中心管理模式,打破了部门壁垒和信息鸿沟,效果良好,获得运营商集团公司科技与业务创新一等奖。可供相关技术人员学习、参考。

摘要:

针对某省运营管理系统存在的基础数据问题和现状,有针对性提出了Hadoop处理框架和数据集市云化的架构应用。本文描述了基于大数据平台的某省运营商运管管理信息系统,在内部优化了包括KPI管理、产品管理、决策管理、生产服务、客户服务、投诉管理、市场营销等在内的管理流程,在项目实施过程中形成统一大数据中心管理模式,打破部门壁垒和信息鸿沟,产生了良好的效果,获得运营商集团公司的科技与业务创新一等奖。

关键词:

大数据;运营商;运营管理;管理信息系统

1大数据运营管理信息系统的实现

大数据运营管理信息系统采用新技术,运营商采用业界先进且成熟的技术,考虑技术产品升级时的平滑度,保证所选的软硬件具有较长的生命周期,满足需求,立足应用,构建大数据生态体系。先进成熟技术包括Hadoop处理框架、实时流式数据处理框架等。(1)Hadoop处理框架(见图2)一个分布式系统架构,充分利用集群的威力高速运算和存储,提供高传输率来访问、计算已存储的海量数据;是大数据处理架构的事实标准。部署x86Hadoop平台,在聚合层存储海量源数据,并针对海量、非结构化/半结构化数据提供大规模处理的计算能力,在数据资产层存储离线数据资产,提供高效查询的资产存储管理能力。(2)流数据处理框架(见图3)一种分布式、容错的实时计算系统,实时处理消息并根据处理结果提供相应的处理机制。部署x86流数据处理平台,在聚合层对接源系统实时数据接口,实时采集源信息并进行处理与分析;结合数据资产层的数据应用模型、数据应用层的规则引擎及时做出业务目标的响应(实时BI、实时事件触发式营销等)。(3)业务规则引擎规则引擎将业务决策从应用程序代码中分离出来,并使用预定义的语义模块编写、解释业务规则,并根据业务规则做出业务决策。将数据按照一定的业务规则分类,匹配业务系统的数据需求场景;定义事件与流程,面向其他业务平台将数据中心的能力按照规则主动式提供。(4)数据服务枢纽(见图5)按照数据开放公共语义模型,将数据资产封装成共享业务数据模型,形成上层服务;屏蔽系统接口的技术差异,使用ESB统一协调服务运营。实现企业数据中心的数据与应用分离,提高数据安全性与复用性。通过ESB服务枢纽对其他业务系统开放标准化的服务接口,形成系统间的有效互动。(5)数据集市云化架构构建云计算x86资源池,提供按需伸缩的基础设施架构;承载分布式MPP数据库系统,提供平滑扩展的强大并行计算能力。利用x86资源池的低成本,提供数据集市的所需要的易扩展、分布式、高并发的数据计算能力;面向应用存储在线高热度访问、海量实时计算的数据。

2大数据运营管理信息系统解决的问题

大数据运营管理信息系统平台的应用,解决了M运营商原有平台的相关问题,丰富了大数据的基础数据源,加强了数据分析能力,通过统一存储和管理,打破了数据鸿沟,提高了系统效率。

2.1增加网络数据采集,丰富大数据的基础数据源

运营商产品包括传统通信、上网、内容和应用。传统通信有通话、短彩信、开关机和停复机。用户上网途径有3种:2G、3G、4G的手机上网方式;WLAN无线宽带上网方式;有线宽带上网方式。内容和应用有手机邮箱、手机游戏、手机视频、手机音乐、手机电商和应用商店等。通过在相应的网络上增加网络信息采集器,实现数据采集。比如:针对通话,可以采集到的信息有主叫号码、被叫号码、主叫开始时间、被叫开始振铃时间、被叫接通时间、主被叫挂机时间、主叫发起呼叫位置、被叫振铃位置、被叫挂机位置、主叫挂机位置、呼叫转移号码、主叫手机类型、被叫手机类型和通话质量。M运营商增加了上述的各种产品的数据采集,每天采集数据量约30TB。这些数据的价值体现在可以用来指导网络的维护和优化,可以用来提高服务质量,可以通过针对性的营销提升效果,可以与第三方合作增加数据的挖掘价值。

2.2加强基础数据分析,生成大数据次级数据字典

通过基础数据分析,加工生成二级数据丰富数据字典,分析汇总指标体系包含指标3000多个,针对公司各部门各分公司和各业务产品订制报表500多张。继续以通话为例,为了指导和考核网络维护与优化工作,通过对全网所有通话行为的分析,提炼出如下指标:呼叫接续时长=被叫开始振铃时间-主叫开始时间,加上主叫所在位置联合分析,可以对所有网络小区的平均呼叫接续时长进行统计分析,得出需要优化的小区、派发优化任务给维护部门、并可以跟踪优化效果;同样呼叫接续时长、主叫位置、主叫手机类型联合分析,可以得出手机和网络配合情况,指导问题手机生产商进行手机的质量改进。继续以通话为例,为了指导和考核营销部门的优惠购机入网套餐销售质量,通过对一定时间区间内各个渠道销售的优惠手机通话分析,提炼出如下指标:渠道销售终端次月活跃度=Count(主叫号码&主叫手机类型in渠道a终端销售库)/sum(渠道a终端销售库)。这样分析可以对渠道销售质量进行指导和考核,并能有效发现渠道通过假销售套取销售佣金的欺诈行为。

2.3统一存储和管理,打破数据鸿沟提高系统效率

M运营商的大数据系统当前存储数据量超过30PB。在统一存储和数据管理的基础上,通过联合关联,把以前分散在各个信息系统中的数据汇聚拼接出用户真正的全貌。通过泛在挖掘,把握单个用户的真正需求,挖掘潜在用户群的行为特征。系统能力增强的实时应用,能及时地反应到用户服务上。

作者:赵恒 单位:中国移动江苏有限公司网络部