烟草行业大数据资产管理
2018-02-28郭文卓王子豪
郭文卓 王子豪
摘要
在当前形势下,大数据是数字烟草的核心内容和未来发展的重要驱动力,实现大数据资产管理则是大数据价值全方位的体现,只有理清现有数据资产脉络,做好数据资产治理及数据资产的应用,实现大数据资产的安全完整性、合理配置性和有效利用性,才能盘活数据资产,实现数据化运营的价值。
【关键词】数字烟草 数据中心 大数据资产管理
当前许多企业都己基本实现了信息化建设,积累了海量数据。以江苏烟草为例,截止目前,江苏烟草零售户累计10年的订单明细约为20亿行,每周产生的数据量约为500万行,交易笔数约为3亿/年,未来随着销售重心的下移,更多的消费者数据将纳入到烟草生态圈中,烟草行业的数据量大且增长迅猛。
基于此,江苏烟草商业系统开展了以数据中心为代表的大数据应用建设,通过对海量数据的整合和应用,初步实现了业务内容全数据化管理,为下一步将“数据视为资产”,从海量数据中挖掘出有价值的数据并且将这些数据用于特定业务场景中,发挥数据的“剩余”价值,实现数字化烟草目标打下了基础。
1 烟草大数据资产现状
总体来看,由于对大数据资产认识不够深刻等原因,导致整个烟草行业大数据资产管理的发展起步较晚,下面从不同的角度分析烟草行业大数据资产管理的现状:
1.1 大数据资产完整性和丰富性方面需要加强
随着卷烟营销、专卖、物流等核心业务的持续精化,需要我们不断的完善数据资产建设,将九大业务领域的数据纳入进来。只有我们的数据资产越丰富,能够提供的有价值的数据内容越多,我们才能针对性的开展商品策略改进、精准营销、供应链优化等方面的工作。
1.2 大数据资产利用方面深度有待挖掘
目前行业内人工的业务经验和分析能力并没有通过软件系统有效地整合成可共享利用的知识体系,导致可利用、可开发、有价值的数据资产处于沉睡状态。因此亟需建立有效的分析、挖掘和展示机制,深入挖掘数据潜质,盘活数据资产,释放价值,支撑经营管理决策。
2 江苏烟草数据中心体系架构简介
江苏烟草于2014年12月启动数据中心项目,目前己取得阶段性成果,相继完成了标准体系编制、基础数据梳理,构建了全省范围的数据集成、交换体系,一方面提升了全省基础业务数据的规范化程度和数据质量,另一方面为在建业务系统的实施、已有系统的改造提供了标准化的高质量数据保障;同时,通过定制化报表开发提供了全省范围内的统计报表,保障了业务部门日常工作的开展;此外,我们还开发了多维分析平台,协助业务部门探索数据分析型工作的开展,填补了业务工作辅助工具的空白。
3 江苏烟草大数据资产管理系统框架设计
在取得成效的同时,我们也要清醒的认识到發展的不足。目前我们还存在数据管理有待加强、数据质量有待提高、数据应用深度有待提升等问题。基于以上问题考虑,江苏烟草开展了大数据资产管理平台的研究和建设,将数据视为资产,通过对数据进一步集中管理,实现全省范围内的信息共享,强化数据分析,目的是提升数据应用水平和商业价值”。
整体的建设思路是通过搭建能力层、中间件层、应用层这三层架构实现数据中心作为能力供给平台的功能。能力层由数据资产管理平台、大数据组件平台建成,通过搭建数据资产管理平台使企业数据目录化,奠定数据开放的能力基础,大数据组建平台提供业务建模能力,为业务创新应用打下基础;中间层通过大数据平台组件整合,提供半、非结构化数据的计算、应用能力;应用层则通过实施能力开放,将上述能力通过服务的形式对外提供,从而支撑各类的数据分析应用。
4 江苏烟草大数据资产平台功能设计
4.1 大数据应用整合
继续丰富数据中心覆盖的业务领域,将财务、专卖、人力资源等核心业务领域的数据纳入数据中心统一管理,逐步建立全域、全规格的数据仓库。数据中心负责将专业领域的数据从数据仓库推送到数据集市中,开放数据仓库层到数据集市层的加工处理权限,供各业务域构建满足业务分析需要的数据模型,满足各业务创新应用的使用需要。
4.2 数据资产管理平台
以数据资产目录/卡片为基础,以数据的产生、流转、加工、存储和利用为主线,对资产全生命周期进行管理。数据资产管理的核心包括数据资产治理、数据资产应用、数据资产运营等,使得数据一致、完整,实现数据资产的分发、开放、交易等数据嫁接,从而促进数据资产的价值实现。
从现阶段统一数据平台的建设来看,以下几方面的工作还需要我们重点关注:
4.2.1 数据资产的采集
采集涉及采集源的管理、采集方式定义、采集规则制定等内容。采集完成后通过目录的形式直观展现全省的数据资产。
4.2.2 数据资产链路的分析和管理
通过把从数据源到最终结果表的整个加工链路进行建模展现,可查看某个数据对象的来龙去脉,可分析某个指标从哪些数据对象计算得来,可分析出某个指标的变动对后续数据对象的影响。
4.3 数据服务环境
搭建多租户混合型的数据环境,逐步建立全系统全业务数据服务资源池,对外提供基础数据服务、宽表数据服务等。进行数据服务申请、发布、变更等流程管理,为各类服务提供统一的运行承载平台和资源管理平台。通过构建统一的数据服务环境,以满足专卖、财务、人力等大数据创新应用的分析、展现需要。
4.4 大数据组件框架
扩展混合型数据环境中的大数据组件,进一步完善数据中心对半结构化和非结构化数据的处理能力。通过引入大数据存储、计算组件,搭建数据挖掘组件、自定义查询工具等,以满足营销、财务、专卖等大数据创新应用的分析展现需要。同时,构建大数据实现对外开放能力平台,实现数据的集成/交换,数据的存储/处理,数据的分析/展现以及平台本身的资源监控和运维等功能。
5 结论
大数据技术的发展方兴未艾,应用前景无比广阔,对行业的巨大作用正在逐步展现。江苏烟草数据中心的建设既要看到大数据技术未来的前景,更需要清醒地认识到大数据平台的建设并非一朝一夕,需要有明确而长远的规划。只有切实提升数据资产意识,科学有效的管理数据资产,加强数据开发和处理能力,才能为数字烟草的快速发展和行业的可持续发展作出贡献。
参考文献
[1]张亮.大数据和数据挖掘技术在烟草行业的应用[J].电脑知识与技术,2014.