登陆注册
10122100000006

第6章 数据工程:从数据到信息(2)

该电话销售活动除了不能达到预期的目标之外,还将产生其他的负面影响。例如,由于存在数据重复的问题,同一个客户很可能反复被相同的销售内容所烦扰,而希望得到销售信息的客户却因为数据缺失而没有被通知到,这些情况都将导致客户对企业能力产生怀疑。另外,还有一些类似的情况经常发生。例如,客户收到一份本不属于自己的账单却要求自己付款,或者客户被通知其不良的信用记录被送至征信机构,但账单上所显示的逾期金额为零等。发送一次错误数据给客户,可能会导致客户失去对企业长久以来的信任,企业因此而失去花费很大成本才维持的客户关系。

缺乏与实践“沟通”的变量

原始数据的另外一个缺陷是,缺少一些能与营销实践直接“沟通”的变量。比如,某企业新推出的信用卡产品定位在高端市场,目标人群是“高端人群”;然而在原始数据库中不可能有这个变量,因为“高端”是一个抽象概念,每个消费者都有不同的理解,所以只能是营销实践者根据需要来定义。这样的抽象变量还很多,比如“客户人生阶段”、“风险喜好”、“消费习惯”、“客户关系”等,而且它们往往都是制订营销方案过程中必需的资料。因此,原始数据库经常因为缺少这些变量而无法直接为实践所用。

何谓信息

信息是可以直接用于营销实践的消费者资料。它与数据最大的区别就是,信息是加工过的数据;它源于数据,但又高于数据。前面我们提到过,有两个原因阻碍了前线的业务人员直接将数据应用于营销实践:原始数据中存在的质量问题,以及数据与营销实践有时难以直接“沟通”。针对这两个问题,原始数据在数据工程阶段分别被转变成一级信息和二级信息,以适应实际应用的需要。首先,原始数据经过数据精练,即数据格式化、分类、归类等一系列步骤,可以变成一级信息。一级信息解决了原始数据中存在的质量问题,因此与原始数据相比,具有“准、全、精”的特点,能够更好地帮助市场营销人员制定出正确的策略。另外,将描述消费者不同方面的几个一级信息进行融合,可以得到一些与营销实践紧密相连的抽象变量,比如“社会阶层”、“风险喜好”、“家庭网络”等,我们称其为二级信息。与一级信息不同的是,二级信息是在数据工程阶段所建立的新的变量,可以看做是搭建在营销实践与原始数据变量之间的桥梁,是能与实际应用直接“对话”的“语言”。图2.3以图例形式说明了信息的分类。

从数据到信息:数据工程

从以上讨论中可以看出,虽然大量的原始数据为科学管理模式提供了前提,但真正实现却需要首先将原始数据转化为企业可以加以分析、利用的有价值的信息。数据工程即是实现从数据到信息的转化。

数据工程的流程

具体来说,数据工程包括以下几个步骤:

数据采集

数据工程的第一步是数据采集,即获取消费者数据。如前所述,数据包括外部数据和内部数据两种,但以内部数据为主要构成。内部数据的获取涉及每个信用卡业务环节,包括申请数据库、卡片数据库、账户数据库、交易数据库、授权数据库以及催收数据库等。此外,按性质来分,内部数据还可以分为静态数据和动态数据。接下来,这些数据被传递到数据仓库,等待下一步的处理。

数据仓库

数据仓库包括两个步骤:数据存储和数据提取。通过各种途径采集的数据,需要存储在一个统一的中央数据库中,便于以后的数据整理及分析工作。而如何从庞大的数据库中有效率地、准确地找到所需的数据资料,则是数据提取阶段面临的主要问题。

数据精练

数据精练是数据工程中最重要的部分,它主要解决前面所提到的数据质量问题,实现从数据到一级信息的转变。具体包括以下几个步骤:

·数据统一化:解决数据信息格式不统一的问题。由于客户的书写习惯不同,许多文字信息都会出现格式不统一的情况。如果不将其进行格式统一,两个信息就会被系统识别成两个不同的地址。

·数据分类:对每项数据进行有市场意义的分类,以方便将来市场工程进行市场细分。比如:收入分为较低、中等、较高;职业分为行政人员、教师、经理等。

·数据遗补:利用数据挖掘填补缺失的数据信息,解决数据缺失的问题。

数据融合

数据融合主要解决原始数据的第二个问题,即如何补充建立一些与市场营销直接相关的抽象变量。这些抽象变量我们称其为二级信息,比如“风险喜好”、“数据网络”等。拿“数据网络”信息来说,就是通过不同客户之间的一些一级信息匹配形成客户关系网络信息。

二级信息的获得主要是通过建立模型,将描述消费者不同方面的几个一级信息进行融合,得到这些与营销实践紧密相关的抽象变量。与一级变量不同的是,二级信息是在数据工程阶段所建立的新的变量,可以看做是搭建在营销实践与原始数据变量之间的桥梁,是能与实际应用直接“对话”的“语言”。

数据报告

数据工程的最后阶段,就是从客户、商户、银行的角度对银行管理的最新情况,以定期报告的形式反映给管理层以备制定策略之用。这些数据报告一般包括:

·客户管理报告:各市场细分客户的背景及其行为分析报告

·商户分析报告:分析每个商户近期表现及其与银行的合作状况

·银行管理报告:分析不同部门员工、分支行的绩效情况

以上就是数据工程所包含的步骤,图2.4进一步说明了这个流程。每个流程都有特定的实施目的,最终完成原始数据到有价值的、可读信息的转化。同时,需要注意到,前面所提到的数据质量问题并非一个静止的概念,在数据工程的每个过程中都可能产生相应的数据质量问题,要时刻注意和解决这些问题,最大限度地减少误差和错误的产生。数据资源就是数据采集和传递的过程,它是企业获得客户原始数据的过程;在数据仓库阶段,企业将原始数据存储至数据系统,就像是一个将货物装箱打包的过程;最后,在数据精练阶段,原始数据经过一系列包括数据统一化、数据分类、数据融合、数据检查在内的步骤,实现从数据到信息的转化。最后的客户信息总结阶段则是数据工程的总结,供管理层参考之用。

实际操作

数据工程涉及了企业内部许多部门,因此在实际操作中需要各部门相互配合而完成。从系统方面来说,各个数据库之间要相互协调,做到数据库系统之间尽量统一;从人员方面来说,数据工程涉及市场人员、管理人员、信息技术人员,需要分工合作;从企业管理组织方面来说,企业需要从每个部门中指定人员组成专门的部门,负责数据工程的每一个步骤,比如数据仓库小组、数据精练小组等。

在整个数据工程过程中,解决数据质量问题是其中最关键的一个步骤。因为随着时间的推移,企业数据不断增多,数据质量问题也会越来越严重。面对这样的现状,企业必须做出合理的应对,我们借用《数据挖掘导论》【Redman,2001】一书中的一个恰如其分的类比来说明关于数据质量问题的几种可能的解决方法。在这个类比中,我们可以将数据库比作一个湖泊,湖泊中的水相当于数据,注入湖泊的溪流则好比产生数据的信息链,湖泊上游的工厂则相当于数据库的污染源,而饮用湖水的人则相当于数据的使用者。

面对一个受到污染的湖泊,人们通常会采用以下四种方法:

【1】忽略水污染,仅对饮用了受污染的水而生病的人进行治疗。

【2】对湖水进行过滤,移走污染源,再将过滤后的水重新注入湖中。

【3】每天仅对一部分水进行过滤,例如,在入水口将新流入的水进行过滤,或者对即将饮用的水进行过滤。

【4】明确污染来源,移走或消除污染源。

类似的,对于一个质量“受污染”的数据库,一般也有相似的四种处理方法:

【1】忽略数据错误,仅对由于数据错误而产生的影响进行处理,包括修正错误的决定,安抚愤怒的客户及暂时缓解组织内部的不信任等。

【2】用各种手段进行数据库清理,包括调查客户、数据库之间的比较,并探究其间的差异、对数据进行自动测试以确定数据是否符合商业规则。

【3】每天对数据进行部分的处理,包括对新进的数据进行清理,或者对将被使用的数据进行事先清理。

【4】确定错误数据是由于信息链中哪个环节造成的,从而治理这一数据来源,防止生成新的错误数据。

对于一个企业来讲,一般会选择这些方法当中比较通用的方法。第一种方法显然是很少被人们选用的,如果一个企业能够意识到数据质量的重要性,就不会选择第一种方法。余下的三种方法,则各有优劣。第二种方法是最常用的一种,目前市面上有很多自动差错的软件,并且很多企业的IT部门可以比较熟练地使用这些软件,纠正错误可能要困难些,但是也可以选择由一些成本较低的外包公司来完成,虽然数据精练不是一件很简单的事情,但是通过足够长的时间的努力,这项工作还是可以很好地完成的。第三种方法是对一部分数据进行修正,这种方法对于那些只使用最新数据的企业也许比较适用,但对于大多数企业来讲,这种数据精练的方法还是不够深入和彻底。第四种方法则注重对未来错误的防范,这种方法明显具有长期的效益。经验告诉我们,很多错误都是由于很简单的原因造成的,因此改正起来相对也比较容易。

综上所述,第二种方法是比较常用的方法,第四种方法将会产生长期的效益。因此,大多数企业可以将这两种方法结合起来,解决当前已经发生或未来可能发生的数据质量问题。

本章小结

信息时代的飞速发展为企业内部积累了大量的数据,但是由于这些数据存在着不同程度的数据质量问题,并且缺少一些与营销实践密切相关的变量,因此需要将其转化为直接可利用的一级信息和二级信息。这个转化过程,我们称之为数据工程,并且可以细分为数据采集、数据仓库、数据精练、数据融合、数据报告五个部分。如果把数据比作面粉,信息就是可以直接消化的点心。如果把数据比作矿土,信息就是炼出来的矿产,而数据工程就是加工厂,它通过中间一系列的加工过程将数据转化成信息。在下面几个章节中,将按照数据工程的流程,并结合实际的项目经验,详细阐述如何在信用卡业务中通过数据工程实现从数据到信息的转变。

在本章中我们还看到,从数据到信息的转化过程中,其中一个重要因素就是数据质量的好坏。现在越来越多的企业意识到科学管理的重要性,因此纷纷引进先进的管理系统和管理方法来帮助企业进行内部管理,这些系统的建立和方法的引入并不难,但往往实施效果不尽如人意,最根本的原因就是企业内部缺乏成功运用这些系统和方法的先决条件,即高质量的数据基础。因此,我们要摒弃以前“数据库营销就是企业系统信息化”的传统观念;建立各种操作平台固然重要,但是如果不进行数据工程,所谓的数据分析只能是“垃圾进,垃圾出”,所得的营销策略也会阻碍企业目标的实现,丧失企业在激烈的市场竞争中的生存能力。

同类推荐
  • 看电影,学商道

    看电影,学商道

    商界中常见的资本运营、成本核算、人脉资源、科学决策乃至企业文化、团队管理,都在各种类型的经典电影中或多或少地得到体现。套用雕塑家罗丹的一句话,不是电影里没有商道,而是很多人缺乏一双从中发现商道的眼睛。本书聊借电影这一体裁,分享经商的各种技巧与智慧,看似没有交集的光影世界和浩瀚商海,在经过层层抽丝剥茧之后,竟能向我们展现商道的无穷魅力。看完此书,读者一定能够在电影艺术与商业智慧之间得到双重享受。
  • 基于价值观的领导

    基于价值观的领导

    本书将先进的西方管理理念与中国企业的实际运营状况相结合,论述了VBL(基于价值观的领导)的理论和实践问题。
  • 你拿什么改变世界——比尔·盖茨送给年轻人的管理礼物

    你拿什么改变世界——比尔·盖茨送给年轻人的管理礼物

    本书以独特的视角从微软公司成功运作的过程中,提炼出比尔·盖茨成功的管理思维,并列举了微软公司众多的成功案例。相信无论是创业者、管理者还是渴望成功的人都会从本书中找到能给予自己帮助的经验和策略。同时,为追求事业发展的个人和企业,带来一定得启发和借鉴。
  • 给马云一个团队,他会怎么管?

    给马云一个团队,他会怎么管?

    这是一本直接向全中国最牛团队取经的团队管理书籍。如何带好一个团队?这让许多中高层管理者、职业经理人感到困惑!尽管有很多书籍在向我们不厌其烦地传授带团队的方法,但仍无法完全解决带团队过程中诸多潜在而未知的新问题。本书将用直接简单的语言,以“像马云一样带团队”为视角,展现阿里巴巴这支神秘的团队,向广大读者诠释马云及其团队执行力的管理之道和创新理念。本书颠覆了传统经管书说教式的、高深莫测的管理理论,以马云日常工作中如何抓团队的简单实用语录为主线,用这些企业内部的管理理念、企业文化和全新的不落俗套的幽默生动诙谐的小案例作为辅助,力图帮你解决管理团队过程中复杂棘手的问题!
  • 埃隆·马斯克:嚼着玻璃,凝视深渊

    埃隆·马斯克:嚼着玻璃,凝视深渊

    他是世界上唯一一个建立了4家独角兽公司的人,他被誉为“硅谷钢铁侠”,被称为“来自未来的人”,他是科技狂人,也是偏执狂梦想家。他就是埃隆·马斯克,正在凭借一己之力颠覆世界的人。本书忠实记录了埃隆·马斯克从辍学创业到建立起商业帝国的过程中发生的故事,从Pay Pal到特斯拉,再到Space X、Solar City,他始终走在时代的前沿,从他逐步成功的路程中,我们甚至可以看到人类未来发展的方向。作者对其连续创业经历进行了深入解读,为我们分享了成功创创业的逻辑,解答了创业者如何找对创业的方向,如何开启财富与机遇的大门,如何围绕着目标提升自己,如何应对公司管理过程中的各种难题。
热门推荐
  • 教师医疗预防手册

    教师医疗预防手册

    为了指导教师的身心健康和职业发展,我们特地编辑了这套“教师职业发展与健康指导”图书,分为《教师爱岗敬业教育手册》、《教师职业道德与素质手册》、《教师教学质量提升手册》、《教师快乐工作手册》、《教师工作减压手册》、《教师文化娱乐手册》、《教师饮食保健手册》、《教师身体健康手册》、《教师医疗预防手册》、《教师心理健康手册》10册。本图书除了对教师的职业发展规划给予一定指导外,同时还对教师的身心健康进行了鞭辟入里的分析研究,具有很强的系统性、实践性和实用性,非常适合大中小学学校领导、教师,以及在校专业大学生和有关人员阅读,也是各级图书馆陈列收藏的最佳版本。
  • 魅王宠妻,腹黑大小姐

    魅王宠妻,腹黑大小姐

    她本是顾家大小姐,本是上古神器的传承者,本该拥有不一样的人生可谁知,亲人背叛,自己的妹妹为了得到上古神器,杀亲母,杀害自己的弟弟可没想到,天不亡她,顾家——算个屁,待我足够强大,灭他满门!为母报仇,为弟报仇。!本来辉煌的她,遇上了不可一世的他“来,过来,给本王抱抱。”“滚!”“我是谁?”“我怎么知道!”“哦~想起来了,我是你夫君。”今生今世,他不负她,她亦不负他。
  • 神剑苍茫

    神剑苍茫

    一柄漆黑剑,一道虚空门。一个少年郎,一群靓红颜。一世千变幻,终成湮灭枯。一路激情,一生风流。剑出八荒灭,剑合万物生。神剑在手,天下我有。
  • 黎平说故事

    黎平说故事

    有你听到过的故事,有你没听过的故事;有的故事本来就有,有的故事从我这里才生......
  • 神秘狂妃是BUG

    神秘狂妃是BUG

    “我不是针对谁,我是说在座的各位,除了我夫人,全都是垃圾。”弦野说。……穿越后的音姝因为太无敌,一直顺风顺水。唯一的苦恼就是,嫁了个拉得一手好仇恨的男人!弦野:“即日起,本尊要陪夫人闲时遛鸟看花,静时看书作画,不回来了。”众下属:“……”妖女!音姝绝对是妖女!面对烂桃花。弦野:“已有妻,不纳妾,别爱我,会被打。”烂桃花们:“……”闪开!我们要去弄死音姝!音姝本人表示:“死是不可能死的,因为我是这个世界的bug。”
  • 鬼医重生腹黑帝尊太妖孽

    鬼医重生腹黑帝尊太妖孽

    她,是现代的特工杀手,一手医术出神入化,一手毒术杀人于无形。他,仿若九天的神诋,但却为她双手沾满鲜血。“卿儿,来,让为夫抱抱,”“喂!你的咸猪手往哪放呐,再不拿开,你今晚就睡地上吧!哼!”……
  • 豪门婚姻

    豪门婚姻

    无爱的婚姻,只为一个字:钱。当她满身沾满铜臭的时候,却离奇的发现了他的好,并一发不可收拾的爱上了他,那份爱,甚至超过的她追求了许多的钱美梦。他真的有那么好吗,她迷疑。算了,爱就爱吧,反正,她也想谈谈恋爱了,就把上苍赐她的缘分抓牢吧,续一场轰轰烈烈的爱情。
  • 愿一路良辰相伴

    愿一路良辰相伴

    一个热搜,她被推至风口浪尖。一场阴谋,所有人都成为受害者。处心积虑的算计背后,那个人想要的,究竟是什么?自己心尖上的人,对她一次次的试探,她又该如何面对自己曾经的青春?
  • 强婚暖爱,夫人别跑了

    强婚暖爱,夫人别跑了

    初见,她揪住他的裤管,跪地苦求父亲应得的200万,卓连城却冷酷地给了她一脚,让人赶她出去。他因她的倔强,对她兴味十足。一次次的磨难只为得到她的臣服……后来这朵坚强不屈又上进的小花却成了他眼中唯一的风景。宁如初:“当卓太太这件事我要考虑一下……”--情节虚构,请勿模仿
  • 一世盛宠:夜少的天价萌妻

    一世盛宠:夜少的天价萌妻

    第一次见面,她将他扑倒在地,居高临下的问:“大叔是要当众耍流氓吗?”第二次见面,她挡在他面前,若有所思的问:“大叔是在为喜欢的女生守身如玉吗?”威胁、利诱、暴打……十七岁的无敌美少女为了保全三十五岁大叔的清白,一个月之内,她使出浑身解数,为他挡掉了无数女人。她这么辛苦的付出,终于换来他的正眼相看,他说:“我从来不知道一个女人的嫉妒心竟然这么强。”哈?“不允许任何女人近我身边半步,”他缓缓地说:“你竟然这么爱我?”哈?她傻眼了,于是她一天之内为他找了365个女人,他却淡淡的道:“女人何必为难女人,不必试探,我允许你爱我。”呃……小剧场1:“大叔,您一天需要几个杜蕾斯?”她睁着无辜的大眼问,“管家手册中好像漏掉了这一点呀,我怎么给你准备呢?”“不需要。”他冷冷的丢下一句。“对不起、对不起哦,大叔……”她飞快的躬身道歉,“我不知道您那方面不行……”呃,他成功石化。剧场2:西餐厅,她看着几乎就挂着两条带子、一块布的国际名模,淡定地抖开洁白的餐巾,绑在男人的眼睛上,“大叔,看了要长针眼的。”“……”男人默,“我怎么吃饭?”“我喂你呀。”她殷勤的笑着。