首页 理论教育数据挖掘应用:发掘商业价值的利器

数据挖掘应用:发掘商业价值的利器

【摘要】:实际上数据挖掘技术从一开始就是面向应用的。目前,在很多重要的领域,数据挖掘技术都发挥着积极的作用。商家通过数据挖掘技术制定营销策略,向消费者发出与其以前消费行为相关的推销材料。自20世纪90年代开始出现数据挖掘商用软件以来,据不完全统计,1998年年底1999年年初,已有50多个厂商从事数据挖掘系统的软件开发工作,美国数据挖掘产品市场在1994年达到5 000万美元,1997达到3亿美元。

实际上数据挖掘技术从一开始就是面向应用的。目前,在很多重要的领域,数据挖掘技术都发挥着积极的作用。尤其是在银行电信保险交通、零售(如超级市场)等商业应用领域,数据挖掘技术取得了显著的成就。数据挖掘能够帮助解决许多典型的商业问题,其中包括:数据库营销、客户群体划分、背景分析、交叉销售等市场分析行为,以及客户流失性分析、客户信用评分、欺诈发现等。

数据挖掘技术在企业市场营销中得到了比较广泛的应用,它以市场营销学的市场细分原理为基础,其基本假设是“消费者过去的行为是其今后消费倾向的最好说明”。通过收集、加工和处理涉及消费者消费行为的大量信息,确定特定消费群体或个体的兴趣、消费习惯、消费倾向和消费需求,进而推断出相应消费群体或个体下一步的消费行为。然后,以此为基础,对所识别出来的消费群体进行特定内容的定向营销。这与传统的不区分消费者对象特征的大规模营销手段相比,大大节省了营销成本,提高了营销效果,从而为企业带来更多的利润

消费者的信息来自市场中的各种渠道。例如,每当使用信用卡消费时,企业就可以在信用卡结算过程中收集消费者的信息,记录下我们消费的时间、地点、感兴趣的商品或服务、愿意接受的价格水平和支付能力等数据。当我们在申办信用卡、办理汽车驾驶执照、填写商品保修单和其他需要填写个人信息的时候,我们的个人信息就存入了相应的业务数据库,企业除了自行收集相关业务信息之外,还可以从其他公司或机构购买此类信息为自己所用。

组合来自各种渠道的数据后,人们使用超级计算机,利用并行处理、神经元网络、模型化算法和其他信息处理技术处理组合后的数据,从中得到商家用于向特定消费群体或个体进行定向营销的决策信息。这些决策信息是如何应用的呢?例如,当银行通过对业务数据进行挖掘后,发现一个银行账户持有者突然要求申请双人联合账户,并且确认该消费者是第一次申请联合账户时,银行会推断该用户可能要结婚了,它就会向该用户定向推销用于购买房屋、支付子女学费等长期投资业务,银行甚至可能将该信息卖给专营婚庆商品和服务的公司。

市场经济比较发达的国家和地区,许多公司都开始在原有信息系统的基础上通过数据挖掘对业务信息进行深加工,以构筑自己的竞争优势,增加自己的营业额。美国运通公司有一个用于记录信用卡业务的数据库,数据量达到上亿字符,并仍在随着业务增长不断更新。运通公司通过对这些数据进行挖掘,制定了“关联结算优惠”的促销策略,即如果一个顾客在一个商店用运通卡购买一套时装,在同一个商店再买一双鞋,就可以得到比较大的折扣,这样既可以增加商店的销售量又可以增加运通卡在该商店的使用率。例如,居住在英国伦敦的持卡消费者如果最近刚刚乘英国航空公司的航班去过巴黎,那么他可能会得到一张周末前往美国纽约的机票打折优惠卡。

商家通过数据挖掘技术制定营销策略,向消费者发出与其以前消费行为相关的推销材料。卡夫食品公司建立了一个拥有3 000万客户资料的数据库,数据库是通过收集对公司发出的优惠券等促销手段做出积极反应的客户的销售记录建立起来的,卡夫公司通过数据挖掘了解特定客户的兴趣和口味,并以此为基础向他们发送特定产品的优惠券,还为他们推荐符合客户口味和健康状况的卡夫产品食谱。美国的《读者文摘》出版公司运行着一个积累了多年的业务数据库,业务数据库中包含了全球一亿多位客户的消费信息,数据库每天24 h连续运行,保证数据不断得到实时更新。正是基于对客户资料数据库进行数据挖掘的优势,《读者文摘》出版公司才能够从通俗杂志扩展到专业杂志、书刊和音像制品等的出版业务。

数据挖掘还有其他的一些应用。

(1)在对客户进行分析方面:银行信用卡和保险行业,利用数据挖掘将市场分成有意义的群组和部门,从而协助市场经理和业务执行人员更好地集中于对效益有促进作用的活动并开拓新的市场。

(2)在客户关系管理方面:数据挖掘可以帮助商家找出产品的使用模式和了解客户行为,从而改进通道管理(如银行分支和ATM机等)。例如,正确时间销售就是基于顾客生活周期模型来实施的。

(3)在零售业方面:数据挖掘用于顾客购货篮的分析可以协助商家布置货架、安排促销活动时间、组合促销商品以及了解滞销和畅销商品状况等商业活动。通过对一种商品在各连锁店的市场共享、客户统计以及历史状况的分析,可以确保销售和广告业务的有效性。

(4)在产品质量保证方面:数据挖掘协助管理大数据变量之间的相互作用,并能自动发现某些不正常的数据分布,揭示制造和装配操作过程中的变化情况和各种因素,从而协助质量工程师及时地注意到问题发生的范围并采取改正措施。

(5)在网络容量利用方面:数据挖掘可以让企业了解客户使用聚集服务的结构和模式,从而指导企业人员对网络设施做出最佳的投资决策

在各个企事业部门的业务中,数据挖掘在假伪检测、险灾评估、失误回避、资源分配、市场销售预测和广告投资等很多方面起着很重要的作用。例如在化学及制药行业,将数据挖掘用于大量化学信息可以发现新的有用的化学成分;在遥感领域,利用每天从卫星上及其他方面来的海量数据,数据挖掘能对气象预报、臭氧层监测等起很大的作用。自20世纪90年代开始出现数据挖掘商用软件以来,据不完全统计,1998年年底1999年年初,已有50多个厂商从事数据挖掘系统的软件开发工作,美国数据挖掘产品市场在1994年达到5 000万美元,1997达到3亿美元。从产品的类型来看,通常有以下五类产品。

(1)能够提供广泛的数据挖掘能力的产品,典型的有:IBM公司的Intelligent Miner、SAS公司的Enterprise Miner。

(2)旨在为某个部门求解问题的产品,典型的有:Unica公司的Response Modeler Segmentor、IBM公司的Business Application等。

(3)与提供服务联系在一起的产品,典型的有:NeoVista、Hyperparallel、HNCMarksman。

(4)黑匣工具,典型的有:GroupModel、ModelMax、Predict。

(5)解决客户问题的产品,典型的有:Marketier Paregram、Exchange Application。

数据挖掘(知识发现)的目的是为企业决策提供正确的依据,从分析数据、发现问题到做出决策、采取行动这一系列操作是一个单位的动作行为,利用计算机及信息技术完成整体行动,是发挥机构活力和赢得竞争优势的唯一手段。人们将这种机构的手段称为“商业智能”(Business Intelligent,BI),BI系统能极大地提高决策的质量和及时性,从而提高机构的生产率以发挥竞争优势。近年来,一些大公司将数据分析和数据挖掘工具及其有关技术组合起来,形成所谓的商业智能软件BIS。其中SAS公司的Enterprise Miner就是将数据源、数据预处理、数据存储、数据分析与发掘、信息表示与应用等技术结合形成一个复杂的数据挖掘系统。

IBM公司更全面地考虑了BI系统的结构和功能,与其他公司共同合作开发了各类BI软件和工具。开发BI软件需要从多方面加以考虑。首先必须有一个良好的数据库,为了能使企业管理与决策机制覆盖管理与决策的全阶段,IBM提出了一个统一的数据库系统——DB2和一个可视化数据仓库(Visual Data Warehouse,VDW)。它可以将各种应用和各部门的信息融为一体,利用可视化仓库联机分析处理(Online Analytical Processing,OLAP)工具可以生成实时报告。在信息发现和数据发掘工具方面,提出能对结构型和非结构型数据进行挖掘的一整套智能矿工家族。由于BI手段只有在好的数据基础上才能见效,因此IBM公司提出数据重组工具。由于向用户提供言之有据的信息是做出正确决策的前提,因此IBM公司又提出能支持异形数据库的DataJointer(数据接合)。BI系统是从数据到知识再到决策的进程中更深入的一步,展示了真正实用的智能信息系统的雏形。