1、 商务智能概论商务智能概论Introduction to Business IntelligenceIntroduction to Business Intelligence胡俊敏集美大学工商管理学院wingoner126 基本内容基本内容n本课程主要介绍数据仓库与数据挖掘本课程主要介绍数据仓库与数据挖掘的基本概念、基本方法以及在商务决的基本概念、基本方法以及在商务决策中的应用。策中的应用。n强化基础，偏重应用。强化基础，偏重应用。基本要求基本要求n目的主要是掌握商务智能的核心技术基础数据目的主要是掌握商务智能的核心技术基础数据仓库、仓库、OLAPOLAP和数据挖掘的基本概念、技术和方法，和数
2、据挖掘的基本概念、技术和方法，并在此基础上应用于相关领域。并在此基础上应用于相关领域。n跨学科性：统计学、数据库和人工智能跨学科性：统计学、数据库和人工智能 教学纲要教学纲要n商务智能概述商务智能概述n在线分析处理在线分析处理OLAPOLAP技术技术n数据挖掘技术和方法数据挖掘技术和方法n数据挖掘过程数据挖掘过程n数据仓库数据仓库n商务智能应用商务智能应用 教材与参考书教材与参考书n1赵卫东赵卫东.商务智能商务智能.北京：清华大学出版社，北京：清华大学出版社，2009n2数据挖掘概念与技术数据挖掘概念与技术Jiawei Han、Micheline Kamber著著 范明、孟小峰范明、孟小峰 等
3、等译译.北京北京.机械工业出版社，机械工业出版社，2019n3数据仓库数据仓库W.H.Inmon著著 王志海王志海 等译，北京等译，北京.机械工业出版社，机械工业出版社，2000 n4数据仓库原理与实践数据仓库原理与实践 林宇林宇 等编著，北京等编著，北京.人民邮电出版社，人民邮电出版社，2019 概念解析概念解析n何谓智能？企业有智能吗？何谓智能？企业有智能吗？n智能的表现智能的表现 n 信息共享和企业信息集成信息共享和企业信息集成n 知识挖掘与管理知识挖掘与管理n企业不管大小，都必须对瞬息万变的市场情况做企业不管大小，都必须对瞬息万变的市场情况做出及时、高效地反应，而这些反应都必须建立在出
4、及时、高效地反应，而这些反应都必须建立在对全面、准确和及时的信息基础上。对全面、准确和及时的信息基础上。n智能型企业表现为反应迅速、适应顾客变化的需智能型企业表现为反应迅速、适应顾客变化的需要和采取正确的顾客解决方案。要和采取正确的顾客解决方案。快吃慢快吃慢!随机应变！随机应变！数据数据n数据n数据是可以记录、通信和能识别的符号，它通过有意数据是可以记录、通信和能识别的符号，它通过有意义的组合来表达现实世界中的某种实体（具体对象、义的组合来表达现实世界中的某种实体（具体对象、事件、状态或活动）的特征。事件、状态或活动）的特征。n商务智能技术可以分析结构化数据、半结构化数据以商务智能技术可以分析
5、结构化数据、半结构化数据以及非结构化数据、静态的历史数据和动态数据流等各及非结构化数据、静态的历史数据和动态数据流等各种类型的数据。种类型的数据。数据：符号、事实和数字数据：符号、事实和数字Happy New Year!How are You?事物运动数据信息记录解释Discrete,objective facts about the worldEasily structured and capturedEasily transferred SenderReceiver处理数据信息知识一个人的垃圾（数据）是另一个人的财富（信息）一个人的垃圾（数据）是另一个人的财富（信息）Data endowe
6、d with relevance and purpose信息是经过某种加工处理后的数据，是反映客观事物规律的一些数据。数据信息是经过某种加工处理后的数据，是反映客观事物规律的一些数据。数据是信息的载体是信息的载体,信息是对数据的解释。信息是对数据的解释。决策离不开信息决策离不开信息n同一事物的信息对于不同的个人或群体具有不同的意同一事物的信息对于不同的个人或群体具有不同的意义。信息的效用在于对决策的影响。高层决策、中层义。信息的效用在于对决策的影响。高层决策、中层管理、基层运营都要决策。管理、基层运营都要决策。n越来越多的人从事与信息有关的工作，信息产业将成越来越多的人从事与信息有关的工作，信
7、息产业将成为全球最大产业。首席信息官为全球最大产业。首席信息官 CIO(Chief CIO(Chief Information Officer)Information Officer)成为企业继成为企业继 CEOCEO、CFOCFO之后又之后又一重要职位。一重要职位。n70%of employee time spent searching for relevant information Most Business Users Dont Have Confidence in Info!n43%of users say theyre not sure if internal informatio
8、n is accuraten77%said bad decisions had been made because of lack of informationBusiness Week study,2019 知识知识nInformation from the human mind(includes reflection,synthesis)，知识是对信息内容进行提炼、比较、挖掘、分析、知识是对信息内容进行提炼、比较、挖掘、分析、概括、判断和推论。概括、判断和推论。n事实性知识和经验知识（隐性和显性）。事实性知识和经验知识（隐性和显性）。n洞察力（洞察力（insightinsight）nReq
9、uires reflection and synthesisnDifficult to structure,capture nOften tacit 信息和知识隐藏在数据中信息和知识隐藏在数据中n商务智能要求有一个坚固、可靠的大型数据库作后盾，建立这样一个数据库的任商务智能要求有一个坚固、可靠的大型数据库作后盾，建立这样一个数据库的任务是极其艰巨的。数据的质量问题也是令人头疼而又不可以掉以轻心的。务是极其艰巨的。数据的质量问题也是令人头疼而又不可以掉以轻心的。n虽然数据是宝贵的财富，然而许多公司并不能充分利用这种财富，因为信息隐藏虽然数据是宝贵的财富，然而许多公司并不能充分利用这种财富，因为信
10、息隐藏在数据中，并不易识别。在数据中，并不易识别。n为了在竞争中占得优势地位，必须识别和应用隐藏在所收集的数据中的信息为了在竞争中占得优势地位，必须识别和应用隐藏在所收集的数据中的信息。挖掘 管理就是决策管理就是决策n决策需要信息，更离不开知识。知识更多地表现决策需要信息，更离不开知识。知识更多地表现为经验为经验学习的结晶。学习的过程是不断地对信学习的结晶。学习的过程是不断地对信息加工处理。信息的收集、加工、传输与利用贯息加工处理。信息的收集、加工、传输与利用贯穿着决策各阶段的工作过程。穿着决策各阶段的工作过程。n信息已成为企业经营中重要性仅次于人才的第二信息已成为企业经营中重要性仅次于人才的
11、第二大要素。大要素。n决策决策=信息信息+经验经验+冒险冒险n商务智能是对企业信息的科学管理。商务智能是对企业信息的科学管理。决策需要信息与知识决策需要信息与知识情报阶段：情报阶段：确定问题确定问题设计阶段：设计阶段：找出解决方案找出解决方案选择阶段：选择阶段：选出解决方案选出解决方案实施阶段：实施阶段：实施方案实施方案返回情返回情报阶段报阶段返回设返回设计阶段计阶段返回选返回选择阶段择阶段决策过程的四个阶段决策过程的四个阶段决策的过程决策的过程发现那些需要引起注意的征兆并加以解释发现那些需要引起注意的征兆并加以解释,如如 销售滑坡、生产成本猛涨、老顾客对新产品的销售滑坡、生产成本猛涨、老顾客
12、对新产品的需求、新竞争对手带来的威胁等。需求、新竞争对手带来的威胁等。最优最优 方案由多种因素决定，如成本、方案由多种因素决定，如成本、实施的难易程度、对员工的要求、方案实施的难易程度、对员工的要求、方案实施的时间顺序等。实施的时间顺序等。执行选中的方案，执行选中的方案，检测实施的结果，检测实施的结果，并作出必要的调整。并作出必要的调整。高效消费者响应高效消费者响应(ECR)及及 时、时、准准 确和无确和无 纸纸 的的 信信 息息 流流 通通 流流 畅，畅，不不 间间 断断 的的 产产 品品 流流 通，通，满满 足足 消消 费费 者者 的的 需需 求求 供应供应 商商零零 售售 商商商店商店
13、消消 费费 者者 ERP/CM企业资源计划管理企业资源计划管理品类管理品类管理 SCM供应链管理供应链管理CRM客户关系管理客户关系管理POS销售时点系统销售时点系统 商业企业商业企业信息系统信息系统 数据爆炸，知识贫乏数据爆炸，知识贫乏 苦恼:淹没在数据中，不能制定合适的决策!数据数据n模式模式n趋势趋势n事实事实n关系关系n模型模型n关联规则关联规则n序列序列n目标市场目标市场n资金分配资金分配n贸易选择贸易选择n在哪儿做广告在哪儿做广告n销售的地理位置销售的地理位置n金融金融n经济经济nPOSn人口统计人口统计n生命周期生命周期 信息流畅通了还需要信息流畅通了还需要？ERP企业资源规划系
14、统SCM供应链管理商务智能BI（business intelligence）B2B、B2CCRMInternet等基础设施数据 新一代决策支持系统新一代决策支持系统交易处交易处理系统理系统DSS软件系统模式软件系统模式OLAP工具工具资料挖掘工具资料挖掘工具外部资料外部资料使用者使用者使用者界面使用者界面DSS资料库资料库数据导向型决策支数据导向型决策支持系统：事务处理持系统：事务处理系统等搜集的大量系统等搜集的大量数据，隐藏对决策数据，隐藏对决策有用的模式和规则，有用的模式和规则，可以用统计方法、可以用统计方法、OLAPOLAP和数据挖掘等和数据挖掘等分析得到，以辅助分析得到，以辅助决策分析
15、用。决策分析用。商务智能商务智能nBusiness Intelligence is a process of turning data into knowledge and knowledge into action for business gainData Warehouse Institute.n商务智能是企业利用现代信息技术收集、管理和分析结构化和非结商务智能是企业利用现代信息技术收集、管理和分析结构化和非结构化的商务数据和信息，创造和累计商务知识和见解，改善商务决构化的商务数据和信息，创造和累计商务知识和见解，改善商务决策水平，采取有效的商务行动，完善各种商务流程，提升各方面商策水平
16、，采取有效的商务行动，完善各种商务流程，提升各方面商务绩效，增强综合竞争力的智慧和能力务绩效，增强综合竞争力的智慧和能力-王茁专著王茁专著三位一体的商务三位一体的商务智能智能.l商务智能不是通常的业务处理。它的目标是如何更快、更容易地做更好的决策。lIBM商务智能解决方案远远不只是数据和技术的组合，BI帮助用户获得正确的数据，发现它的价值，并共享价值。商务智能的驱动力商务智能的驱动力n在商务智能背后有一些商业驱动力，例在商务智能背后有一些商业驱动力，例如：如：n增加收入，减少费用和更有效地竞争的需求。增加收入，减少费用和更有效地竞争的需求。n管理和模拟当前商业环境复杂性的需求。管理和模拟当前商
17、业环境复杂性的需求。n减少减少IT费用和利用已有公司业务信息的需求。费用和利用已有公司业务信息的需求。商务智能如何创造知识和价值商务智能如何创造知识和价值 Business Intelligence ArchitectureOperational and External DataWarehouse modeling and Construction Tools(ETL)Business Intelligence ApplicationsDecision Support ToolsQuery and Reporting OLAP Information MiningAccess enabler
18、sApplication Interfaces Middleware ServicesDepartmentalwarehouses(datamarts)AdministrationGlobal WarehouseOther Information StoresOperational and External DataData ManagementMetadata Management IBM 商务智能解决方案商务智能解决方案Data WarehouseDB2 UDB DB2 Warehouse Manager DB2 Information Integrator OLAPDB2 OLAP Se
19、rverOLAP Server Analyzer DB2 Cognos Data MiningIntelligent Miner for dataIntelligent Miner Scoring/Modeling/Visualization SAP BusinessObjects 智能平台智能平台 商务智能核心技术商务智能核心技术nData warehousingnStore and manage integrated customer datanOLAPnInteractive data queriesnReportingnData miningnInsights into the dat
20、anDiscovery of correlations and patternsnSegmentation and classificationnPrediction and forecasting IBMIBM商务智能产品商务智能产品 （资料来源：美国数据仓库研究院，（资料来源：美国数据仓库研究院，dw-institutedw-institute）美国数据仓库研究院的美国数据仓库研究院的BI体系体系 业务数据分析的类型业务数据分析的类型Increasing#of usersOLAPStatisticalAnalysisStandard Query ReportingDMIncreasingC
21、omplexity数据分析技术的发展可分成报表查询、在线分析处理（数据分析技术的发展可分成报表查询、在线分析处理（OLAP）和数据挖掘）和数据挖掘3个阶段。个阶段。客户流失分析客户流失分析 目标顾客群目标顾客群 OLAP 体育用品公司体育用品公司的数据分析的数据分析 客户智能是商务智能的重要组成客户智能是商务智能的重要组成n客户智能不仅包括了客户知识（客户的消费偏好、喜欢选客户智能不仅包括了客户知识（客户的消费偏好、喜欢选用的接触渠道、消费行为特征等等许多描述客户的对话、用的接触渠道、消费行为特征等等许多描述客户的对话、观察知识）的生成，而且更强调了客户知识在企业中的分观察知识）的生成，而且更
22、强调了客户知识在企业中的分发、使用，直到产生客户智能。发、使用，直到产生客户智能。某移动企业基于某移动企业基于TeradataTeradata的商业智能方案的商业智能方案 各行业电子商务网站各行业电子商务网站算法算法层层商商业业逻逻辑辑层层行行业业应应用用层层商业应用商业模型挖掘算法CRM产品推荐产品推荐客户细分客户细分客户流失客户流失客户利润客户利润客户响应客户响应关联规则、序列模式、分类、聚集、偏差分析关联规则、序列模式、分类、聚集、偏差分析WEB挖掘挖掘网站结构优化网站结构优化网页推荐网页推荐商品推荐商品推荐基因挖掘基因挖掘基因表达路径分析基因表达路径分析基因表达相似性分析基因表达相似性
23、分析基因表达共发生分析基因表达共发生分析银行银行电信电信零售零售保险保险制药制药生物信息生物信息科学研究科学研究相关行业商务应用需求的推动商务应用需求的推动神经网络、决策树、回归分析、粗集、遗传算法神经网络、决策树、回归分析、粗集、遗传算法 n银行n美国银行家协会美国银行家协会(ABA)(ABA)预测数据仓库和数据挖掘技术在美国商业银行的应用增长预测数据仓库和数据挖掘技术在美国商业银行的应用增长率是率是14.914.9。n分析客户使用分销渠道的情况和分销渠道的容量分析客户使用分销渠道的情况和分销渠道的容量 ；建立利润评测模型；客户关；建立利润评测模型；客户关系优化；风险控制等系优化；风险控制等
24、n电子商务n网上商品推荐；个性化网页；自适应网站网上商品推荐；个性化网页；自适应网站n生物制药、基因研究nDNADNA序列查询和匹配；识别基因序列的共发生性序列查询和匹配；识别基因序列的共发生性 n电信n欺诈甄别；客户流失欺诈甄别；客户流失n保险、零售n政府部门、教育机构、医疗机构和公用事业等。利用商务智能的企业现在已越来越多，遍及各行各业。商务智能驱动力商务智能驱动力 SAP AG 1999GlobalizationFaster reaction to marketDecentralizationIncreasing importance of serviceSmaller marginsB
25、usiness Trends 商务智能用户 商务智能的作用商务智能的作用n制定合适的市场营销策略制定合适的市场营销策略 n改善顾客智能改善顾客智能 n经营成本与收入分析经营成本与收入分析 n提高风险管理能力提高风险管理能力 n改善业务洞察力改善业务洞察力 n提高市场响应能力提高市场响应能力 商务智能系统的功能商务智能系统的功能 n数据集成n找到特定商业问题所有的相关信息经常是一件困难而费力的事情找到特定商业问题所有的相关信息经常是一件困难而费力的事情n信息呈现 n经营分析 n战略决策支持 商业智能的发展趋势商业智能的发展趋势nGartner公司的调查表明，公司的调查表明，2000年到年到201
26、9年之间，安年之间，安全是企业全是企业IT投资排在第一位的主题，而商务智能项目投资排在第一位的主题，而商务智能项目的投资在的投资在2000年时仅排在第年时仅排在第14位，位，2019年却突飞猛进，年却突飞猛进，排到了第一位排到了第一位nBI公司的收购：公司的收购：OracleOracle收购收购HyperionHyperion，SAPSAP收购收购Business ObjectsBusiness Objects，IBMIBM收购收购Cognos Cognos n从战略型的从战略型的BI到操作型或者实时型的到操作型或者实时型的BIn更成熟的数据分析和展现技术更成熟的数据分析和展现技术n关注绩效、
27、关注价值、关注数据质量关注绩效、关注价值、关注数据质量 中国企业对商务智能的应用中国企业对商务智能的应用n商务智能在中国的发展尚处于起步阶段，大部分企业商务智能在中国的发展尚处于起步阶段，大部分企业对商务智能仍然缺乏必要的了解。对商务智能仍然缺乏必要的了解。n据据IDC预测，如果中国经济继续保持高速增长，商务预测，如果中国经济继续保持高速增长，商务智能软件在中国内地市场的年销售额平均增长至少在智能软件在中国内地市场的年销售额平均增长至少在65.6%，但到，但到2019年中国内地的商务智能软件市场年中国内地的商务智能软件市场规模仍不到一亿美元。规模仍不到一亿美元。n中国虽有宝钢、中国海关以及大的
28、银行和电信公司进中国虽有宝钢、中国海关以及大的银行和电信公司进行过或正在进行数据仓库和数据挖掘项目，但是大部行过或正在进行数据仓库和数据挖掘项目，但是大部分企业在这方面的应用还几乎为零。分企业在这方面的应用还几乎为零。中国企业对商务智能的应用（续）中国企业对商务智能的应用（续）n虽说几乎每个中国的企业都需要商务智能，但大规模的分析主要虽说几乎每个中国的企业都需要商务智能，但大规模的分析主要集中在竞争激烈的生活消费品行业、零售业以及金融服务业（如集中在竞争激烈的生活消费品行业、零售业以及金融服务业（如银行、保险等）。银行、保险等）。n国内的生活消费品行业和零售业利润薄，信息化程度低，资金实国内的
29、生活消费品行业和零售业利润薄，信息化程度低，资金实力不强，因而没有足够能力实施。被商务智能软件厂商们看好的力不强，因而没有足够能力实施。被商务智能软件厂商们看好的反而是电信、金融、航空等行业，因为这些行业的信息化程度偏反而是电信、金融、航空等行业，因为这些行业的信息化程度偏高，并且这些行业从某种意义上讲都是服务业，客户的需求扮演高，并且这些行业从某种意义上讲都是服务业，客户的需求扮演着重要角色。这些行业着重要角色。这些行业也也可以利用商务智能来补充和完善它们实可以利用商务智能来补充和完善它们实施的施的CRM和和ERP系统。系统。n商务智能厂商们也看好正在实施电子政务计划的中国政府部门。商务智能
30、厂商们也看好正在实施电子政务计划的中国政府部门。商务智能的市场分额商务智能的市场分额 商务智能供应商商务智能供应商 中国商务智能市场中国商务智能市场n起步较晚n差距拉大 n普及有待时日 n供应商有待成长 为什么没有广泛使用？为什么没有广泛使用？n数据挖掘正在快速的发展，技术的研究和开发已经走在很前沿的地方，数据挖掘应用面已经扩充了很多，但是仍然没有希望的高，为什么？n希望在多少年内达到数十亿元的盈利？n一种增值服务（Not bread-and-butter），不能认为高不可攀，所以不去过问。n一门年轻的技术，需要和实际结合，解决现实问题。国内应用存在的问题国内应用存在的问题n数据积累不充分、不全面，业务模型构建困难，缺少有经验的实施者。商务智能动态商务智能动态 n实时n标准化n嵌入式商务智能 n移动商务智能 n大众化趋势 n供应商的动向 n易用性
