1、获获客客+挖潜客挖潜客+留留客客+营营贵贵客客全网精准营销大数据全网精准营销大数据平台实施部署方案平台实施部署方案第一部分：传统营销的局限性在哪里？案例分析第一部分：传统营销的局限性在哪里？案例分析怎样利用互联网怎样利用互联网+大数据实现精准营销？提高数据的价值？大数据实现精准营销？提高数据的价值？第二部分：第二部分：大数据总体规划大数据总体规划+建设路径图建设路径图第三部分：第三部分：可以采集和利用整合那些数据为全网营销？可以采集和利用整合那些数据为全网营销？第四部分：第四部分：怎样部署获客怎样部署获客+挖潜客挖潜客+留客留客+重贵客精准营销平台？重贵客精准营销平台？第五部分第五部分：立项建
2、议：立项建议：第一步：搭建第一步：搭建Hadoop+客户统一视图客户统一视图企业倒闭关闭潮企业倒闭关闭潮-企业怎么转型？企业怎么转型？品牌品牌半年关闭半年关闭10亿以上企业1244间中小企业36543间李宁244间安踏56间匹克333间七匹狼347间九牧王73间卡奴迪路53间真维斯194间希努尔46间波司登8216间净减少为3436间班尼路388间O2O全网社会化数全网社会化数 据个性化精准营销据个性化精准营销采集整合挖掘利用采集整合挖掘利用 大数据驱动大数据驱动传统营销模式的转型？传统营销模式的转型？传统企业模式传统企业模式互联互联网网+大数据模式大数据模式企业中心-层层分销企业平台化-去中
3、心 用户个性化以企业产品为中心以客户体验为中心感知客户体验情感需求品牌营销一对一个性化精准营销由内到外有外到内企业内部业务系统数据全网客户触点数据 社会化精准营销按设计批量生产按需定制流程驱动IT时代数据驱动DT时代某综合房地产企业数某综合房地产企业数据据采集采集+视视图图+画像画像+推推荐荐精精准营销准营销猜猜 你你 想想 买买 A A线上推荐线上推荐线下电话线下电话 想买想买A A楼盘楼盘中介中介样板房样板房活动活动A ADSLDSL自己自己网站网站三方三方网站网站按需按需定制定制房房型型Tel:400-（需求特征（需求特征*产品产品特特征征）*行行为时为时机机 00-31368业务业务系
4、统系统某房某房产产集集团团某大型服装集某大型服装集团团获获客客+挖挖潜潜客客+留留客客+重贵重贵客客精精准准营销营销按需按需定制定制产产品品猜猜 你你 想想 买买 A A精准营销精准营销想买想买A AADSL活动活动自有自有网站网站三方三方网站网站业务业务系统系统经销商经销商门店门店服装服装企业企业Tel:400-（需求特征（需求特征*产品产品特特征征）*行行为时为时机机 00-31368某汽车集团某汽车集团销销售售的渠的渠道道和和方方式的式的局局限在限在哪哪里里？怎样利用大怎样利用大数数据据和互和互联联网网+实实现现精准精准营营销？销？创创新新产产品研品研发发？提？提高高数数据据的价的价值值
5、？经销商经销商4 4S S店店ADSL猜猜 你你 想想 买买 A A精准营销精准营销活动活动Tel:400-想买想买A A定制定制产品产品研研发发（需求特征（需求特征*产品产品特特征征）*行行为时为时机机 00-31368自有自有网站网站三方三方网站网站APP业务业务系统系统某汽某汽车车集集团团Tel:400-00bigdataunion.org某汽车经销商某汽车经销商4S店现在收店现在收集集三个三个行行业网业网站站注册注册数数据据电电话话推推销销数据种类数量（人）电话回访有效率购买数注册3181381人55%有意向9-12台每月3.5%试驾2180评论598搜索28904没有利用询价838易
6、车网爱卡网汽车交易-31368Website:经销商经销商4 4S S店店业务业务系统系统某汽某汽车车集集团团Tel:400-某汽车经销商某汽车经销商4S店应用店应用数数据采据采集集+视图视图+画画像像+推荐推荐后的后的精精准营准营销销猜猜 你你 想想 买买 A A线上推荐线上推荐线下电话线下电话 想买想买A A（需求特征（需求特征*产品产品特特征征）*行行为时为时机机 00-31368ADSL活动活动自有自有网站网站三方三方网站网站业务业务系统系统经销商经销商4S店店某汽某汽车车集集团团获客获客+联系意向客联系意向客户户+购买洽购买洽谈谈+购买数转化率购买数转化率数据种类获客数量（人）电话联
7、系获得的潜有效洽谈购买数购买数在客户（有意向）注册、试驾、评论309638%12%3.3%搜索、询价2890426%12%1.7%ADSL393000（某城市）13%6%0.4%自有专卖店点击16268727%13%1.3%整个网站注册5839026%0.7%0.03%整个网站进入点击34839023.6%1.5%0.008%自有网站注册试驾67943%16%3.8%自有网站进入点击987029%8%1.1%门店+活动客服+售后86903680Tel:400-00-31 368Website:bigdataun ion.orgCRM业务业务系系统统数数据据触点数据购买转化触点数据购买转化率率-
8、达到销售目达到销售目的的门店门店活动活动咨询咨询交互交互数数据据易车易车、汽、汽车车交易交易询价询价+试试驾驾数数据据300手机号手机号易车易车、汽汽车车交易交易全网全网数据数据其他其他所有所有品品牌牌+上网上网自己自己WEBAPP行为行为数据数据埋点埋点 行为行为 数据数据 采集采集易车易车、汽、汽车车交易交易 搜搜索索21820+浏览浏览8900+会员客户关会员客户关怀怀精精准营准营销销谁最谁最可能可能近近段会段会有有买车买车需需求的求的名名单单每一每一型号型号价价位车位车所所对应对应的的客户客户清清单推单推荐荐门店门店根根据据行行为为数数据据推荐推荐线上线上自自动动推推荐荐对对应应点点击
9、击行行为为组组合合的车的车其他其他推荐推荐卖掉卖掉50辆雅辆雅阁阁车前车前300名单列表名单列表卖掉卖掉50辆雅辆雅阁阁车前车前1000名单名单推推荐荐Spark RDD画像画像身份身份 产产品品 订单订单 行为行为 画画像像 群组群组 价值价值 挖挖掘掘数据数据 集成集成 平台平台用户用户 统一统一 视图视图身份身份产品产品 行为行为 基本基本 属性属性 标签标签数据数据 抽取抽取 集成集成 融合融合身份身份 基本基本 属性属性 标签标签统统一一视图视图卖卖10台台3%）转化率转化率卖卖30台台1%）转化率转化率卖卖30台台0.01%）转化率转化率ADSL每家每家每每户户 上网上网数据数据T
10、el:400-某大型家电集某大型家电集团团统一视统一视图图+画画像像+推荐引推荐引擎擎精精准准营销营销按需按需定制定制产产品品（需求特征（需求特征*产品产品特特征征）*行行为时为时机机 00-31368猜猜 你你 想想 买买 A A精准营销精准营销想买想买A AADSL活动活动自有自有网站网站三方三方网站网站业务业务系统系统某家某家电电集集团团经销商经销商门店门店 专卖专卖店店Tel:400-00-31368某大型家电企业社会化数据转某大型家电企业社会化数据转型型案例案例问题问题困惑困惑需求需求目标目标解决解决方案方案效果效果成果成果1、客户信息重复采集（接触数据）2、客户信息共享程度低（系统
11、数据没共享）3、一个客户N个触点数据被记录N次（交易数据）4、数据质量低（数据缺失不准确）5、无统一客户视图、无法识别客户6、没有分清客户的类别、购买能力、需求时机、使用状态、偏好7、不知道产品销售分布、那些人买了？那些人会买？变动趋势？8、盲目推销：不需要的重复打、需要的没有联系、需求时间点不清9、成本增加、制约营销创新、制约产品创新、制约竞争力1、把全网触点企业数据采集来2、统一客户唯一识别编码3、可视化客户所有数据链信息4、知道产品卖到了那里？那些人群？那里最多？趋势变化？5、售后：了解客户问题和需求，主动服务和推荐6、关怀：知道客户是谁？价值？针对性的关怀7、营销：预测、活动、广告、渠
12、道8、销售：购买兴趣能力与购买时间动机匹配9、业务创新：线上线下全网精准营销1、搭建Hadoop大数据平台 2、采集全网触点企业数据3、建客户统一视图4、360度客户画像5、推荐引擎6、可视化分析和APP7、全网精准营销8、从全网触点数据采集到全网精准营销形成闭环1、企业全网客户都有一个唯一标识码2、任意查询检索任一客户的所有数据信息3、节省15%以上客户服务营销商业成本4、获客增加了22%以上5、潜在客户转化为购买客户率提高5%以上6、会员客户复购和成套购买率提高了7%以上7、活动和广告投放效率提高了9%以上第二部第二部分分 大数据戓略大数据戓略+建设路径图建设路径图总体战略规划、分步实施分
13、析应用总体战略规划、分步实施分析应用三阶段三阶段+六大步六大步1、搭建、搭建Hadoop+见成效的应用（预见成效的应用（预研研阶段阶段）2、分步部署各类分析应用（应用部署、分步部署各类分析应用（应用部署阶阶段段）3、全面全网、全面全网全全流程大数据驱动按需定流程大数据驱动按需定制制+物流物流优优化化+实实时时工工业业4.0面向业务，提供决策分析、生产营 销类应用，以指标为基础，结合驾 驶舱、数据图表、报表展现、数据 服务封装提供等多种多样的展现形 式，充分满足使用要求。面向业务目标，分析运营KPI指标，结合一线生产业务人员的需求，构 建运营团队组织、规范运营标准流 程，推动大数据在业务各生产环
14、节 落地流转，丌断增值。基于分布式、混搭式多种架构，对 结构化/非结构化的数据进行整合、计算、分析、运营，提供用户特征 信息，满足IT和业务的经营分析及 监控支撑的需要。提供数据的统一调度管理、数据质 量管理、数据安全管理、统一监控 管理、元数据管理、数据模型管理、数据隐私管理。数据数据 管理管理 中心中心数据数据 运营运营 中心中心数据数据 处理处理 中心中心数据数据 应用应用 中心中心“四个中四个中心心”建设发挥大数据价值建设发挥大数据价值数据治理数据治理数据质量数据质量安全管理安全管理系统管理系统管理Hana EMC VMwareOracle、DB2TD关系数据库ETL数据源数据源文本、
15、影印OCR扫描pdf音频、视频 图像、照片文字会话 录音语音台SyncsortSqoop&Kettle科大讯飞科大讯飞计算层计算层实时自实时自助助BIBI分析分析/交互式交互式SQLSQL ImpalaImpala、数据挖掘、数据挖掘 SparkSpark Mllib,R,MahoutMllib,R,Mahout实时数实时数据据处处理理SparkSpark StreamingStreaming存储层存储层数据存数据存储储 HDFSHDFS 批处批处理理 MapReduce,MapReduce,Hive,Hive,数据查数据查询询 HBaseHBaseSolr ConnotateAPP、WebW
16、IFI、云平台Splunk FlumeKafka总体规划统一平台、分步实施分析应总体规划统一平台、分步实施分析应用用Yar n多多用户用户租租用用管理管理日志数据监控、RFID 感应器、机器数据共享分析平台数据 统一 存储 查询画像推送精准营销DW迁移与优化物流 产品 研发 分析订单订单 分析分析 配送配送 优化优化行情 舆情 专业 知识 库IT安全 日志 性能 分析DW迁移与优化客户画像与精准营销客户统一视图客户 关怀 营销分析应分析应用层用层云服云服务层务层Dashbosrd 固定报表实时推荐 实时交互多维查询 Ad hoc知识检索 数据录入预测挖掘 探索分析APP推荐 流数据分析大数据戓
17、略大数据戓略+建设路径图建设路径图总体战略规划、分步实施分析应用总体战略规划、分步实施分析应用步骤步骤内容内容目的目的成果成果第一步第一步搭建搭建HadoopHadoop平台平台 +做做一一个个基基本应本应用用（实（实现现客客户户统一统一视视图）图）实现实现客户客户标标识唯识唯一一编码编码 打下打下数据数据分分析的析的基基础础第二步第二步部署部署企业企业级级大数大数据据（Hadoop+OpenstackHadoop+Openstack）云云平平台台采集采集抽抽取取数据数据+建建企企业数业数据据池池+实现实现历历史数史数据据统一统一存存储查询储查询数据数据采集采集存存储运储运算算分析分析共共享平
18、台享平台 数据数据池池+数据数据银银行行第三步第三步迁移迁移DWDW（BIBI）到到HadoopHadoop上优化上优化融合融合离线离线+在在线线+实时分析实时分析第四步第四步部署部署画像画像精精准营销准营销细粒细粒度分析度分析 全网全网精准精准营营销销第五步第五步基于基于大数大数据据的创的创新新型电型电商商（O2OO2O）平平台台整合整合线上线上线线下精下精准准营销营销平平台台第六步第六步产品产品创新创新按按需定需定制制+物流优物流优化化+日志运日志运维维等大等大数数据应用据应用全面全面大数大数据据分析分析DTDT价值价值第三部分第三部分企业可以采集和利用整合那些数据企业可以采集和利用整合那
19、些数据-为企业全网精准营销服为企业全网精准营销服务？务？Tel:400-00-31368Website:bigdataunion.org数据池数据池建立企业数据池建立企业数据池+数据银行数据银行存储存储 备份备份 数据数据数数据据SAP仓仓库库ERPMESAppsMPP其他其他结构结构化数据化数据CRM微博微博 论坛论坛WEB外外部部数数据据APPAPPWEBWEBQQQQ数数据据电电商商微信微信监控监控 位置位置机器机器 数据数据行为行为 数据数据实时实时事件数事件数感感应应据据器器 RFIDRFID数据存储数据存储报表报表查询查询非结非结构化数构化数文文本本 据据影音影音 影影印印 视频视
20、频图图片片语语 音音 云云 照照片片客客服服 日志日志文档文档查询查询数据数据查询查询信息信息检索检索图形图形图片图片查查询询数据数据共享共享数据数据分析分析会员系统数据Sqoop售后系统数据Kettle渠道系统数据财务CRM文字会话录音语音台科大讯飞科大讯飞数据存储数据存储HDFSHDFS 批处批处理理 MapReduceMapReduceFlume其他核心业务 系统数据Kafka电商电商 WEB WEB APPAPP行为行为数据数据全流全流程机程机器感器感 应器应器 数据数据进进入网入网店店页页面面 注注册登册登录录点点击选击选购购 搜搜索商索商品品鼠鼠标停标停留留 时时间位间位置置放放入
21、购入购物篮物篮支支付交付交易易离离开网开网店店网网页页机机器产器产生生的的数据数据物物流数流数据据RFRFI ID D商品商品移移动动 识识别数别数据据其其他行他行为为数数据据Spark StreamingStorm Spark MLlib其他核心业务系统数据API、ETL销售物流 物料KafkaTel:40系系0-0统统0-3结结13构构68 化化W数数eb据据site:bigdataunion.org行为数据行为数据数据计数据计算算HiveHive、HBaseHBase 、ImpalaImpala、SparkSpark SQLSQL企业全流程各种数据采企业全流程各种数据采集集Tel:400
22、-00-31368数据数据来源来源抓取抓取的指的指标标数据数据数据数据源列表源列表业务系统数据客户数据+产品特征+订单数据+维修数据CRM+销售+会员+售后ADSL等其他身份：姓名+手机+邮箱+地址+电话行为：点击网站的行为数据（如网站）电信+长城宽带+联通+移动自有网站身份数据：注册+IP+评价论坛行为数据：点关注+试驾+注册+点击浏览 系列型号+鼠标停留+Cookie+IP企业官网+电商+自媒体+APP主要行业+友商+第三方网站品牌+系列型号+价格+评价+经销商+促销等数据百度房产+搜房网+房产交易网+新浪乐居+腾讯房产+搜 狐房地产+焦点房产+网易房产+凤凰房产+安居客房产+我爱我家+链
23、家房产+淘房网+楼盘网+区域主要网站+门 店楼盘+咨询+活动数据第三方网站身份数据：注册+IP+评价论坛行为数据：点关注+试驾+注册+点击浏览 系列型号+鼠标停留+Cookie+IP百度房产+搜房网+房产交易网+新浪乐居+腾讯房产+搜 狐房地产+焦点房产+网易房产+凤凰房产+安居客房产+我爱我家+链家房产+淘房网+楼盘网+区域主要网站+门 店楼盘+咨询+活动数据第三方APP门店看车询问型号+价格+其他指标+驻留+情 绪电话咨询 活动询问型号+价格+其他指标投诉+咨询+售后+活动 身份数据+意向问题数据社会社会化数据化数据身份身份+行为行为+交易交易订订单单+基础基础数数据据人口人口+交易交易+
24、政府政府采集的数据源采集的数据源第四部分第四部分怎样部署获客怎样部署获客+挖潜客挖潜客+留客留客+重贵客全网精准营销平重贵客全网精准营销平台台第四部分第四部分 获获客客+挖潜客挖潜客+留客留客+重重贵客贵客全网精准营销平全网精准营销平台台实施方实施方案案第一步、搭建第一步、搭建Hadoop大数大数据据平台平台第二步、采集数据：抽取业务系统数第二步、采集数据：抽取业务系统数据据+采集自有网站和第三采集自有网站和第三方方网站数据网站数据第三步、客户唯一编码：把客户产品订单行为数据清洗为唯一编码，建客户统第三步、客户唯一编码：把客户产品订单行为数据清洗为唯一编码，建客户统一一视视图图 第四步、客户画
25、像：挖掘分析客户个性化需求特征，部署客第四步、客户画像：挖掘分析客户个性化需求特征，部署客户户画像画像第五步、匹配需求者：匹配客户需求与产品特征，部署推第五步、匹配需求者：匹配客户需求与产品特征，部署推荐荐引擎引擎 第六步、场景购买第六步、场景购买转化：场景推荐精准营销转化：场景推荐精准营销附：附：效果和目的：（以上数据依据实际效果和目的：（以上数据依据实际数据和测算数据数据和测算数据）应用举例应用举例在在30天天内内把把500台本台本AAA楼盘卖掉楼盘卖掉邀请前邀请前300位客户名单列表参加酒会？位客户名单列表参加酒会？推荐给推荐给前前1000最有可能购买的客户列表并自劢推荐？最有可能购买的
26、客户列表并自劢推荐？近段时间那些人想买近段时间那些人想买AAA楼盘的列表？楼盘的列表？在哪里投放广告戒营销活在哪里投放广告戒营销活劢转化率最高？劢转化率最高？哪些人近段最可能买房？喜欢哪一类房型？转化买我的房的策略？哪些人近段最可能买房？喜欢哪一类房型？转化买我的房的策略？通过抓取收集各类触点数据获取更多潜在客户通过抓取收集各类触点数据获取更多潜在客户全网触点潜在客户和会员客户价值转全网触点潜在客户和会员客户价值转化化潜在客户潜在客户购买客户购买客户高价值客户高价值客户原CRM售后销 售核心业务系 统数据企业网站电商APP自媒体第三方社会 网站电商APP社会化人口 产品行为数据其他渠道关注 接
27、触过产品门店客服活动 互动提高客户提高客户 再销售再销售 转化率转化率提高提高高价值客户高价值客户 购买金额购买金额实实 时时 推推 荐荐营营 销销 活活 动动营营 销销 促促 销销营营 销销 广广 告告其其 他他 服服 务务会会 员员 关关 怀怀客户分析客户分析 产品分产品分析析 订单分析订单分析 行为行为分析分析提高复购和转销售提高复购和转销售社会化全网社会化全网触触点点客户客户库库把潜在客户把潜在客户 转化为购买转化为购买 客户客户把触点客户把触点客户 转化为潜在转化为潜在 客户客户聚合客户全网触点数据聚合客户全网触点数据20112011年购年购买买一台一台本田本田雅阁雅阁2 20101
28、2 2年维年维修修留下留下 了地了地址电址电话话邮箱邮箱2 201013 3年年月月进入进入 到集到集团官团官网网注册注册 留下留下手机手机邮邮箱箱2 201013 3年在年在本本田和田和 别克别克店有店有过过咨询咨询2 201014 4年进年进入入到某到某 品牌品牌APPAPP留下点留下点 击产击产品行品行为为数据数据20152015年年6 6月在月在易易车车 网点网点评过评过某某品牌汽品牌汽 车车20142014年年9 9月在爱月在爱卡网卡网注册注册询询价价接触接触过某过某 品牌品牌全网全网轨轨迹迹酒会邀请酒会邀请需求预测需求预测品牌型号推荐品牌型号推荐在某在某品牌品牌 标签标签画像画像推
29、荐推荐服务关怀服务关怀数采宝数采宝推荐宝推荐宝画像宝画像宝线上推荐线上推荐把匿把匿名用名用户户转化转化为为实名实名用用户户 把实把实名用名用户户转化转化成成购买购买客客户户提高提高客户客户场场景购景购买买转化率转化率 挖掘挖掘忠诚忠诚潜潜在流在流失失客户客户价价值值 提高提高产品产品再再销售销售转转销售销售金金额额数聚宝数聚宝触点数据采集聚合触点数据采集聚合+统一统一视视图图+画画像像+推推荐荐业务业务 系统系统 数据数据抓取抓取全系全系 车型车型 数据数据特征特征需求需求关注关注客户清单客户清单电话短电话短信邀请信邀请线上线上推荐推荐前前1 10 00 00 0可可能能购买购买 者者标签标签
30、 画像画像视图视图百度百度+汽汽车车之家之家+太太平洋平洋汽汽车车+易易车车网网+爱爱卡汽卡汽车车+58+58汽汽车车+汽车汽车大全大全+汽车汽车报报价大价大全全+搜狐搜狐汽汽车车+汽汽车车报价报价+车友车友会会+爱买爱买车汽车汽车车头条头条+区域区域主主要网站要网站门店门店+咨咨询询+活活动动数数据据视图视图视图视图系统模块功能系统模块功能第二大模块第二大模块数据抽取数据抽取 聚合清洗聚合清洗 整合建模整合建模第三大模块第三大模块用用 户户 主 数 据主 数 据 画画 像像第四大模块第四大模块数据服务数据服务电商电商WEBWEBAPPAPP接触数据接触数据第三方第三方电电商商WEBWEBAP
31、PAPP、电信数据、电信数据门店门店客服互客服互动数据动数据业务系业务系统数据统数据APPAPP营销宝营销宝会员关怀会员关怀标签查询标签查询营销活动营销活动线上线下线上线下 精准推荐精准推荐聚合聚合全网全网用用户接户接触触数据数据 清清洗洗整合整合形形成唯成唯一一标示标示提供提供给其给其他他系统系统和和部门部门调调用用对每对每一标一标签签用用户户画画像像 分类分类群组群组并并挖挖掘掘发发现现 其数其数据价值据价值不同不同场景场景为为客户客户提提高高 服务服务提高提高购购买转买转化化率率 提高提高接触接触客客户转户转化化率率标签标示标签标示画像画像服务服务360360全景画像全景画像9 9个属性
32、个属性180180个维度个维度63006300个触点个触点分类分分类分群分组群分组9 9个门类个门类2727个群个群18001800个组个组数据价值挖掘解析数据价值挖掘解析第一大模块第一大模块全网数据采集全网数据采集行为数据驱劢的个性化推荐服行为数据驱劢的个性化推荐服务务基于客群的推荐客户画像（客群）客户画像（客群）客户标签客户标签产品（订单、行为）标签产品（订单、行为）标签历历 史史 购购 买买 推推 荐荐当当某某 人人 发发 生生 行行 为为 时时在线在线实实时时评分评分匹匹配配产品（订单、行为）画像产品（订单、行为）画像客户客户身份身份 属性属性数据数据交易交易售后售后 业务业务系统系统
33、全网全网接触接触 行为行为数据数据产品产品特征特征 属性属性数据数据交易交易数据数据被行被行为数据为数据基于产品群的推荐群广告推荐购购 买买 到到 期期 推推 荐荐相相 关关 搭搭 配配 推推 荐荐客客 群群 相相 关关 推推 荐荐客客 户户 行行 为为 推推 荐荐客客 户户 属属 性性 推推 荐荐产产 品品 交交 易易 推推 荐荐产产 品品 特特 征征 推推 荐荐产产 品品 优优 惠惠 推推 荐荐产产 品品 相相 关关 推推 荐荐产产 品品 搭搭 配配 推推 荐荐客客 群群 相相 关关 推推 荐荐产产 品品 群群 相相 关关 推推 荐荐数据源数据源画像画像Website:bigdatauni
34、on.orgWEB、APP、电商、门店、电商、门店 秒级实时推荐精准营销秒级实时推荐精准营销仸何行为发生时仸何行为发生时RDBMSEDWwrite&read fine-grain DataOff-lineData Mart/ModelReal Time ProcessGross-grain Data社交媒体WEB数据移动位置APP数据视频机具数据客户CRM身份数据历史交易数据账单明细订单数据Near-line(reads)RDBMSNOSQLKafkaOLTP在线评分模型Zementis实时预测模型PMML数据集市Data Mart挖掘模型Mining Model行为模式模型最佳产品模型营销指
35、标模型秒级实时个性化推送秒级实时个性化推送交互执行实时分析评分规则 预测模型历史数据 挖掘分析探索分析 知识库Batch process+匹匹 配配 身身 份份行行 为为产产 品品全网触点客户和全渠道营销（人工方式推荐）全网触点客户和全渠道营销（人工方式推荐）CRMCRM订订单单已有已有客客户户电话电话活动活动推推销销门店门店咨询咨询客客户户电话电话活动活动推推销销ADSLADSL点击点击客客户户电话电话活动活动推推销销参加参加活动活动客客户户电话电话活动活动推推销销区域区域人口人口基基础客户础客户电话电话活动活动推推销销其他其他渠道渠道来来源客户源客户电话电话活动活动推推销销 网网站站APP
36、APP注册注册客客户户网网站站APPAPP点击点击客客户户软文软文评价评价微微博客户博客户电话电话活动活动推推销销自自 有有 电电 商商网网站站APPAPP注册注册客客户户网网站站APPAPP点击点击客客户户软文软文评价评价客客户户电话电话活动活动推推销销第第 三三 方方 电电 商商自己自己网站网站一对一对一一推推荐荐自己自己A APPPP微信微信一对一对一推荐一推荐第三第三方网站方网站 一对一对一推荐一推荐第三第三方方APP APP 一对一对一推荐一推荐门店门店活动活动渠渠道道 一对一对一推荐一推荐线上线上线下线下关关联联 一对一对一推荐一推荐电话电话 一一对对一推荐一推荐客户客户 统一统一
37、 视图视图 标签标签 画像画像需求需求 分析分析推荐推荐引擎引擎产品产品 特征特征 分析分析在在 线线 匹匹 配配全网触点客户和全渠道营销（自劢推荐）全网触点客户和全渠道营销（自劢推荐）CRMCRM订订单单已有已有客客户户门店门店咨询咨询客客户户参加参加活动活动客客户户ADSLADSL点击点击客客户户区域区域人口人口基基础客户础客户其他其他渠道渠道来来源客户源客户网网站站APPAPP注册注册客客户户网网站站APPAPP点击点击客客户户软文软文评价评价微微博客户博客户自自 有有 电电 商商网网站站APPAPP注册注册客客户户网网站站APPAPP点击点击客客户户软文软文评价评价客客户户第第 三三
38、方方 电电 商商自己自己网站网站推荐推荐D D汽车汽车自己自己A APPPP微信微信推荐推荐D D汽车汽车第三第三方网站方网站 推荐推荐D D汽车汽车第三第三方方A APP PP 推荐推荐D D汽车汽车门店门店活动活动渠渠道道 推荐推荐D D汽车汽车线上线上线下线下关关联联 推荐推荐D D汽车汽车直销直销员电话员电话 推荐推荐D D汽车汽车D D品牌品牌 三厢三厢 红色红色C C 级轿级轿 车车D D品牌品牌 红色红色 中号中号 垫子垫子在在 线线 匹匹 配配兴趣兴趣偏好偏好 女性女性2525岁岁 每月每月8000 8000 元工资元工资 喜喜欢欢红色红色 活活泼泼开朗开朗 买买A A品品牌牌
39、汽汽 车一年车一年购买购买时机时机 前周前周2 2次到次到 专卖专卖店咨店咨询询D D汽车汽车上上 周周3 3网站网站注注 册册点击点击DCDC汽车汽车 在在A AP PP P关注关注 评价评价过过D D汽车汽车姓名姓名年年龄龄性性别别手手机机家庭家庭人口人口小小区等级区等级同学同学同事同事朋朋友友收入收入历史历史购购买产品买产品注册注册询询价价放放购购物物篮篮历史历史购买购买订订单评论单评论搜索搜索点击点击跳跳转停留转停留上那上那些些网网站站关注关注点点击击商商品品上网上网习惯习惯购买购买时机时机购购买渠道买渠道咨询咨询问题问题关关注要点注要点客户客户兴趣兴趣习习惯偏好惯偏好客客 户户 唯唯
40、 一一 编编 码码统统 一一 视视 图图全渠全渠道营销道营销推荐推荐引擎引擎视视图图标标签签画像画像推全推全网触网触点点数据数据 大数据精准营销系统实施后达到的大数据精准营销系统实施后达到的目目的和的和效效果果一、提高会员客户的忠诚度粘性，提高会员再销售和转销售一、提高会员客户的忠诚度粘性，提高会员再销售和转销售 二、把网二、把网上门店等全网触点品牌的客户转化为潜在购买客户上门店等全网触点品牌的客户转化为潜在购买客户 三、实现线上和线三、实现线上和线下推荐下推荐四、实现房找人，人找房四、实现房找人，人找房，对新产品戒清库存产品推荐给目标客户对新产品戒清库存产品推荐给目标客户1、清楚哪些人买了我
41、那些产品，那些产品被哪些人买了？、清楚哪些人买了我那些产品，那些产品被哪些人买了？2、哪些产品应推荐什么产品，给哪些人推荐什么产品、哪些产品应推荐什么产品，给哪些人推荐什么产品3、邀请前、邀请前1000位客户名单列表？位客户名单列表？4、推荐给前、推荐给前10000最有可能购买的客户列表并自劢推荐？最有可能购买的客户列表并自劢推荐？5、近段时间那些人想买品牌的列表？、近段时间那些人想买品牌的列表？6、在哪里投放广告戒营销活劢转化率最高？、在哪里投放广告戒营销活劢转化率最高？7、哪些人近段最可能派产品？喜欢哪一款？、哪些人近段最可能派产品？喜欢哪一款？8、通过抓取收集各类触点数据获取哪些人近段想
42、买类似的产品？、通过抓取收集各类触点数据获取哪些人近段想买类似的产品？第一步第一步搭建搭建Hadoop大数大数据据平台平台安装安装3-12台服务器台服务器安装安装Cloudera CDH5.4集群调优集群调优角色CPU内存硬盘网卡系统盘数据盘主节点：NN/2NN/SNN JT/BJT/HM2C Intel E68核128GSAS 500G*4 RAID101Gb Ethernet*4Bonded普通节点：DN/RS2C Intel E68核96GBSAS500G*2RAID1SATA 1T*12JBOND1Gb Ethernet*4Bonded选择服务器配置和数量，安装部署硬件环选择服务器配置
43、和数量，安装部署硬件环境境建议建议按一个按一个集集群群3-123-12个节点个节点硬件硬件环境：环境：主机主机为为PCPC ServerServer（4CPU4CPU*6core6core，内内存存128G128G，磁磁盘盘为为1212*2T+22T+2*600G600G），），hadoophadoop方方案案为为M+SM+S部部署署方案方案，管理管理节节点点 2 2台，台，执执行行节点节点根根据数据数据据量确量确定定，建，建议议1212台台，共共1414台。台。网络网络环境：环境：万兆万兆网卡网卡交交换机换机带带宽为宽为每每端端口口10000M10000M若需若需要交要交换换机为机为级级连方
44、连方式式，保，保证证每端每端口口带宽带宽不不低低于于10000M 10000M 软件软件环境：环境：操作操作系统系统：RedHat6.5RedHat6.564-bit64-bit，JDKJDK 1.71.7 up29up29 64-bit64-bit，Hadoop:Hadoop:CDH5.4.7CDH5.4.7或或以以上版本上版本Hadoop版本的选择与搭建版本的选择与搭建HadoopHadoop存储与存储与SQLSQL分析计算可选方案分析计算可选方案ClouderaImpala星环科技星环科技Spark华华为为中兴通讯中兴通讯Stinger、DrillPresto、TajoPhoenixBi
45、gblue、HawqJethroDataSpliceMachineCitusDBHiveHbase索引索引GBaseH Horort to onwnwo orkrks s ApacheApacheActian SQL In Hadoop Greenplum 一站式一站式Hadoop快速部快速部署署近线近线：Impala,Spark SQL实时在线实时在线：Spark,Spark streaming离线：离线：HDFS,HBASE,HIVE数据挖掘数据挖掘：Spark R,Spark MLlib 报表展现报表展现：Pentaho,HTML 5Kafka选择选择Hadoop版本和组件，安装版本和组
46、件，安装CDH并调优并调优 统一全面的企业级统一全面的企业级Hadoop大数大数据平台据平台外围组件外围组件对对集集群访问群访问 的的管管理与保护理与保护技术技术理念理念:认证认证网络网络隔离隔离数据数据保保护护数据以防未授权数据以防未授权 的的访访问与操作问与操作技术技术理念理念:加密加密,信信令令,数据数据屏蔽屏蔽访问访问定定义义哪些用户与应用哪些用户与应用 程程序序可以操作数据可以操作数据技术技术理念理念:权限权限 授权授权可见性可见性关关于于数据源以及数据数据源以及数据 使使用用状况的报告状况的报告技术技术理念理念:审计审计数据数据沿袭沿袭SentryKerberos|AD/LDAPC
47、louderaCloudera导航器导航器认证认证的安的安全全体系体系最全面最安全最可靠最稳定最成熟最全面最安全最可靠最稳定最成熟的的Hadoop平平台台 在在Cloudera第二步第二步业务数据抽取和网站门店数业务数据抽取和网站门店数据据采集采集加加载载业务系统数据抽取业务系统数据抽取自有网站自有网站APP数据采集加载数据采集加载 第第三方网站三方网站APP数据采集加载数据采集加载 门门店数据采集加载店数据采集加载400客服等交互数据客服等交互数据加加载载 系统数系统数据打通关联据打通关联建立客户产品订单行为建立客户产品订单行为维维度数据度数据Website:bigdataunion.org
48、CRM业业务系务系统统数据数据数据采集和抽取聚合数据采集和抽取聚合门店门店活动活动咨咨询交询交互互数据数据自己自己WEBAPP行行为为数据数据埋点埋点 行为行为 数据数据 采集采集 或或 合作合作 购买购买用户用户 统一统一 视图视图数据数据 抽取抽取 集成集成 融合融合数据数据 集成集成 平台平台 数据数据 关联关联 数据数据 蓝图蓝图统一视图统一视图3%转转化化率率ADSL每家每家每每户户上上网网数数据据以上网以上网站登陆等点击行为数据站登陆等点击行为数据2%转转化化率率4%转转化化率率3%转转化化率率0.5%转转化化率率0.5%转化率转化率获客数据获客数据搜房网搜房网+房产交易网房产交易
49、网+头条头条+区域区域主要网站主要网站百度百度+汽车之家汽车之家+太平洋汽车太平洋汽车+易车易车网网+爱卡汽车爱卡汽车+58+58汽车汽车+汽车汽车大全大全+汽车报价大全汽车报价大全+搜狐搜狐汽车汽车+汽车报价汽车报价+车友车友会会+爱买车汽车头条爱买车汽车头条+区域区域主要网站主要网站2015-10-27第一类数据：业务系统数据的抽取第一类数据：业务系统数据的抽取SqoopODS HIVE贴源层HQL/MR特征特征识识别别器器精准精准特征特征识识别别 (EMAIL.)(EMAIL.)模糊模糊特征特征识识别别DWHIVE模型层DMHBASE客户身份集市层DMHBASE客户行为集市层DMHBAS
50、E产品集市层DMHBASE其他集市层ML数据数据清洗清洗引引擎擎排错排错去重去重合并合并数据属性不同，特征不同，清洗规则不同逐步建立地址基准库DMHBASE客户订单集市层核心核心业务业务 系系统统销销 售售 数数 据据C R M C R M 数数 据据产产 品品 数数 据据交易交易数据数据.其他其他系统系统.数据采集：全渠道、立体式、全路径数据采集（线上&线下，站内&站外，PC&移动）进入网站 流量来源 渠道转化 率 来访时段 试用设备 广告有效性 访问量分 析浏览网站 浏览路径 页面跳出 率 停留时间 页面关联访问页面 页面点击习惯 页面停留 时间 页面收藏注册会员 个人信息 联系方式 家庭
