1、大数据平台的发展历程数据中台介绍数栈产品介绍数据中台案例AI Pioneer大数据平台的发展历程面临的问题 在数据量爆发性增长的情况下，计算能力面临瓶颈 主要面向离线计算处理，缺少对实时计算/机器学习/即系查询等场景的支持 数据管理/数据治理能力弱AI Pioneer3大数据平台的发展历程监控与警报数据应用数据应用平台数据基础平台计算层调度层存储层接入层平台管理AI Pioneer大数据平台的发展历程OLTP/OLAP混用离线准实时实时 数据实时性越来越高 容错性高 处理量越来越多特点:AI Pioneer大数据平台的发展历程 辅助决策-数据业务化 成本中心-利润中心 价值模糊-可量化 人群透
2、视 人群圈选 人群放大用户画像 广告 精准营销 搜索优化 搜索AI 个性化推荐 图像识别 风控 自然语言处理大数据价值AI Pioneer大数据平台的发展历程数据抽取工具选型数据计算平台选型服务器数据应用厂商存储数据服务厂商InformaticaDatastageKettleOracleGreenPlumIBMHPEMCBOTableauCognos东软IBM GDC缺点 产品分散，厂商多，周期长 IOE体系,产品费用高 运维管理成本高AI Pioneer数据中台介绍数据模型数据服务数据计算和萃取数据资产数据采集数据治理做为企业全域数据的共享能力中心，旨在提供数据采集、数据模型、数据计算和萃取
3、、数据治理、数据资产、数据服务等全链路的一站式产品+技术+方法论服务，构建面向业务应用的数据智能平台数据中台AI Pioneer决策管理层“大中台、小前台”战略创新的决心驱动组织和流程进化，构建全域打通的数据中台协调业务部门和技术部门，中台战略的落地重于设计降低大数据的技术门槛在线化知识沉淀和传承“方法论+工具保障+合作厂商”降低对高端人才的依赖分布式计算&存储&调度架构企业级数据仓库实时流计算覆盖大数据全生命周期的一站式可视化平台数据中台介绍AI Pioneer数据中台介绍计算平台多样性离线计算/流计算/图计算/机器学习/分析引擎，支持更多的应用场景开发方式变革纯web化开发方式，一站式数据
4、处理流程方法论的产品化数仓建设规范，标准，产品化数据丰富性丰富的采集手段，涵盖业务数据，日志数据，行为数据，IOT数据，估计数据，图片数据数据治理脏数据管理，元数据管理，数据质量，数据资产数据应用BI报表/大屏/营销引擎/DMPAI Pioneer10数据中台介绍全面梳理数据资产构建全域数据中心落地战略和组织保障培养业务创新的土壤数据资产管理在线化形成数据人才成长的摇篮通过业务的不断滋养打造业务和数据的闭环AI Pioneer11数据中台介绍 部署计算平台，开发套件，数据治理，数据应用引擎等产品 在平台的基础上构建数据仓库，数据治理，数据应用等服务 持续迭代，推进 高层重视，自上而下推动 组织
5、变更，提升中台部门的战略地位 数据中台人员配备(数据开发/算法开发/分析师/前后端研发/业务人员)AI Pioneer数栈产品介绍数据应用数据化运营可视化大屏舆情监控精准营销个性化推荐数据源RDBMS日志文件ElasticSearchFTPHBaseDT.Trace爬虫智能实时全域基础服务数据应用引擎数据化运营集群部署运维监控多租户隔离多集群管理日志分析EasyLog分析引擎大屏引擎EasyV数据计算引擎RD-OSClouderaHortonworksEMR数据开发套件数据集成实时任务开发任务运维离线任务开发数据仓库主题域用户主题域交易主题域商品主题域数据治理套件用户主题域交易主题域商品主题域
6、AI Pioneer数栈产品介绍AI Pioneer数栈产品介绍开源生态兼容可视化操作界面全生命周期覆盖兼容CDH、HDP、EMR等第三方开源分布式计算引擎全链路覆盖数据价值释放过程，支持实时、离线和智能计算屏蔽底层复杂的分布式计算引擎，基于Web的开发平台，提高开发效率数据输入任务开发与调度任务状态监控数据资产管理数据模型规范数据输出实时/离线/智能分布式计算引擎AI Pioneer1515数栈产品介绍PCAPPWI-FI基站工业传感器手环手表离线计算实时计算SQL图计算广告MRShell图形化推荐定向可视化大屏智能语音决策树聚类神经网络支持向量机拖拽ReportDill downAI Pi
7、oneer案例1：国酒茅台数据中台京东方，借助可视化手段实时监控展会热度，客观体现展会成效的同时，为领导形象汇报了人员定位数据的多重价值。数据智能基础基础设施数据智能应用数据库（关系型、分析型）数据/算法 计算引擎与存储中间件（负载均衡等）全局监控电商大屏销售大屏云商大屏业务异常监控分析数据化运营电商决策门户云商经营门户官商经营门户B2C经营门户营销决策门户分销经营门户服务评价分析物流仓储分析电商销量预测组织效能分析渠道销量预测数据植入业务反黄牛风控商圈选址商品推荐广告营销数据打通业务业务回流数据模型设计数据架构和模型设计数据架构设计总线矩阵规范定义数据采集数据埋点、解析入库官方商城茅台云商数据连接与萃取ID识别与连接用户ID识别用户标签数据应用层数据研发与运维编码研发测试与运维数据公共层数据基础层流量分析ID识别与画像经销商画像产品画像经销商参谋价格监测舆情市场洞察舆情品牌卫士舆情渠道管家舆情产品顾问舆情AI Pioneer17案例1：国酒茅台数据中台AI Pioneer18案例1：国酒茅台数据中台AI Pioneer案例2：中金易云数据中台数据资产数据研发统一数据应用服务（数据同步-搜索引擎+多维分析）萃取数据公共数据基础数据采集/接入爬取数据计算与存储丰富的多端体验出版端门户(一期)发行端门户（二期)零售端门户（二期）
