大数据技术原理与应用(第2版)课件.pptx

1、2 0 2 0大 数 据 技 术 原 理 与 应 用(第 2 版)演讲人2025-11-1101.02.03.04.目录第一篇 大数据基础第二篇 大数据存储与管理第三篇 大数据处理与分析第四篇 大数据应用01第一篇 大数据基础第一篇 大数据基础1 大数据概述2 大数据处理架构Hadoop第一篇 大数据基础1 大数据概述1.1 大数据时代A1.2 大数据的概念B1.3 大数据的影响C1.4 大数据的应用D1.5 大数据关键技术E1.6 大数据计算模式F第一篇 大数据基础1 大数据概述1.8 大数据与云计算、物联网021.10 习题041.7 大数据产业011.9 本章小结032 大数据处理架构H

2、adoop第一篇 大数据基础2.1 概述2.2 Hadoop生态系统2.3 Hadoop的安装与使用实验1 安装Hadoop2.5 习题2.4 本章小结02第二篇 大数据存储与管理第二篇 大数据存储与管理3 分布式文件系统HDFS4 分布式数据库HBase5 NoSQL数据库6 云数据库DCAB3 分布式文件系统HDFS第二篇 大数据存储与管理3.1 分布式文件系统3.2 HDFS简介3.3 HDFS的相关概念3.6 HDFS的数据读写过程3.5 HDFS的存储原理3.4 HDFS体系结构LOGOM.94275.CN第二篇 大数据存储与管理3 分布式文件系统HDFS3.8 本章小结02实验2

3、熟悉常用的HDFS操作043.7 HDFS编程实践013.9 习题034 分布式数据库HBase第二篇 大数据存储与管理4.1 概述4.2 HBase访问接口4.3 HBase数据模型4.6 HBase编程实践4.5 HBase运行机制4.4 HBase的实现原理第二篇 大数据存储与管理4 分布式数据库HBase4.8 习题实验3 熟悉常用的HBase操作4.7 本章小结5 NoSQL数据库第二篇 大数据存储与管理5.2 NoSQL兴起的原因5.4 NoSQL的四大类型5.6 从NoSQL到NewSQL数据库5.1 NoSQL简介5.3 NoSQL与关系数据库的比较5.5 NoSQL的三大基石

4、第二篇 大数据存储与管理5 NoSQL数据库5.7 本章小结5.8 习题AB第二篇 大数据存储与管理6 云数据库6.1 云数据库概述6.2 云数据库产品6.3 云数据库系统架构6.6 习题6.5 本章小结6.4 云数据库实践第二篇 大数据存储与管理6 云数据库实验4 熟练使用RDS for MySQL数据库03第三篇 大数据处理与分析第三篇 大数据处理与分析7 MapReduceA8 Hadoop再探讨B9 SparkC10 流计算D11 图计算E12 数据可视化F7 MapReduce第三篇 大数据处理与分析7.1 概述7.2 MapReduce的工作流程7.3 实例分析：WordCount

5、7.6 本章小结7.5 MapReduce编程实践7.4 MapReduce的具体应用第三篇 大数据处理与分析7 MapReduceA7.7 习题实验5 MapReduce编程初级实践B第三篇 大数据处理与分析8 Hadoop再探讨018.1 Hadoop的优化与发展038.3 新一代资源管理调度框架YARN058.5 本章小结028.2 HDFS2.0的新特性048.4 Hadoop生态系统中具有代表性的功能组件068.6 习题9 Spark第三篇 大数据处理与分析0102030405069.1 概述9.2 Spark生态系统9.3 Spark运行架构9.4 Spark的部署和应用方式9.5

6、 Spark编程实践9.6 本章小结第三篇 大数据处理与分析9 Spark9.7 习题10 流计算第三篇 大数据处理与分析10.1 流计算概述10.2 流计算的处理流程10.3 流计算的应用10.6 本章小结10.5 Spark Streaming10.4 开源流计算框架Storm第三篇 大数据处理与分析10 流计算10.7 习题第三篇 大数据处理与分析11 图计算0111.1 图计算简介0211.2 Pregel简介0311.3 Pregel图计算模型0411.4 Pregel的C+API0511.5 Pregel的体系结构0611.6 Pregel的应用实例第三篇 大数据处理与分析11 图

7、计算0102031 1.7 P r e g e l 和M a p R e d u c e 实 现P a g e R a n k 算 法 的 对 比11.8 本章小结11.9 习题第三篇 大数据处理与分析12 数据可视化12.1 可视化概述0112.2 可视化工具0212.5 习题0512.4 本章小结0412.3 可视化典型案例0304第四篇 大数据应用第四篇 大数据应用14 大数据在生物医学领域的应用13 大数据在互联网领域的应用15 大数据的其他应用第四篇 大数据应用13 大数据在互联网领域的应用13.4 本章小结13.5 习题13.1 推荐系统概述13.2 协同过滤13.3 协同过滤实践

8、LOGOM.94275.CN第四篇 大数据应用14 大数据在生物医学领域的应用14.1 流行病预测0114.3 生物信息学0314.5 本章小结0514.2 智慧医疗0214.4 案例：基于大数据的综合健康服务平台0414.6 习题06第四篇 大数据应用15 大数据的其他应用15.1 大数据在物流领域中的应用0115.2 大数据在城市管理中的应用0215.3 大数据在金融行业中的应用0315.4 大数据在汽车行业中的应用0415.5 大数据在零售行业中的应用0515.6 大数据在餐饮行业中的应用0615 大数据的其他应用第四篇 大数据应用15.8 大数据在能源行业中的应用15.10 大数据在安全领域中的应用15.12 大数据在日常生活中的应用15.7 大数据在电信行业中的应用15.9 大数据在体育和娱乐领域中的应用15.11 大数据在政府领域中的应用第四篇 大数据应用15 大数据的其他应用15.14 习题0215.13 本章小结012 0 2 0感 谢 聆 听