1、 查询响应 汇总数据 原子数据 操作数据 数据仓库环境 数 据 收 集 和 数 据 库 创 建(20 世 纪 60 年 代 或 更 早)和 数 创 建 数 据 6 年 代 1 84-1992 和 更 早 1984-1992 数 据 库 管 理 系 统 (20 世 纪 70 年 代)层 次 和 网 状 数 据 库 系 统 关 系 数 据 OLTP 原 始 处 理 数 据 建 模 工 具:ER 模 型 索 引 和 数 据 组 织 技 术:B+树,散 列 查 询 语 言:SQL 等 用 户 界 面:表 单、报 告 等 查 询 处 理 和 查 询 优 化 事 务 处 理:恢 复 和 并 发 控 制 等
2、 联 机 事 务 处 理 高高 级级 数数 据据 库库 管管 理理 系系 统统 (2 20 0 世世 纪纪 8 80 0 年年 代代 中中 期期 现现 在在)数数 据据 仓仓 库库 与与 数数 据据 挖挖 掘掘 (2 20 0 世世 纪纪 8 80 0 年年 代代 后后 期期 现现 在在)基基 于于 W We eb b 的的 数数 据据 库库 系系 统统 (2 20 0 世世 纪纪 9 90 0 年年 代代 现现 在在)新新 一一 代代 综综 合合 信信 息息 系系 统统(2 20 00 00 0 年年 现现 在在)高 级 数 据 模 型:扩 充 关 系、面向 对 象、对 象 关 系、演 绎
3、面 向 应 用:空 间 的、时 间 的、多 媒 体 的、主 动 的、科 学 的 知识 库 基 于 XML 的 数 据 库 系 统 Web 挖 掘 数 据 挖 掘 和 知 识 发 现 数 据 仓 库 技 术 和 OLAP 图 1.2 数 据 库 系 统 及 相 关 技 术 的 演 化 操作型数据和分析型数据的区别操作型数据和分析型数据的区别 识别、检测、表达 转变、处理 获取、创造 数据 知识 信息 对象 图1.3 数据、信息与知识的关系 决策支持系统与事务之间在数据库要求上的差异决策支持系统与事务之间在数据库要求上的差异 目标 人才 数据仓库成功度 主题 需求 领导 数据 工具 方法 技术 建
4、模 图 2.1 影响数据仓库成功的因素 元数据与数据抽取原则的分析 数据仓库需求与目标 可行性分析 计划 调整主题与数据源 组件设计与开发 数据仓库推广应用 主题及细化 数据仓库的设计 图2.2 数据仓库的生命周期 DW准备与计划 数据仓库分析 数据仓库实施 DW设计 DW生命周期 数据库 元数据 创建 取化换载 提净转加 查询 数据挖掘 事务与其他外部数据源 数据分析 汇总 用户 图 2.5 数据仓库体系结构 图2.6 数据粒度结构 元 数据 轻度综合级(数据集市)高度综合级 当前细节级 早期细节级 DB 销售细节级19941999 销售细节级20022003 子生产线每周销售1998200
5、2 1984-1992 生产线每月销售 19992002 事实表 维表 顾客 商店 产品 供应商 时间 销售事务 图 3.1 销售星型图结构 供方分类模型 供货价值程度 竞争度与价格 供货材料关键程度 供货质量检验程度 供方服务水平 图3.2 星型图结构的另一种描述 自动分析基本技术 分析技术 客户设 时 数据挖掘 联机分析 主动工作方式 被动工作方式 混合工作方式 系统工作方式 对象分析 环 境 户 间 图 4.1 信息分析技术的不同方面与层次 界面Agent 用户 移动Agent 协作Agent 数据挖掘 混合Agent 信息Agent 蚁群算法 知识库 WEB 数据库 市场环境分析 ag
6、ent 产品推荐 Agent 客户分析Aagent 招投标 Agent 网格计算 图4.2 多Agent分布式市场营销知识获取结构 f G H 2 D1 A1 2 图4.3 小波分解示意图 数据库 DBMS 分析程序 用户接口 MDDB 关系 DBMS 产生多维视图 分析程序创建多维视图 用户 图 4.4 OLAP 的体系结构 4.3.2 粗糙集在信息分析中的特粗糙集在信息分析中的特征表示征表示 定义4 设U是论域,=1,2,m是对象集,中任何对象所具有的特征所组成的集合,称为特征集(property set):T=t1,t2,tn。这些特征可由如下的“属性-值”表示:t=(a,v),。由特征
7、集构成的表,称之为特征表 UAtaValv 系形图 转换变量 神经网络 数据分则 评价 判定树 收益 回归分析 输入数据源 图5.1 Enterprise Miner 分析流图 挖 掘 综 合 器 挖 掘 的 主 题 与 任 务 数 据 挖 掘 算 法 库 关 联 分 析 关 联 聚 类 分 析 分 类 分 析 进 化 分 析 非 结 构 数 据 分 析 方 法 插 槽 用 户 界 面 模 式 评 价 知 识 的 表 示 读 入 数 据 事 先 无 法 预 测 的 有 价 值 的 知 识 挖掘模块 数 据 预 处 理 模 块 数 据 源 数 据 规 范 化 数 据 转 化 数 据 集 成 图 5.2 数 据 挖 掘 的 基 本 流 程