数据集市建设数据质量及数据管理方法.pptx
《数据集市建设数据质量及数据管理方法.pptx》由会员分享,可在线阅读,更多相关《数据集市建设数据质量及数据管理方法.pptx(51页珍藏版)》请在得力文库 - 分享文档赚钱的网站上搜索。
1、目录 数据集市数据集市第1页/共51页数据集市数据集市:数据仓库的子集经过ETL流程的一定粒度汇总数据面向部门级业务针对特定主题的数据集星型模式(不遵循3NF结构)缓解仓库访问瓶颈第2页/共51页实现方式:独立型(Ralph Kimball)仓库是集市的联合数据来源于业务系统首先满足数据展示的需求必需统一的数据仓库建设思想协调从属型(Bill Inmon)集市是仓库的子集数据来源于仓库提供更强的数据一致性和灵活性长期规划第3页/共51页实现目的合并不同系统数据源非实时更新数据的访问信息发布面向特定用户群体合理的查询响应时间快速一致的视图访问第4页/共51页独立型第5页/共51页从属型第6页/共
2、51页实现步骤:定义商业目标理解数据源确定汇总粒度定义数据模型第7页/共51页实现原则:统一构建总体指导稳定性可适应性可扩展性第8页/共51页数据分层架构第9页/共51页针对性营销数据集市基于EDW/ODS,通过对EDW/ODS中的数据进行一定粒度的汇总,满足针对性营销IT支撑需求的数据集合 包括营销分析数据和营销事务数据 第10页/共51页营销分析数据数据挖掘宽表自助取数汇总表外部数据宽表 第11页/共51页数据挖掘宽表旨在为数据挖掘模型的建立和分析提供基础支撑,并为之提供有效的数据集合,提升系统效率。包含客户属性类数据、客户拥有类数据、客户行为类数据、客户价值类数据和客户交互类数据。自助取
3、数汇总表自助取数汇总表主要包含按照客户、用户等维度进行数据的初级汇总和整合,实现自助取数系统对客户、产品等相关信息数据提取 第12页/共51页外部数据宽表(外部调研数据)在成功获取了外部数据后,可构建合适的数据集市,纳入系统的外部数据可包括:竞争对手信息、客户偏好信息、客户满意度信息等 外部数据涵盖的范围非常广泛,将所有的外部数据都加载到针对性营销的数据集市中存在较大难度。第13页/共51页营销事务数据营销事务数据用以支撑营销活动的制定与开展套餐资料库营销资料库营销资源库 第14页/共51页套餐资料库套餐资料库存储已有的套餐资料,为套餐梳理和套餐方案设计环节提供数据支撑。套餐的结构包括基本套餐
4、和可选套餐两部分。基本套餐是套餐的主体部分,它包含了套餐的核心产品及主要优惠规则,可以独立存在;可选套餐是由客户自行选择的叠加套餐,一般不单独提供,需以购买基本套餐为前提。第15页/共51页营销资料库营销资料库包含了整个营销活动的策划、分析、评估环节所涉及到的除了套餐以外的内容:市场调研所需的问卷题库营销脚本宣传方案促销方案营销活动案例第16页/共51页营销资源库营销资源库包含了电信公司所拥有的渠道、销售品、外呼中心等资源的,供营销策划人员在策划时可以查询当前营销活动可以利用的营销资源;用于对营销活动所需资源的可利用性进行检查人力资源财务预算广告资源渠道资源合作伙伴促销品资源(包括赠送品、搭售
5、品等)其他支撑系统功能(如计费系统)第17页/共51页目录 数据集市数据集市数据管理数据管理数据整合数据整合数据质量数据质量元数据管理元数据管理第18页/共51页数据整合整合准备:源/目标模型数据预处理整合过程:数据抽取数据转换数据加载第19页/共51页整合规则:数据编码统一保证数据质量支持异常控制流程可维护异常处理流程管理第20页/共51页第21页/共51页输出:规则分析包括:候选数据源确定、源与目标的映射关系、估计行数等执行分析包括:执行时间、执行方式、执行顺序、执行频度等异常报告包括:异常位置、异常原因、处理方式等版本控制第22页/共51页数据整合总体流程总体处理流程第23页/共51页目
6、录 数据集市数据集市数据管理数据管理数据整合数据整合数据质量数据质量元数据管理元数据管理第24页/共51页数据质量解决方法第25页/共51页信息问题域信息问题域第26页/共51页技术问题域第27页/共51页流程问题域第28页/共51页管理问题域第29页/共51页第30页/共51页数据质量管理流程 数据质量评估分析 问题解决和验证 数据质量问题分析源系统数据人员ODS系统维护人员数据质量管理人员数据质量检查人员数据质量检查问题汇总数据质量稽核分析问题问题展现ETL处理过程数据质量问题发现问题工单生成派单派单判断源系统问题工单ODS系统问题工单工单处理问题解决N数据质量分析评估问题验证数据质量考核
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 集市 建设 质量 数据管理 方法
限制150内