数据质量

1.一个数据质量分析师正在试图分析一个数据仓库之中数据的质量状况。这个数据仓库的数据量非常的大,数据质量分析师准备用抽样的方式进行分析。但是他不知道需要抽样多少数据,如何抽样,以及如何向用户解释抽样分析的结果是准确的。这位数据质量分析师应该如何来进行工作呢?

2.一个电信公司有一个含有14TB数据的数据仓库。这家公司估计到,该数据中有10TB以上的数据可能是冗余的。这家公司没有命名约束,其中只有20%的数据有相关的元数据。面对这种局面,这家公司应该如何来识别和消灭冗余数据呢?

3.企业管理层没有意识到业务系统中数据是多么的脏乱。这些数据中存在冗余、记录不完备、默认值不正确、有不符合规则的数据存在、参照完整性缺乏等问题。随着数据仓库团队工作的逐步进展,来在项目团队和用户的意见已明确显示出,数据的质量已经不足以让项目继续下去。净化数据需要大量的时间,而这些时间在项目时间表中没有安排。面对这种局面,项目经理应该如何来处理?

4.企业数据仓库的数据质量非常差,净化的过程将是高代价的。管理层没有意识到数据质量的问题,这些业务系统表面上看工作的很好。此外,管理层不愿意花费金钱和资源纠正非常脏乱的数据。面对这种局面,数据仓库团队应该采取什么样的对策来让管理层相信需要净化他们的数据呢?

5.一名没有经验的数据仓库设计师坚决主张,只有100%正确的数据才能进入数据仓库。他开发了一个复杂的临时存储区,用来存储、检查、改正和重新处理错误的源数据。这个临时存储区很快变得非常巨大。由于太多的数据被拒绝进入数据仓库,大部分都是微不足道的错误,业务用户对数据仓库的信任度正在迅速下降。面对这种局面,项目经理应该采取什么样的对策?

6.一家企业的数据仓库系统已经开发完毕,也使用正式数据进行了详细的测试。但是正式上线几个月后,却发现出现了问题,经查实,是从源系统提取数据的FTP脚本出了问题。这个脚本会随机的出现故障,而ETL程序也没有确定出正在处理的数据只是部分数据集。现在数据仓库和源系统已经严重不同步。这个数据仓库团队应该如何才能使数据仓库回到正确的轨道上来呢?

7.一家企业的数据仓库根据源系统记录中的“最后更新”时间戳来从源系统中提取数据。脚本运行了几个月后,运行时间严重超常。经查实,问题出在一个源系统上。一名开发人员正在这个源系统上定期大规模修改数据,以便修改一个还没有在应用代码中得到纠正的错误。这名开发人员大规模修改一次,“最后更新”时间戳就会被全部更新,数据仓库迁移脚本就会一夜之间处理完全部的数据。这个问题应该如何来解决呢?

本日志来源于Sid Adelman的著作Impossible Data Warehouse Situations。

转载于:https://www.cnblogs.com/lijun4017/archive/2010/08/10/1796737.html

数据仓库项目管理面试题整理(十一)相关推荐

  1. 数据仓库项目管理面试题整理

    数据仓库项目管理面试题整理 搜了一下网络上都是一个主题一个网页,自己看了觉得不方便,所以整理到一起放上来方便自己看. 原文出自Jerome的BI博客,网址是http://www.chinabi.net ...

  2. 数据仓库项目管理面试题整理(十二)

    数据整合 1.一家拥有650个经销商的汽车制造公司,有3个独立的经销管理系统,这650个经销商都有自己的数据库.这家企业应该如何来收集.清理并整合这些数据呢? 2.一家企业为了保证企业内数据的一致性, ...

  3. 【社招】快手_数据仓库_面试题整理

    1.面试 技术面一共三面,问题汇总 1 讲一下你门公司的大数据项目架构? 实时流和离线计算两条线 数仓输入(客户端日志,服务端日志,数据库) 传输过程(flume,kafka) 数仓输出(报表,画像, ...

  4. 软件测试面试题整理(十一)之软件测试理论(技术)——终极篇

    https://blog.csdn.net/weixin_45912307/article/details/109523724 01. 请描述如何划分缺陷与错误严重性和优先级别? 给软件缺陷与错误划分 ...

  5. 数据仓库面试题整理(一)

    面试题整理 一.数据仓库基础 1.范式建模和维度建模 2.主题域划分 3.数据仓库分层优点 4.事实表分类 5.缓慢变化维 6.数据输出SLA保障 7.大表JOIN大表优化 二.Hive基础 1.HI ...

  6. [转载] Spring面试题整理

    参考链接: Java中的动态方法Dispatch和运行时多态 Spring面试题整理 2018年03月07日 21:11:46 hrbeuwhw 阅读数:49116 Spring 概述 1. 什么是s ...

  7. Spring Boot 面试题整理

    Spring Boot 面试题整理 2018年08月12日 22:32:35 Time_sg 阅读数 19380 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文 ...

  8. 【数仓】数据仓库高频面试题题英文版(1)

      今天更新数据仓库高频面试题英文版,分为三个部分.下面是第一部分. 音频文件点击下方获取. [数仓]数据仓库高频面试题题英文版(1) [数仓]数据仓库高频面试题题英文版(2) [数仓]数据仓库高频面 ...

  9. 尚学堂Java面试题整理

    博客分类: 经典分享 1. super()与this()的区别? - 6 -  2. 作用域public,protected,private,以及不写时的区别? - 6 -  3. 编程输出如下图形. ...

最新文章

  1. C# 学习笔记(10)加速球
  2. 传统方法怎么玩计算机审美
  3. 网络协议基础:“工作中模模糊糊的概念,这次终于理顺了!”
  4. linux不登录用户就关机,Linux无法被远程登录;用户的关机, 重启,注销,新增用户,删除用户...
  5. Activity的四种启动模式-图文并茂
  6. 轻松使用终端开启macOS系统的隐藏功能,小白都能看得懂
  7. Requests 入门
  8. Symfony路由配置教程【已在腾讯课堂开课】
  9. 湘潭比赛有感---铩羽之行
  10. form请求导出表格_程序员:java导出Excel,附带依赖、后端代码和前端JS
  11. c语言unicode编码转gbk,基于C语言的GBK-Unicode文本编码转换系统的实现
  12. python修改屏幕分辨率_python调win32api调整屏幕分辨率
  13. 双非年薪40W,从字节裸辞了
  14. 无法获取链接服务器 (null) 的 OLE DB 访问接口 SQLNCLI10 的架构行集
  15. java 读取 解析微软Project .mpp 文件到甘特图
  16. MySQL基本增删改查以及搭配node在项目中的操作
  17. python读取excel的路径
  18. python anaconda下载包_Anaconda下载 10.0.15063.0
  19. 毕业设计-基于大数据的电影推荐系统-python
  20. 这次生日我想写点什么

热门文章

  1. r语言和python-R VS Python:R语言是否真的过时了?
  2. pythonis啥意思-Python中is和==的区别
  3. python提高办公效率-提高工作效率的一点建议
  4. python生成excel表格-Python实现将数据库一键导出为Excel表格的实例
  5. python软件怎么用-Python如何创建应用程序
  6. python输出文本-Python基础练习,查询文本内容并输出;
  7. python代码示例下载-python爬取音频下载的示例代码
  8. 快速记忆python函数-【速学速记】Python的工程化:使用模块
  9. python培训班有用吗-比起自学Python,参加Python培训班有什么优势?
  10. python适合多大的人学-学Python编程孩子几岁最合适?