【面试真题】2022年2月21日-瓜子二手车-数据仓库开发

一、部门介绍
1、工作内容
部门规模，20多人，纯数据部门，不涉及后端
部门，两条业务线
离线和实时
主要是，集团内部策略优化，产品优化，对于领导的一些数据的展现
其次，业务系统上的一些排行榜，推荐数据
2、上班时间
10:00-20:00/20:30，中午休息两小时
每周上五天
二、面试题复盘
1、分层是否了解

ODS/DWD/DWS/ADS

2、每一层的作用

3、数仓是否遇到什么问题，如何进行解决
数据倾斜，union字段不一致

4、binlog导入导出时如何保证消息不重复不丢失

5、DWD用什么做的数据清洗ETL☆

(1)ETL选型

hive的hql

spark 的spark SQL

Python

kettle(数据清洗框架)

(2)ETL作用

清洗掉无用数据和重复数据

去重、去空

(3)清理掉多少

万分之一
6、怎么根据数据判断估计系统规模，内容及分层

业务类型/数据类型
三、操作题
1、判断朋友的个数
id 用户1 用户2
1 01 03

朋友圈关系表 friend_relation_table，一条数据记录下用户B是用户A的朋友，字段如下

id 用户A 用户B
1 001 002
2 001 003
3 002 003
4 003 005
5 003 002
6 003 001

第3条和第5条两条记录，说明002和003互相是朋友，
请问有几对朋友
select count(*) from (
select a.用户1, a.用户2 from friend_relation_table a
join
select b.用户1, b.用户2 from friend_relation_table b
on
a.用户1 != b.用户2 and a.用户2 != b.用户1
)

解答：https://zhuanlan.zhihu.com/p/25648654

合并，构成唯一索引

或者

join操作：连接两张表

union：堆积，并集
2、解答
两种思路，join on和union的区别，字段拼接构建新字段
四、自己不足
都知道但细节不太好
SQL需要提升
五、下次问
部门名称

【面试真题】2022年2月21日-瓜子二手车-数据仓库开发相关推荐

第十三届蓝桥杯省赛真题2022年4月23日第四题答案及解析小马过河搬货物方案
第四题又又如约而至,上题目: 编程实现: 小马需要将N件物品从河的一岸搬运到河的另一岸,每次搬运的物品为1到3件.请问小马将N件物品全部搬运过去有多少种方案.例如:N=3,将3件物品全部搬运过去有4 ...
pmp每日三题(2022年2月21日)
今日三题答案-CCC 1.创建项目章程的项目发起人需要已包含工作的成本估算.由于组织已经完成许多类似的项目,发起人寻求项目经理的帮助.项目经理应该使用什么来创建适合的估算? A.粗略量级估算(ROM) ...
今天是2022年5月21日
今天是2022年5月21日,一个普通周6早上,多睡了会,9点11才起床.以下是梦: 又不记得开头了,梦到宝宝过来了,说找俺过日子,俺很开心~ 晚上,俺很害羞,让她和铜铜先睡觉,俺继续看电视,很累,上床 ...
2022年9月21日
2022年9月21日过程依照谢宝友老师针对高负载所给出的模块功能,写了一个ebpf程序,重点在如何获取进程的栈和输出它.类似内核函数stack_trace_save_tsk和stack_trace ...
14届蓝桥青少选拔赛2022年8月21日C++中高级在线考试
蓝桥青少2022年8月21日C++中高级在线考试 T1.编程实现:个位数题目描述: 给定一个正整数N(10<N<1000),输出正整数个位上的数字. 输入描述输入一个正整数N(10&l ...
2022年4月21日，第14天
2022年4月21日,第14天 [学习时长] 今日4h.累计59.5h. [代码数量] 今日0行.累计2340行. [学习内容] 今天正式进行JavaScript的学习.今天学习的内容是变更和数据类型 ...
2022年6月21日cloudflare 故障宕机事件记录恭喜CF凭借一己之力，拉闸全球50%网络分发
恭喜CF凭借一己之力,拉闸全球50%网络分发本次受影响的范围: 根据 Downdetector 监测信息显示,包括Discord,.Shopify.Grindr.Fitbit 和 Peleton 等 ...
全国青少年编程等级考试python一级真题2022年3月（含题库答题软件账号）
对青少年编程等级考试Python真题答题考试系统关注的请点击全国青少年编程等级考试python一级真题2020年12月(含题库答题软件账号)_程序猿下山的博客-CSDN博客_python编程一级试卷 ...
全国青少年编程等级考试scratch四级真题2022年12月（含题库答题软件账号）
对青少年编程等级考试scratch真题答题考试系统关注的请点击** 电子学会-全国青少年编程等级考试真题Scratch一级(2019年3月)在线答题_程序猿下山的博客-CSDN博客_小航答题助手 1. ...

【面试真题】2022年2月21日-瓜子二手车-数据仓库开发

【面试真题】2022年2月21日-瓜子二手车-数据仓库开发相关推荐

最新文章

热门文章