Data warehouse是一个不大的部门,当时里面有一个vp一个manager两个assistant manager,其他就是senior developer和basic developer,当时还有将近20个人,属于花旗内部的员工大概就是4个人,其他都是外派,来自文思海辉、华钦、奥杰斯这几家。

工作流程上,部门接收其他部门的数据,主要依靠的是大机的推送,自动化运行,当天处理前一天的数据,推送好了之后会有时间戳,在Linux/Unix等服务器上进行查找,通过datastage进行ETL的设计,Tivoli进行作业的调度。

数据要经过几个平台才能正式发布,包括DEV环境、SIT环境和UAT环境。然后还有ORP,说实话这个平台当时还问过他们,后来又忘了这个名字的含义的,也是一个数据处理的过程吧。

东哥教我们多一些,有在邮件中别人给我们提出一个需求,他会告诉我们需要跑什么job,我们就对照着邮件中给出的job_name,country_name,schema_name等等出现的参数到oracle中的8张表里查询出对应的结果,然后对这8张表里的列进行更新或者从这表的查询结果中找到需要的参数,在数据库中修改好之后再到Linux或者aix或者unix上去找到对应国家或者对应目录下去修改对应的参数,或者是对比数据库中的参数是否和服务器上的参数是一致的,对比修改无误之后,就再服务器上执行脚本,那个会对数据库进行更改或者调用到datastage进行运行。

有时候还需要根据需求在服务器上部署对应的文件,因为每个人的负责的模块不一样,每个人的权限也不一样,所以就需要这边配置好对应的文件,别人才能够运行好job或者别的需求,我们就在有需求的时候到对应服务器上配置文件,将模板文件进行修改后部署到不同的国家目录下去,再对脚本文件作相应修改后运行,也会根据不同的需求在不同的环境下运行,比如dev/sit/uat等环境

我学姐还会让我修改完善datastage的job设计,比如datastage上已经画好了流程,但是里面的组件并没有设置过参数,我就需要根据她给我的需求文档来对每个组件进行设计,但是她让我做的还是比较简单的,就是做一些函数的设计之类的,让我熟悉一下datastage的组件。

manager一开始是让我们做了一些oracle的练习题目,具体题目我忘记了,但是印象中是不难的,还是很容易做出来,然后他还让我们做一些简单的练习,但是就要用到shell命令来修改或者配置好不同国家的参数,如果手工做的话也可以做,但是他就想让我们试试能不能用脚本来实现,我就回去试了一晚,还是把脚本给写出来了,这个脚本不复杂,也不长,写的时候学到或者用到了grep/sed/awk、循环控制、正则表达式、管道等等之类的写法。然后他还教了我们用excel的函数比如vlookup之类的来对比数据之类的。

我换了一次座位之后,我的邻座是一个比较senior的人,然后也比较爱说话,我就问了他关于花旗EDW的流程、各个模块的分类、数据仓库的架构之类的东西,他讲解的还是挺让我觉得醍醐灌顶的,因为之前确实也没接触过真正的项目,对这些理念还是不懂,他给我讲讲觉得好很多,然后我的毕设论文也是他来教我的,流程啊、架构啊、论文的框架啊什么的,反正他对我的帮助还是蛮大的。

然后其实我们ETL部门老大还是挺不爱搭理我们的,虽然也让我们做东西,但是其实我觉得就是一些挺简单的事情,比如conference call之类的,也比如他有时候会发给我一些excel表,让我对这些表进行修改,到服务器或者数据库上找文件,找到对应的东西后再把这些复制到excel表中去,再把excel的表的格式改改好看,弄好之后再发给他就行了,对技术上的锻炼我觉得还是挺少的。

转载于:https://blog.51cto.com/11471544/1839841

花旗软件DWH实习回顾相关推荐

  1. 2021年金三银四春招实习回顾

    好久没写博客了,没有消失哦,只是准备春招实习去了,哈哈,一下子两个月就过去了,春招经历了很多,面试了多家公司,下面说一下百度,腾讯,好未来者三家公司的面试经历! 一:百度一二面 这是我第一次经历面试, ...

  2. matlab仿真参考文献,学生仿真论文,关于《MATLAB仿真》课程教学改革和相关参考文献资料-免费论文范文...

    导读:该文是关于学生仿真论文范文,为你的论文写作提供相关论文资料参考. 樊春霞 (南京邮电大学自动化学院,江苏 南京 210003) 摘 要: MATLAB软件是科学研究.工程技术以及管理决策等领域内 ...

  3. 2018互联网实习秋招回顾(BATM+MS+Intel+NE+DJI)

    先介绍本人在2018年的暑期实习和秋招拿到的offer: 实习:阿里(c++后台研发),微软(c++后台开发),网易游戏(基础架构研发),大疆(测试开发),地平线(嵌入式软件开发),微策略(c++后台 ...

  4. 网易实习第一阶段简单回顾

    前几天顺哥面试的时候碰到HR明确说我转正答辩通过,趁此机会对这段时间的工作做个梳理.面试经历之前在已经在 Android实习生面试记录-蘑菇街.网易等 写了,结果就是网易发了offer,蘑菇街拿到终面 ...

  5. 2017春招实习面试回顾:从面试连跪到收割offer

    击关注加星标,江湖要事早知道 前几天我发了一篇文章从零基础到拿到网易Java实习offer,我做对了哪些事,这篇文章介绍了我准备2017年春招实习的历程.但是呢,里面没有很详细的面筋,很多读者觉得不过 ...

  6. 专科生从实习到现在两年,入行回顾和总结。 有收获,有失去,有遗憾,哪怕前路迷茫,仍要继续前行。

    在此之前我在掘金网上看到过一个本科生的回顾:<吾,一个废物,大四实习到毕业一年,入行回顾和总结.>:我不评价他文章写得多好:而是他的亲身经历感动无数处在这个阶段的同行.文章很长:但是我一点 ...

  7. 字节跳动后台开发实习面试回顾

    2月21号在实习僧投的后台开发实习的简历,2月22号接到字节跳动HR打来的电话预约了3月4号的面试,然后开始了十天的准备... 准备阶段: 首先根据之前的面试经验和网上的面经了解到的,总结了面试常问的 ...

  8. 以梦为马,不负韶华|电巢科技延安大学飞鹰计划实习班精彩回顾

    时光流淌无声,昨天仿佛还初次见面,今天却又是一年的尾声.你是否结交到亲密的小伙伴?你是否感受到团队合作的魅力?你是否在延大这片沃土得到成长?假如你还没答案,那么看看其他人的回答. 在延安大学,有这样一 ...

  9. 回顾一波春招找实习的艰苦岁月

    现在回想起来那段日子是真的黑暗,可以说基本是在忧虑,迷茫,自我怀疑的状态下度过的. 因为大三下的课少,所以除了上课的时间,每天的状态就是,起床,开电脑,复习,打码,喝水,复习,打码,看看窗外的风景,喝 ...

最新文章

  1. Linux系统16进制形式查看二进制文件
  2. 3D目标检测 CVPR2020 总结
  3. 连连看+php,java基于swing实现的连连看代码
  4. 关于easyui中的editIndex
  5. Gentoo 安装日记 09 (安装stage3:下载内核)
  6. 【备忘录】BADI_ACC_DOCUMENT增强实现
  7. 电脑看书软件_能全平台阅读的图书软件,是kindle? No!大公司低调出品
  8. Immutable-不变模式与不变类-一版
  9. 95后实习生的远程办公体验(asp.net mvc\C#技术栈)
  10. docker privileged作用_Docker环境下秒建Redis集群,连SpringBoot也整上了!
  11. JS 原生 AJax
  12. 如何为CSS指定对应的Media type
  13. 自学编程需要注意什么?
  14. Java(C#)基础差异-语法
  15. 微信小程序数据拼接_微信小程序 数据预拉取
  16. lisp 车位块自动编号_机械车位做产权登记,真的适合吗?
  17. 32位mysql安装包_软件测试基础——Linux系统搭建MySQL数据库
  18. Google浏览器开发者工具:CSSViewer(一个Css查看器)
  19. 搭建和测试 Redis 主备和集群
  20. docker centos rpm离线安装1.8.2及pull的正确姿势

热门文章

  1. 一寸光阴一寸金,寸金难买寸光阴、时间就是生命,浪费时间就是慢性自杀。
  2. 酒店管理系统(C#和serverSql代码开发)
  3. 电源设计2【DC/DC、PCB设计】
  4. 在Word2003中打开Word2007文档的方法及教程下载
  5. Matplotlib 箱线图
  6. 大话赛宁云 | 训系列-如何构建网络空间的“练兵场”
  7. 【电子签到】v1.0版本正式上线!免费下载!
  8. 8.6 空间曲面及方程
  9. matlab 残差 dw,Eviews中的自相关检验与修正操作(一):残差图与DW检验
  10. 计算机二级模板文档,江苏省计算机二级