只争朝夕，不负韶华，告别2019，开启2020年新的奋斗征程！
【2019年总结】
1. 有哪些进步
技术方面：
1）hive更加熟悉了，能够写更加复杂的sql，运用部分高级的函数（如posexplode，lead，lag等），会写一些UDF函数（如map转string），也会简单的hive调优，且能用hive解决业务上95%的问题。
2）下半年开始在工作中用到spark，虽然写的频率不是很高，但是对于spark的核心的理解以及RDD的运用操作都有更进一步的了解，能够使用dataframe去处理业务上的问题，使任务的运行效率得到大幅度的提高。
3）Python也熟练一些了，会简单的爬虫，最近在学习爬取公众号的内容（目前在看崔大佬的爬虫博客）。会运用pandas处理excel，会使用explode等函数对表中的列进行操作。
业务方面：
1）处理需求的流程更加规范了，处理问题的效率也有所提高，这主要得益于沟通效率的提高和对业务的熟练。很多时候业务方下午四五点提需求，晚上就要看到数据，刚开始感觉压力还是有点的，现在没有问题。能够提供准确的数据并附加一些简单的数据分析。
2）主要还是思维上的提升以及分析思维在业务上的运用。有这么几点，一是一定要多和业务方沟通，知道对方需要什么数据。有时候需求方提的需求，他自己都不一定清楚自己要看什么样的数据。确认对方需要什么这只是第一步，还需要进一步知道为什么要这些数据，他们会怎么看这些数据，这些数据的意义大不大。这些问题逐渐深入之后，对于需求的掌控就会多一些了。有时候稀里糊涂地做需求，却事倍功半，这样是很低效的。
3）在做数据可视化的时候，应该先抛开业务方提的条条框框，自己主动去思考，如果是你看这些数据，你希望通过怎么样的展示，能够尽可能的满足业务方的需求。并且对于已有的数据，要先检查下数据的准确性以及合理性。发现异常数据，要及时地去拿源数据核对，如果是埋点有问题，就要从源头断解决这些问题。
2. 有哪些不足
技术方面：
对大数据生态还停留在较表面的理解，需要有更多更深层次的理解。
对于spark和Python有很多需要加强。
shell及Linux还需要更熟悉。
个人方面：
不够自律。
【2020年计划】
1. 加强对spark理解以及应用，加强Scala的熟练度。
2. 加强Python的熟练度，争取做几个项目。
3. 2019年在写博客方面不是很积极，立的flag没有实现（每周写一篇博客），当时的理由是想写原创，但是用的东西比较少，觉得没啥可写。今年立flag，至少每两周得写一篇博客，题材和内容不限吧，完成比完美更重要。
只争朝夕，不负韶华，告别2019，开启2020年新的奋斗征程！相关推荐
- 以梦为码，不负韶华，2019春节前最后一写
今天是农历腊月27,距离春节还有三天.伴随着武汉新型肺炎的恐惧中,即将迎来春节.农历春节才是一个总结吧,毕竟农历春节放假七天,而元旦放假只有一天.以梦为码,不负韶华.距离我放假还有四个小时,简短的做一 ...
- vue获取当前月最后一天_只争朝夕，不负韶华——站在2020年第一天，回望2019最后的两个月...
2020年第一天,在一个酣畅淋漓的懒觉后,满足醒来.习惯性打开手机,看到朋友圈满屏的"只争朝夕,不负韶华"后,心里特别有感触. 如图,这是2019年最后一天,我在朋友圈写下的文字, ...
- 安徽工贸职业技术学院计算机比赛,放飞青春,不负韶华！《追梦》——安徽工贸职业技术学院2019年宣传片...
原标题:放飞青春,不负韶华!<追梦>--安徽工贸职业技术学院2019年宣传片 最近大家都在看: 放飞青春,不负韶华!<追梦> --安徽工贸职业技术学院2019年宣传片 希望每一 ...
- 写作之路，以梦为马，不负韶华
[这是一猿小讲的第 82 篇原创分享] 哈喽,大家好,我是一名默默耕耘的创作者.接下来就让我们唠唠 2019,那些人儿,那些事儿以及 2020,那些事儿. <2019> 2019.07.0 ...
- 以梦为马，不负韶华 这才是后浪该有的样子！
透过华为中国区大学生ICT大赛,见证永远奔涌的"后浪". 出品 | 常言道 作者 | 丁常彦 "你们有幸遇见这样的时代,但是时代更有幸,遇见这样的你们!" 如今 ...
- 记录一下2019年-2020年期间的学习、工作经历
记录一下2019年-2020年期间的学习.工作经历 2019年,我正在学PHP,那时的我怀着对各种编程知识的好奇心,认为编程界这么多种语言,只要学好一门,以后想转其他的语言应该都不难.于是我就开始疯了 ...
- 2019一键清空朋友圈_新整理再见2019你好2020朋友圈励志说说
再见 2019 你好 2020 朋友圈励志说说 1. 这是告别的季节, 2019 的烦恼全部抛光 ; 这是蜕变的时刻, 2019 的辛劳不会白忙 ! 值此 2020 年来临之际,特预祝您万事顺 意,新 ...
- 【毕业季】以梦为马，不负韶华！历尽千帆去，归来仍少年！
文章目录 1.回顾自己的大学时光,分享自己的成长经历.收获和遗憾 2.给即将毕业的同学们一些建议 3.在学习中遇到的一些挫折以及解决方法 4.在校期间的学习经验和方法分享 5.自己对未来职业发展的规划 ...
- 复旦大学计算机学院 预推免,学霸的开挂保研经历：专业第一，六级595，三作SCI，斩获同济、南大、西交直博OFFER，最终圆梦复旦！——以梦为马，不负韶华...
原标题:学霸的开挂保研经历:专业第一,六级595,三作SCI,斩获同济.南大.西交直博OFFER,最终圆梦复旦!--以梦为马,不负韶华 以梦为马不负韶华 漫长的保研之旅终于结束了,回望这半年的时光,有 ...
- 免校准的电量计量芯片_万物互联，开启智慧计量新时代—2020年中国物联网计量创新发展论坛在济南举办...
10月22日,2020年中国物联网计量创新发展论坛在泉城济南举办.论坛以"万物互联,开启智慧计量新时代"为鲜明主题,共同探讨了物联网计量领域新技术.新成绩,提出了新方向.新前景.浙 ...
最新文章
- python中os.path.isdir()和os.path.isfile()的正确用法
- 四、从Excel开始，学习Excel的快捷键
- LeetCode 2150. 找出数组中的所有孤独数字（哈希）
- 深度学习(2)--常见概率分布(2)
- STM32-----找个搬砖的搬数据
- 【jeecg-mybatis版本】 mybatis+spring mvc 完美整合方案 查询，保存，更新，删除自动生成
- 90%代码如何实现自动迁移到鲲鹏平台？
- Python学习笔记：PMT与PV函数
- Python生态概览（三）：图形用户界面开发库、游戏开发库、虚拟现实库、图形艺术库
- android 弹出键盘引起的问题
- oracle、sqlserver创建表、删除表、创建索引的sql
- 哈夫曼树(二)之 C++详解
- IT笔试面试资料大全
- MySQL两阶段加锁
- linux透明桥,linux透明防墙(网桥模式).doc
- Triangle程序编译
- Caused by: com.mysql.jdbc.exceptions.jdbc4.MySQLIntegrityConstraintViolationException:Duplicate entr
- 基于STM32F103单片机的智能扫地机器人 循迹避障车 原理图PCB设计
- 海思hi3518用eclipse采用交叉编译器编译程序在海思开发板上运行
- ipad 计算机连接网络设置方法,iPad Air怎么设置上网 苹果平板设置上网步骤【图文】...