大数据和云计算技术周报(第109期)
主题
一转眼 2019年已经过去一半,你年初列下的的新年计划执行的怎么样呢,是否给自己打上了满满的√呢
欢迎━大家留言来爆料下自己的年终计划和目标 让群友们来督促你们执行
小编也爆料下自己今年的年终计划
1、熟练使用并理解深度学习
2、打好数学基础
3、好好干活,认真工作
4、深入理解数据
5、在理财方便有所突破
6、找到女朋友
望大家监督, 督促
最后附上某人的2018年年终计划 希望说的不是你
导语
“大数据” 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算、存储、网络都涉及,知识点广、学习难度高。
本期会给大家奉献上精彩的:Flink、知识图谱、MongoDB、redis、ES、数据库、redis、Hbase、AI。全是干货,希望大家喜欢!!!
1Flink
本文首先从 Apache Flink 的定义、架构、基本原理入手,对大数据流计算相关的基本概念进行辨析,在此基础上简单回顾了大数据处理方式的历史演进以及有状态的流式数据处理的原理,最后从目前有状态的流式处理面临的挑战分析 Apache Flink 作为业界公认为最好的流计算引擎之一所具备的天然优势。
https://www.infoq.cn/article/fRt1RF1pxu_ZtmeObOoJ
2Redis
本周分享一些Redis对象的内容
https://mp.weixin.qq.com/s/5IYyd0yc_Z4C2nPIv_zBMw
3错误日志分析
错误日志是系统报警的一种,实际生产中,运维人员能够收到的报警信息多种多样。如果在报警流出现的时候,通过处理程序,将报警进行聚类,整理出一段时间内的报警摘要,那么运维人员就可以在摘要信息的帮助下,先对当前的故障有一个大致的轮廓,再结合技术知识与业务知识定位故障的根本原因。
围绕上面描述的问题,以及对于报警聚类处理的分析假设,本文主要做了以下事情:
选定聚类算法,简单描述了算法的基本原理,并给出了针对报警日志聚类的一种具体的实现方案。
在分布式业务服务的系统下构造了三种不同实验场景,验证了算法的效果,并且对算法的不足进行分析阐述。
https://tech.meituan.com/2019/02/28/root-clause-analysis.html
4ES
ES发展很快,新版本大颗粒功能一睹为快
https://mp.weixin.qq.com/s/EQwwjii1bU1XiP2MvMVccw
5HBase
作为一种基于列式的数据库,HBase在海量数据的查找速度上一直具有不可比拟的优势。但同时也有一些弊端,本文提出了HBase的一些基本问题并给出了解决方案。。
https://mp.weixin.qq.com/s/oQXKoEoxGmXs4hfWzHqnTA
本文主要讲解了BufferedMutator批量异步写入HBase的构建与写入流程分析,并一步步展开了源码分析,推荐大家仔细阅读一下。
https://mp.weixin.qq.com/s/C4OqqM9CJwb68_wJTC5gww
6AI
现如今,算法已被应用到互联网各领域之中,其中以媒体内容领域尤为突出。算法不仅能实现多样化、个性化的内容精准推荐,还能赋能内容生产,辅助内容运营。近期,腾讯PCG新闻产品技术部算法中心李彪应邀来到腾讯媒体研究院作内部分享,详细梳理了算法应用产品场景,以下为部分内容实录。
https://mp.weixin.qq.com/s/uDJ3qJauugJJ7dQzd4loqA
7MongoDB
本文讲述了MongoDB 4.2的多项新特性,包括全文搜索与Lucene引擎整合,以及新特性全文搜索的原理及示例,分布式事务、数据库服务可用性方面增强、查询语言的表达能力增强、update能力增强、分析能力增强、Index能力增强,并新引入字段级加密的支持。
http://www.mongoing.com/archives/26774
8知识图谱
如果未来的智能机器拥有一个大脑,知识图谱就是这个大脑中的知识库,对于大数据智能具有重要意义,将对自然语言处理、信息检索和人工智能等领域产生深远影响
https://mp.weixin.qq.com/s/5-T4uxb8Eq6rPcgig-SHfA
9AI
fp tree算法是一种从给定数据集中,求取频繁项集的方法。其解决的问题和aproior算法类似。只是aproior算法还可以求频繁项集中的关联。fp tree好像没有。fp主要是扫描两遍数据建立树,然后通过递归从tree中挖机出频繁项。这是一种非监督学习的机器学习算法,或者说是数据挖掘算法。
https://mp.weixin.qq.com/s/zD5hwBmMmSxzTj-3YzZKdg
10zookeeper
图文并茂的描述了zk的实现 保证 原理
https://mp.weixin.qq.com/s/-O6Z8npAXwaJV2MMzmOBMQ
11Phoenix
Phoenix 索引不支持全文检索,我们需要修改源码达到这一目的。添加全文检索的前提是我们需要了解当前索引创建、维护的机制。今天将带大家,逐步探索 Phoenix 原生索引的源码。
https://mp.weixin.qq.com/s/ZC-8XC4Mcq2S7AqqziByJg
11开心一刻
程序猿追求小姐姐不成,含泪追问:我在你眼里算什么?!小姐姐答曰:真人版的Windows优化大师……
致谢:
周蓬勃、王在道、孙亚飞、冯艺帆、陈少军、邓开表、张少华、薛述强、刘彬、刘超、廖程鹏、董言、吕西金、朱洁、蓝随、黄文辉、郭飞
猜你喜欢
#大数据和云计算机技术社区#博客精选(2017)
NoSQL 还是 SQL ?这一篇讲清楚
阿里的OceanBase解密
#大数据和云计算技术#: "四有"社区介绍
大数据和云计算技术周报(第56期)
新数仓系列:Hbase周边生态梳理(1)
《大数据架构详解》第2次修订说明
简单梳理跨数据中心数据库
云观察系列:漫谈运营商公有云发展史
云观察系列:百度云的一波三折
云观察系列:阿里云战略观察
超融合方案分析系列(7)思科超融合方案分析
加入技术讨论群
《大数据和云计算技术》社区群人数已经6000+,欢迎大家加下面助手微信,拉大家进群,自由交流。
喜欢QQ群的,可以扫描下面二维码:
欢迎大家通过二维码打赏支持技术社区(英雄请留名,社区感谢您,打赏次数超过108+):
大数据和云计算技术周报(第109期)相关推荐
- 大数据和云计算技术周报(第101期)
导语 "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:Spring熔断降级方 ...
- 大数据与云计算技术周报(第150期)
导语 "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:hiva.Flink. ...
- 大数据与云计算技术周报(第148期)
导语 "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:实时数据.ELK.re ...
- 大数据和云计算技术周报(第102期)
导语 "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:阿里数据库.AI.Hb ...
- 大数据和云计算技术周报(第7期)
写在第7期周报 坚持是一种品格! "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. #大数据和云计算技术 ...
- 大数据和云计算技术周报(第81期)
大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:分布式事务.缓存 .排序.druid.s ...
- 大数据和云计算技术周报(第37期)
写在第37期周报 "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:Spark ...
- 大数据和云计算技术周报(第115期)
导语 "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:HBase.Spark ...
- 大数据和云计算技术周报(第182期)
导语 "大数据" 三个字其实是个marketing语言,从技术角度看,包含范围很广,计算.存储.网络都涉及,知识点广.学习难度高. 本期会给大家奉献上精彩的:spark.Kafka ...
最新文章
- SpringBoot图文教程4—SpringBoot 实现文件上传下载(亲测)
- JBoss5 启动报错java.lang.IllegalArgumentException: ...
- 查询linux服务器事物传输失败日志,查看fail2ban日志代替lastb查看登录失败记录
- Android studio 配置使用maven
- 犹太教、基督教和伊斯兰教的简单关系
- iOS开发之iOS11频繁刷新TableView向下偏移的问题
- 防火墙设置对外开放port
- Linux内核API手册——简略版
- blos硬盘启动台式计算机,惠普台式机bios设置硬盘启动操作步骤
- Android NDK交叉编译sysstat工具
- SpringBoot-logback日志管理
- BoBo买了一箱酸奶,里面有n盒未打开的酸奶,KiKi喜欢喝酸奶,第一时间发现了酸奶。KiKi每h分钟能喝光一盒酸奶,并且KiKi在喝光一盒酸奶之前不会喝另一个,那么经过m分钟后还有多少盒未打开的酸奶
- 国产加密实际运用:使用SM3加盐存储密码,并且使用SM2进行登录认证
- PMP证书含金量再次提升,纳入北京工作居住证办理范围
- 输入一无符号整数,求所有数位上数字之和
- json 解析 转java对象数组对象数组对象_json字符串转java对象数组
- Python 简易版小工具 | 计算天数
- discuz!内置代码 (收藏)
- 版权登记和商标注册的区别
- 别蓝瘦,别香菇,微服务保驾企业服务
热门文章
- 91.动画的简单使用
- 小乌龟Franklin总结
- Mybatis基础实现——增,删,改,查
- 7、查询学过“张三“老师授课的同学的信息
- linux--welcome to emergency mode
- HTTPUnit测试
- 2016里一些Android最佳实践列表——Opinionated
- Excel两列求差集和并集的实现
- sierpinski三角形的维数_谢尔宾斯基(Sierpinski)三角形
- SAX(Symbolic Aggregate Approximation)一种时间序列的新型符号化方法