use

机器学习 文章训练
flume+hbase

online voice recognition
siri online voice recognization
meta data in elastic search 
scenario:
find meata data from elastic search, get data from hbase

electronic library:
system of record 
data durability
low latency
OLTP online transaction process
small 
3T
HBase vs oracle

retail
kerberos
market analysis
Hivve
feature: huge

小文件 hbase
大文件 hdfs hive

Advertising
点击率记录下来 click
hbase对network rely a lot
hdfs 对写rely很高
5K$ for per node/year

hbase backup, offline backup数据可靠
online transaction control 比较难做

给外行用 web ui
gui
few

reliability ok, performance case by case,
hbase schema design, query

mostly, oracle(big company) 
1.cost
2.data grow
3.new busness

process in HBase then->rdbms 因为BI工具

传统IBM Oracle
nosql -> no transaction

如何调
test dfs io
分布式应用的hotspot

小量数据access impala有优势,市场TB级别更多
flume 用得多, fan in fan out, load balance, is build in.
sqoop更注重和rdbms结合的application
flume is popular
pig: learning curve, but it is similar to sql.

weihan talk相关推荐

  1. BMC:幼年特发性关节炎患儿肠道菌群的特征、生物标记的识别及其在临床预测中的作用...

    论文题目:Gut microbiota in children with juvenile idiopathic arthritis: characteristics, biomarker ident ...

  2. GeneralUpdate20220323里程碑版本发布

    大家好我是juster,GeneralUpdate的开源项目作者.这次将发布GeneralUpdate里程碑版本,该版本发生了巨大改变历时4个月的时间终于要和大家见面了.开源不易希望大家能多多支持.可 ...

  3. 你可能会用到的 Mock 小技巧

    你可能会用到的 Mock 小技巧 Intro 最近看到阿迪分享了两篇 Mock 相关的文章,于是想把自己遇到的一些可能对你有帮助的一些小技巧分享一下,大概总结了一下,且看下文 AsyncEnumera ...

  4. C# 9 record 并非简单属性 POCO 的语法糖

    最近升级专案到大统一 .NET 5 并使用 C#9 语法尝试改写套件,发现之前以为 record 只是简单属性 POCO 的简化语法糖的认知是错误. 另外因为 POCO 属于需定义口语词,这边在本文定 ...

  5. 用字典给Model赋值

    用字典给Model赋值 此篇教程讲述通过runtime扩展NSObject,可以直接用字典给Model赋值,这是相当有用的技术呢. 源码: NSObject+Properties.h 与 NSObje ...

  6. 无功补偿器的全球与中国市场2022-2028年:技术、参与者、趋势、市场规模及占有率研究报告

    报告页数: 150 图表数: 100 报告价格:¥16800 本文研究全球与中国市场无功补偿器的发展现状及未来发展趋势,分别从生产和消费的角度分析无功补偿器的主要生产地区.主要消费地区以及主要的生产商 ...

  7. AFL++: Combining Incremental Steps of Fuzzing Research 翻译

    文章目录 简述 翻译 0. 摘要 1. 介绍 1.1 贡献 2. 最新技术 2.1 American Fuzzy Lop 2.1.1 覆盖率引导反馈 2.1.2 突变 2.1.3 Forkserver ...

  8. 【论文合集】Awesome Backdoor Learning

    关于后门攻击&防御的博客与论文. ECCV2022对抗攻击&防御论文汇总 | Li's Blog (tuoli9.github.io) ICLR2022对抗攻击&防御论文汇总 ...

  9. NDSS 2022 EMS: History-Driven Mutation for Coverage-based Fuzzing

    作者: 历史paper:Chenyang Lyu, Shouling Ji, Chao Zhang, Yuwei Li, Wei-Han Lee, Yu Song, Reheem Beyah (201 ...

最新文章

  1. 转:AIX 5L 内存性能优化
  2. mysql 查看运行级别_Linux的运行级别和chkconfig用法
  3. 2018年11月份GitHub上最热门的开源项目
  4. MyBatis笔记——EhCache二级缓存
  5. 牛刀小试、用SharePoint 实现请假管理功能
  6. 静态static java
  7. 基于JAVA+SpringBoot+Mybatis+MYSQL的仓库信息管理系统
  8. android studio mac svn插件,Mac下Android Studio升级SVN1.8(使用1.8format来checkout项目)
  9. 主板检测卡c5_用诊断卡 搞定主板故障
  10. 中烟工业考计算机知识吗,广东烟草局中烟工业常见备考问题解答
  11. HP3777打印机一行清晰一行不清晰
  12. 5分钟快速撑起高校邮件保护伞
  13. 【校招Verilog快速入门】基础语法篇:VL1、四选一多路器
  14. 美颜sdk是如何美化皮肤的?
  15. Linux CPU软中断案例一则
  16. linux 查看python路径
  17. Msf手机apk木马问题
  18. python3 爬虫实例_Python3爬虫三大案例实战分享-天善学院
  19. 平法matlab怎么表示,梁钢筋平法的基本知识
  20. 教你免费下载:del_data.sql,hr_cre.sql 和 hr_popul.sql

热门文章

  1. 超简单开发自己的php框架一点都不难
  2. Kali安装虚拟机遇到的问题
  3. H5 Canvas maximum-scale图像模糊解决办法
  4. 第二次作业动手动脑的解答
  5. ios--小结系列六
  6. 一致性哈希算法原理、避免数据热点方法及Java实现
  7. pubwin2009升级教程
  8. python时间模块的使用
  9. (转) RabbitMQ学习之远程过程调用(RPC)(java)
  10. JavaScript计算指定日期与当前日期的相差天数