第一节：分布式文件系统（DFS，Distributed File System）

1 Hadoop教程：http://hadoop.apache.org/docs/r1.0.4/cn/mapred_tutorial.html

Master 和 Slave(Code)，对应 namecode 和 datacode

2. Spark教程：https://www.cnblogs.com/shishanyuan/p/4699644.html

spark 有类似SQL的功能

2.1 create external table：https://blog.csdn.net/u013850277/article/details/65749770?utm_source=itdadao&utm_medium=referral

3.SQL：http://www.w3school.com.cn/index.html

4.HBase KV存储（key-values存储）：非关系型数据库，区别于MySQL，速度更快。

5.上传系统、数据采集工具（数据接入服务DIS）涉及到的概念：消息队列、消息通道

6. 实时流计算，Cloud Stream service,CS ,

（可用于大盘监控等），开源框架：Heron、storm、akka，kafka，apache spark，apache，apex

Flink Sql 教程：https://mp.weixin.qq.com/s/o_E4KVMAvkt41lRdeUWrEw

转载于:https://www.cnblogs.com/FatEggs/p/10042159.html

第一节：分布式文件系统（DFS，Distributed File System）相关推荐

dfs根目录_分布式文件系统DFS详细解读
使用分布式文件系统DFS可以轻松定位和管理网络中的共享资源.使用统一的命名路径完成对所需资源院的访问.提供可靠的负载平衡.与FRS(文件复制服务)联合在多台服务器之间提供冗余.与windows权限集成 ...
2003dfs分布式文件服务器,win2003分布式文件系统(dfs)配置方法[图文详解]
在网络中,共享文件的物理位置是分散分布的,用户要询问对方的共享路径才能清楚地获得共享资源.如果想看到某局域网全部的共享文件,则需要询问每一个人,这样的操作太不方便了. 根据管理员的需求,可以使用win ...
dfs根目录_win2003分布式文件系统(dfs)配置方法[图文详解]
在网络中,共享文件的物理位置是分散分布的,用户要询问对方的共享路径才能清楚地获得共享资源.如果想看到某局域网全部的共享文件,则需要询问每一个人,这样的操作太不方便了. 根据管理员的需求,可以使用win ...
HDFS(hadoop distributed File System)详解
HDFS(hadoop distributed File System)分布式文件系统特点:高容错性(多个文本副本存储),价格低,高吞吐量. 常见的系统 gfs,HDFS.Lustre .Ceph ...
Linux文件系统只读Read-only file system的解决方法
Linux文件系统只读Read-only file system的解决方法参考文章: (1)Linux文件系统只读Read-only file system的解决方法 (2)https://www. ...
windows server 2012 分布式文件系统DFS介绍
在上一篇文章server 2012网络负载均衡NLB介绍的文章中,我们当时做实验的时候为了能够把效果表现出来,所以NLB2和NLB3两台机器上装IIS的index.htm文件我们分别创建了不同的两个文 ...
日志文件系统（journaling file system）
日志文件系统(journaling file system)是一个具有故障恢复能力的文件系统,在这个文件系统中,因为对目录以及位图的更新信息总是在原始的磁盘日志被更新之前写到磁盘上的一个连续的日志上, ...
Linux文件系统只读Read-only file system
问题描述: 1.系统无法进行磁盘的读写操作(touch,cp,chmod)等等 2.服务器无法启动(也是因为无法创建文件) 3.只有涉及到系统磁盘的写操作,都会报错"Read-only fi ...
Hadoop Distributed File System 简介
HDFS 是一个 Apache Software Foundation 项目,是 Apache Hadoop 项目的一个子项目(参见参考资料).Hadoop 非常适于存储大型数据(比如 teraby ...
linux 单用户模式挂载u盘_（原创）Linux文件系统只读Read-only file system的快速解决方法...
问题描述:上周公司的私有云(底层架构是Openstack+KVM,目前稳定性还不够好,开发团队在改进中)一个计算节点挂掉,之后恢复后发现这个计算节点的所有Linux虚拟机系统都变成只读了,复制文件提示 ...

第一节：分布式文件系统（DFS，Distributed File System）

第一节：分布式文件系统（DFS，Distributed File System）相关推荐

最新文章

热门文章