大数据培训课（体验） Day02

1.运行界面输入 notepad

打开一个空的文档

2.linux下建立空文档

输入 ： vi+任意不存在的文件名

3.删除指定范围行的内容

例如：删除第一行到倒数第三行
解释 ：$ 表示最后一行   d 表示删除

4.光标在一行的移动

按0： 移动到行首
按$ :  移动到行尾

5.在一行的删除

按D ： 此行光标后的内容全部删除

6.windows下查看本机服务窗口

7.linux下查看服务

chkconfig

8.查看历史输入内容

history

9.过滤查找历史输入的内容

history | grep + 想要查找的内容

10.查看端口

ss -nal

11.进入mysql

mysql -u +用户名 +  -p

Hadoop学习：

分布式存储：

 Master：负责管理文件系统的文件结构   记录清单slave： 奴隶  存储真正的数据    负责按照清单存储block：块  1.x 64m  2.x 128meg：300Mreplication： 副本机制  默认是三个副本

分布式计算：

移动数据：将数据移动到计算
移动计算：将计算移动到数据
HDFS:分布式文件系统
MapReduce：分布式计算框架

HDFS的角色

NameNode：主节点  负责管理文件系统的文件结构
DateNode ：从节点  负责存储真是的数据
client ： 客户端   负责读写数据

文件数据

1.元数据:描述数据的数据
2.数据本身:真实数据

HDFS常用的命令:

1.启动HDFS start-dfs.sh
2.启动NameNode hadoop-daemon.sh start|stop namenode
3.启动DataNode hadoop-daemon.sh start|stop datanode
4.停止HDFS stop-dfs.sh

大数据培训课（体验） Day02相关推荐

大数据培训课程之countByKey()案例
大数据培训课程saveAsObjectFile(path) 作用:用于将RDD中的元素序列化成对象,存储到文件中. 大数据培训课程 countByKey()案例作用:针对(K,V)类型的RDD,返回 ...
大数据培训课程之RDD传递一个属性
传递一个属性 1．创建Spark主程序 object TransmitTest { def main(args: Array[String]): Unit = { //1.初始化配置信息及SparkC ...
大数据培训课程之RDD中的函数传递
RDD中的函数传递在实际开发中我们往往需要自己定义一些对于RDD的操作,那么此时需要主要的是,初始化工作是在Driver端进行的,而实际运行程序是在Executor端进行的,这就涉及到了跨进程通信, ...
大数据培训课程之fold(num)(func)案例
fold(num)(func)案例作用:折叠操作,aggregate的简化操作,seqop和combop一样. 需求:创建一个RDD,将所有元素相加得到结果 (1)创建一个RDD scala> ...
大数据培训课程之Flume拓扑结构大数据培训课程之Flume拓扑结构
Flume拓扑结构 Flume的拓扑结构如图1-3.1-4.1-5和1-6所示: 图1-3 Flume Agent连接图1-4 单source,多channel.sink 图1-5 Flume负载均 ...
清华大学《大数据实践课》总结交流会成功举行
11月4日,清华大学大数据能力提升项目<大数据实践课>总结交流会于线上成功举行.来自北京妇产医院.北京同仁医院.赋乐科技.网帅科技的企业导师,授课教师软件学院闻立杰副教授,课程助教.学生代 ...
2018大数据培训学习路线图（详细完整版）
2018大数据培训学习路线全课程目录+学习线路详解(详细完整版) 第一阶段:大数据基础Java语言基础阶段 1.1:Java开发介绍 1.1.1 Java的发展历史 1.1.2 Java的应用领域 1 ...
Java大数据培训学校全套教程-AJAX（27）-马克-专题视频课程
Java大数据培训学校全套教程-AJAX(27)-2人已学习课程介绍 Java大数据培训学校视频教程:"java大数据培训学校全套教材"系列课程由750集视频构成 ...
大数据培训：Spark 性能调优详解
调优概述有的时候,我们可能会遇到大数据计算中一个最棘手的问题--数据倾斜,此时Spark作业的性能会比期望差很多.数据倾斜调优,就是使用各种技术方案解决不同类型的数据倾斜问题,以保证Spark作业的 ...
大数据培训完一般可以做哪些工作？
这个时代是大数据时代,也是大数据人才稀缺的时代.由于中国人才缺口比较大,大数据也迅速成为行业和市场的热点,更多的企业无论是对人才的招聘还是在培训都成了刚需,这也促使大数据人才的薪资在同岗位中是最高的, ...

大数据培训课（体验） Day02

1.运行界面输入 notepad

2.linux下建立空文档

3.删除指定范围行的内容

4.光标在一行的移动

5.在一行的删除

6.windows下查看本机服务窗口

7.linux下查看服务

8.查看历史输入内容

9.过滤查找历史输入的内容

10.查看端口

11.进入mysql

Hadoop学习：

分布式存储：

分布式计算：

HDFS的角色

文件数据

HDFS常用的命令:

大数据培训课（体验） Day02相关推荐

最新文章

热门文章

大数据培训课（体验） Day02

1.运行界面输入 notepad

2.linux下建立空文档

3.删除指定范围行的内容

4.光标在一行的移动

5.在一行的删除

6.windows下查看本机 服务 窗口

7.linux下查看服务

8.查看历史输入内容

9.过滤查找历史输入的内容

10.查看端口

11.进入mysql

Hadoop学习：

分布式存储：

分布式计算：

HDFS的角色

文件数据

HDFS常用的命令:

大数据培训课（体验） Day02相关推荐

最新文章

热门文章

6.windows下查看本机服务窗口