linux开机启动rsync,【Linux】rsync同步文件程序自启动

rsync使用

1. 为什么使用rsync?

rsync解决linux系统下文件同步时, 增量同步问题.

使用场景: 线上需要定时备份数据文件(视频资源), 使用rsync完成每天的增量备份.

2. rsync使用遇到的问题

线上数据文件全量备份, 32T数据, 主要是视频文件, 数据量较大, 按照100M/s, 需要3天+, 启动后在执行3h左右时出错, 备份程序退出.日志如下:

1 133 rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(544) [sender=3.0.6]2 134 rsync: writefd_unbuffered failed to write 78 bytes to socket [generator]: Broken pipe (32)

:可能是数据量较多, 导致备份出错??? 还未找到原因.

3. rsync删除大量文件应用(于rm -rf等的比较)

经测试, rsync与 rm-rf dir/ 时间上并无太大区别.

linux 积累

1. 后台执行程序

让程序忽略hangup信号 nohup %cmd% &

让程序的父进程是init进程，而不是当前终端的进程 setsid %cmd%

参见:

2.查看文件的创建日期(stat)

使用ls -l 显示的是文件的最后修改时间; 如何查看文件的创建时间? 参见:

说明：Access访问时间。Modify修改时间。Change状态改动时间。可以stat *查看这个目录所有文件的状态。

关于stat命令:

[root@streamserver ~]# stat 1.txt

File: `1.txt' Size: 2412 Blocks: 8 IO Block: 4096regular file

Device: fd00h/64768d Inode: 1057054 Links: 1Access: (0644/-rw-r--r--) Uid: ( 0/ root) Gid: ( 0/root)

Access:2015-07-26 15:56:31.845546973 +0800Modify:2015-07-26 15:56:29.555491379 +0800Change:2015-07-26 15:56:29.555491379 +0800

经centOS4.4.7验证: accessTime即为文件的创建时间(文章提到的more,less查看文件并不修改此时间)

3. 统计文件个数

ls -l|wc -l

包括子文件夹: ls -lR|wc -l

linux开机启动rsync,【Linux】rsync同步文件程序自启动相关推荐

linux开机启动故障,Linux启动系统及故障排除
一:Linux的启动过程: 开机加电自检->MBR引导(boot loader占446字节,分区列表64字节,magic占2字节)-->grub菜单(MBR是grub的第一个字段,第二个字 ...
简述linux开机启动进程,Linux系统启动流程简述
一.第一阶段:硬件引导启动 1.Bios上电自检, 初始化硬件:显卡,内存,磁盘 2.根据Bios设置找到启动介质,初次安装linux系统一般是CD-ROM或者U盘启动,已安装Linux系统选择本地H ...
linux 开机启动设置密码,Linux下Redis设置密码及开机自启动
1.设置Redis.conf中daemonize为yes,确保守护进程开启: 找到#requirepass foorbared这一行,直接替换掉这行,改为requirepass 新密码 2.编写开机自 ...
linux 开机启动文件夹,Linux开机启动流程
linux开机启动详细流程图: 一.BIOS 加电自检当你按电源开关开机时,电脑会首先去启动BIOS(基本输入输出系统),BIOS一般是集成在主板上的. BIOS 的工作 1.检测连接硬件,比如显卡 ...
linux开机启动服务详解
http://blog.163.com/sjt_linux/blog/static/19931031920126295452884/ linux开机启动服务详解(转) 2012-07-29 17:45 ...
linux开机启动详细流程图
linux开机启动详细流程图: 一.BIOS 加电自检当你按电源开关开机时,电脑会首先去启动BIOS(基本输入输出系统),BIOS一般是集成在主板上的. BIOS 的工作 1.检测连接硬件,比如显卡 ...
Linux开机启动分析与系统配置
在业务运维中,经常需要做系统环境配置,环境配置要在当前运行环境中生效,也要持久化依然重启生效. 通常,大家都会想到在/etc/rc.local中去添加业务自定义代码,但是也会发现,有些配置重启无法生产 ...
【转】Linux开机启动管理---systemd使用
常用命令使某服务自动启动 systemctl enable httpd.service 使某服务不自动启动 systemctl disable httpd.service 检查服务状态 syste ...
linux 打开上一级目录,linux开机启动过程、PATH、过滤一级目录、cd的参数、ls -lrt、命令切割日志...
第二波命令正向我方来袭 :开机启动过程.PATH.过滤一级目录.cd的参数.ls -lrt.命令切割日志 1.1 linux开机启动过程 1.1.1 开机自检(BIOS)-- MBR引导-- GRUB ...

linux开机启动rsync,【Linux】rsync同步文件程序自启动

linux开机启动rsync,【Linux】rsync同步文件程序自启动相关推荐

最新文章

热门文章

linux开机启动rsync,【Linux】rsync同步文件 程序自启动

linux开机启动rsync,【Linux】rsync同步文件 程序自启动相关推荐

最新文章

热门文章

linux开机启动rsync,【Linux】rsync同步文件程序自启动

linux开机启动rsync,【Linux】rsync同步文件程序自启动相关推荐