第一部分、章节目录

3.4.1.程序的开始和结束

3.4.2.进程环境

3.4.3.进程的正式引入

3.4.4.fork创建子进程

3.4.5.父子进程对文件的操作

3.4.6.进程的诞生和消亡

3.4.7.父进程wait回收子进程

3.4.8.waitpid介绍

3.4.9.exec族函数及实战1

3.4.10.exec族函数及实战2

3.4.11.进程状态和system函数

3.4.12.进程关系

3.4.13.守护进程的引入

3.4.14.编写简单守护进程

3.4.15.使用syslog来记录调试信息

3.4.16.让程序不能被多次运行

3.4.17.linux的进程间通信概述

3.4.18.linux的IPC机制1-管道

3.4.19.SystemV IPC介绍

第二部分、章节介绍

3.4.1.程序的开始和结束

本节讲述一个典型程序的开始运行和结束运行,引入引导代码让大家更容易的理解操作系统是如何运行一个程序的。

3.4.2.进程环境

本节讲解进程的环境变量和虚拟地址空间,这些都是一个进程在系统中运行时的外部环境。

3.4.3.进程的正式引入

本节正式引入进程的概念,讲述了进程的ID以及获取进程ID的函数,多进程调度实现宏观上并行的原理。

3.4.4.fork创建子进程

本节引入子进程,并且讲解并实战演示了fork函数如何创建子进程。

3.4.5.父子进程对文件的操作

本节通过父子进程对文件的操作来说明父子进程的区别和联系。

3.4.6.进程的诞生和消亡

本节讲述进程的诞生和消亡过程,着重讲了僵尸进程和孤儿进程的概念,进程资源回收和状态返回等。

3.4.7.父进程wait回收子进程

本节讲解wait函数回收子进程的信号式异步通信工作原理,并且实战演练了使用wait来回收子进程的过程。

3.4.8.waitpid介绍

本节首先介绍waitpid和wait函数的差别,然后实战演示了waitpid函数的3种常见用法,最后简单讲解了竟态的概念。

3.4.9.exec族函数及实战1

本节开始讲解exec族函数的作用和各个API的差异,并且写代码进行演示。

3.4.10.exec族函数及实战2

本节演示了exec族的p后缀和e后缀函数的用法。

3.4.11.进程状态和system函数

本节详细讲解了linux中进程的5种状态和状态转换图,最后讲了下system函数

3.4.12.进程关系

本节讲解进程的四种关系:无关系、父子关系、进程组和会话。

3.4.13.守护进程的引入

本节引入守护进程的概念,并且介绍了常见的一些系统级服务器守护进程及其作用。

3.4.14.编写简单守护进程

本节实践编程自己实现一个守护进程,让大家熟悉守护进程的创建过程。

3.4.15.使用syslog来记录调试信息

本节讲解如何在程序中使用syslog记录日志信息,这是一种非常常见的程序调试信息输出手段,也是守护进程必用的调试信息输出手段。

3.4.16.让程序不能被多次运行

本节介绍如何让我们的程序只能运行一次,即所谓单例运行的常规实现方法。这个在实际工作中很有用。

3.4.17.linux的进程间通信概述

本节进行linux中进程间通信IPC的概述,指明了后面如何讲解IPC。

3.4.18.linux的IPC机制1-管道

本节详细讲了传统Unix的进程间通信方法:管道和有名管道。

3.4.19.SystemV IPC介绍

本节对SystemV IPC的三种(信号量、消息队列、共享内存)方式进行概括性讲解和对比。

第三部分、随堂记录

3.4.1.程序的开始和结束

3.4.1.1、main函数由谁调用

(1)编译链接时的引导代码。操作系统下的应用程序其实在main执行前也需要先执行一段引导代码才能去执行main,我们写应用程序时不用考虑引导代码的问题,编译连接时(准确说是连接时)由链接器将编译器中事先准备好的引导代码给连接进去和我们的应用程序一起构成最终的可执行程序。

(2)运行时的加载器。加载器是操作系统中的程序,当我们去执行一个程序时(譬如./a.out,譬如代码中用exec族函数来运行)加载器负责将这个程序加载到内存中去执行这个程序。

(3)程序在编译连接时用链接器,运行时用加载器,这两个东西对程序运行原理非常重要。

(4)argc和argv的传参如何实现

3.4.1.2、程序如何结束

(1)正常终止:return、exit、_exit

(2)非正常终止:自己或他人发信号终止进程

3.4.1.3、atexit注册进程终止处理函数

(1)实验演示

(2)atexit注册多个进程终止处理函数,先注册的后执行(先进后出,和栈一样)

(2)return、exit和_exit的区别:return和exit效果一样,都是会执行进程终止处理函数,但是用_exit终止进程时并不执行atexit注册的进程终止处理函数。

3.4.2.进程环境

3.4.2.1、环境变量

(1)export命令查看环境变量

(2)进程环境表介绍.每一个进程中都有一份所有环境变量构成的一个表格,也就是说我们当前进程中可以直接使用这些环境变量。进程环境表其实是一个字符串数组,用environ变量指向它。

(3)程序中通过environ全局变量使用环境变量

(4)我们写的程序中可以无条件直接使用系统中的环境变量,所以一旦程序中用到了环境变量那么程序就和操作系统环境有关了。

(4)获取指定环境变量函数getenv

3.4.2.2、进程运行的虚拟地址空间

(1)操作系统中每个进程在独立地址空间中运行

(2)每个进程的逻辑地址空间均为4GB(32位系统)

(3)0-1G为OS,1-4G为应用

(4)虚拟地址到物理地址空间的映射

(5)意义。进程隔离,提供多进程同时运行

3.4.3.进程的正式引入

3.4.3.1、什么是进程

(1)动态过程而不是静态实物

(2)进程就是程序的一次运行过程,一个静态的可执行程序a.out的一次运行过程(./a.out去运行到结束)就是一个进程。

(3)进程控制块PCB(processcontrol block),内核中专门用来管理一个进程的数据结构。

3.4.3.2、进程ID

(1)getpid、getppid、getuid、geteuid、getgid、getegid

(2)实际用户ID和有效用户ID区别(可百度)

3.4.3.3、多进程调度原理

(1)操作系统同时运行多个进程

(2)宏观上的并行和微观上的串行

(3)实际上现代操作系统最小的调度单元是线程而不是进程

3.4.4.fork创建子进程

3.4.4.1、为什么要创建子进程

(1)每一次程序的运行都需要一个进程

(2)多进程实现宏观上的并行

3.4.4.2、fork的内部原理

(1)进程的分裂生长模式。如果操作系统需要一个新进程来运行一个程序,那么操作系统会用一个现有的进程来复制生成一个新进程。老进程叫父进程,复制生成的新进程叫子进程。

(2)fork的演示

(3)fork函数调用一次会返回2次,返回值等于0的就是子进程,而返回值大于0的就是父进程。

(4)典型的使用fork的方法:使用fork后然后用if判断返回值,并且返回值大于0时就是父进程,等于0时就是子进程。

(5)fork的返回值在子进程中等于0,在父进程中等于本次fork创建的子进程的进程ID。

3.4.4.3、关于子进程

(1)子进程和父进程的关系

(2)子进程有自己独立的PCB

(3)子进程被内核同等调度

3.4.5.父子进程对文件的操作

3.4.5.1、子进程继承父进程中打开的文件

(1)上下文:父进程先open打开一个文件得到fd,然后在fork创建子进程。之后在父子进程中各自write向fd中写入内容

(2)测试结论是:接续写。实际上本质原因是父子进程之间的fd对应的文件指针是彼此关联的(很像O_APPEND标志后的样子)

(3)实际测试时有时候会看到只有一个,有点像分别写。但是实际不是,原因是

3.4.5.2、父子进程各自独立打开同一文件实现共享

(1)父进程open打开1.txt然后写入,子进程打开1.txt然后写入,结论是:分别写。原因是父子进程分离后才各自打开的1.txt,这时候这两个进程的PCB已经独立了,文件表也独立了,因此2次读写是完全独立的。

(2)open时使用O_APPEND标志看看会如何?实际测试结果标明O_APPEND标志可以把父子进程各自独立打开的fd的文件指针给关联起来,实现分别写。

3.4.5.3、总结

(1)父子进程间终究多了一些牵绊

(2)父进程在没有fork之前自己做的事情对子进程有很大影响,但是父进程fork之后在自己的if里做的事情就对子进程没有影响了。本质原因就是因为fork内部实际上已经复制父进程的PCB生成了一个新的子进程,并且fork返回时子进程已经完全和父进程脱离并且独立被OS调度执行。

(2)子进程最终目的是要独立去运行另外的程序

3.4.6.进程的诞生和消亡

3.4.6.1、进程的诞生

(1)进程0和进程1

(2)fork

(3)vfork

3.4.6.2、进程的消亡

(1)正常终止和异常终止

(2)进程在运行时需要消耗系统资源(内存、IO),进程终止时理应完全释放这些资源(如果进程消亡后仍然没有释放相应资源则这些资源就丢失了)

(3)linux系统设计时规定:每一个进程退出时,操作系统会自动回收这个进程涉及到的所有的资源(譬如malloc申请的内容没有free时,当前进程结束时这个内存会被释放,譬如open打开的文件没有close的在程序终止时也会被关闭)。但是操作系统只是回收了这个进程工作时消耗的内存和IO,而并没有回收这个进程本身占用的内存(8KB,主要是task_struct和栈内存)

(4)因为进程本身的8KB内存操作系统不能回收需要别人来辅助回收,因此我们每个进程都需要一个帮助它收尸的人,这个人就是这个进程的父进程。

3.4.6.3、僵尸进程

(1)子进程先于父进程结束。子进程结束后父进程此时并不一定立即就能帮子进程“收尸”,在这一段(子进程已经结束且父进程尚未帮其收尸)子进程就被成为僵尸进程。

(2)子进程除task_struct和栈外其余内存空间皆已清理

(3)父进程可以使用wait或waitpid以显式回收子进程的剩余待回收内存资源并且获取子进程退出状态。

(4)父进程也可以不使用wait或者waitpid回收子进程,此时父进程结束时一样会回收子进程的剩余待回收内存资源。(这样设计是为了防止父进程忘记显式调用wait/waitpid来回收子进程从而造成内存泄漏)

3.4.6.4、孤儿进程

(1)父进程先于子进程结束,子进程成为一个孤儿进程。

(2)linux系统规定:所有的孤儿进程都自动成为一个特殊进程(进程1,也就是init进程)的子进程。

3.4.7.父进程wait回收子进程

3.4.7.1、wait的工作原理

(1)子进程结束时,系统向其父进程发送SIGCHILD信号

(2)父进程调用wait函数后阻塞

(3)父进程被SIGCHILD信号唤醒然后去回收僵尸子进程

(4)父子进程之间是异步的,SIGCHILD信号机制就是为了解决父子进程之间的异步通信问题,让父进程可以及时的去回收僵尸子进程。

(5)若父进程没有任何子进程则wait返回错误

3.4.7.2、wait实战编程

(1)wait的参数status。status用来返回子进程结束时的状态,父进程通过wait得到status后就可以知道子进程的一些结束状态信息。

(2)wait的返回值pid_t,这个返回值就是本次wait回收的子进程的PID。当前进程有可能有多个子进程,wait函数阻塞直到其中一个子进程结束wait就会返回,wait的返回值就可以用来判断到底是哪一个子进程本次被回收了。

对wait做个总结:wait主要是用来回收子进程资源,回收同时还可以得知被回收子进程的pid和退出状态。

(3)fork后wait回收实例

(4)WIFEXITED、WIFSIGNALED、WEXITSTATUS这几个宏用来获取子进程的退出状态。

WIFEXITED宏用来判断子进程是否正常终止(return、exit、_exit退出)

WIFSIGNALED宏用来判断子进程是否非正常终止(被信号所终止)

WEXITSTATUS宏用来得到正常终止情况下的进程返回值的。

3.4.8.waitpid介绍

3.4.8.1、waitpid和wait差别

(1)基本功能一样,都是用来回收子进程

(2)waitpid可以回收指定PID的子进程

(3)waitpid可以阻塞式或非阻塞式两种工作模式

3.4.8.2、waitpid原型介绍

(1)参数

(2)返回值

3.4.8.3、代码实例

(1)使用waitpid实现wait的效果

ret = waitpid(-1,&status, 0);     -1表示不等待某个特定PID的子进程而是回收任意一个子进程,0表示用默认的方式(阻塞式)来进行等待,返回值ret是本次回收的子进程的PID

(2)ret = waitpid(pid,&status, 0);     等待回收PID为pid的这个子进程,如果当前进程并没有一个ID号为pid的子进程,则返回值为-1;如果成功回收了pid这个子进程则返回值为回收的进程的PID

(3)ret = waitpid(pid,&status, WNOHANG);这种表示父进程要非阻塞式的回收子进程。此时如果父进程执行waitpid时子进程已经先结束等待回收则waitpid直接回收成功,返回值是回收的子进程的PID;如果父进程waitpid时子进程尚未结束则父进程立刻返回(非阻塞),但是返回值为0(表示回收不成功)。

3.4.8.4、竟态初步引入

(1)竟态全称是:竞争状态,多进程环境下,多个进程同时抢占系统资源(内存、CPU、文件IO)

(2)竞争状态对OS来说是很危险的,此时OS如果没处理好就会造成结果不确定。

(3)写程序当然不希望程序运行的结果不确定,所以我们写程序时要尽量消灭竞争状态。操作系统给我们提供了一系列的消灭竟态的机制,我们需要做的是在合适的地方使用合适的方法来消灭竟态。

3.4.9.exec族函数及实战1

3.4.9.1、为什么需要exec函数

(1)fork子进程是为了执行新程序(fork创建了子进程后,子进程和父进程同时被OS调度执行,因此子进程可以单独的执行一个程序,这个程序宏观上将会和父进程程序同时进行)

(2)可以直接在子进程的if中写入新程序的代码。这样可以,但是不够灵活,因为我们只能把子进程程序的源代码贴过来执行(必须知道源代码,而且源代码太长了也不好控制),譬如说我们希望子进程来执行ls -la 命令就不行了(没有源代码,只有编译好的可执行程序)

(3)使用exec族运行新的可执行程序(exec族函数可以直接把一个编译好的可执行程序直接加载运行)

(4)我们有了exec族函数后,我们典型的父子进程程序是这样的:子进程需要运行的程序被单独编写、单独编译连接成一个可执行程序(叫hello),(项目是一个多进程项目)主程序为父进程,fork创建了子进程后在子进程中exec来执行hello,达到父子进程分别做不同程序同时(宏观上)运行的效果。

3.4.9.2、exec族的6个函数介绍

(1)execl和execv 这两个函数是最基本的exec,都可以用来执行一个程序,区别是传参的格式不同。execl是把参数列表(本质上是多个字符串,必须以NULL结尾)依次排列而成(l其实就是list的缩写),execv是把参数列表事先放入一个字符串数组中,再把这个字符串数组传给execv函数。

(2)execlp和execvp   这两个函数在上面2个基础上加了p,较上面2个来说,区别是:上面2个执行程序时必须指定可执行程序的全路径(如果exec没有找到path这个文件则直接报错),而加了p的传递的可以是file(也可以是path,只不过兼容了file。加了p的这两个函数会首先去找file,如果找到则执行执行,如果没找到则会去环境变量PATH所指定的目录下去找,如果找到则执行如果没找到则报错)

(3)execle和execvpe  这两个函数较基本exec来说加了e,函数的参数列表中也多了一个字符串数组envp形参,e就是environment环境变量的意思,和基本版本的exec的区别就是:执行可执行程序时会多传一个环境变量的字符串数组给待执行的程序。

3.4.9.3、exec实战1

(1)使用execl运行ls -l -a

(2)使用execv运行ls

(3)使用execl运行自己写的程序

3.4.10.exec族函数及实战2

3.4.10.1、execlp和execvp

(1)加p和不加p的区别是:不加p时需要全部路径+文件名,如果找不到就报错了。加了p之后会多帮我们到PATH所指定的路径下去找一下。

3.4.10.2、execle和execvpe

(1)main函数的原型其实不止是int main(int argc, char **argv),而可以是

int main(int argc, char**argv, char **env)   第三个参数是一个字符串数组,内容是环境变量。

(2)如果用户在执行这个程序时没有传递第三个参数,则程序会自动从父进程继承一份环境变量(默认的,最早来源于OS中的环境变量);如果我们exec的时候使用execlp或者execvpe去给传一个envp数组,则程序中的实际环境变量是我们传递的这一份(取代了默认的从父进程继承来的那一份)

3.4.11.进程状态和system函数

3.4.11.1、进程的5种状态

(1)就绪态。这个进程当前所有运行条件就绪,只要得到了CPU时间就能直接运行。

(2)运行态。就绪态时得到了CPU就进入运行态开始运行。

(3)僵尸态。进程已经结束但是父进程还没来得及回收

(4)等待态(浅度睡眠&深度睡眠),进程在等待某种条件,条件成熟后可进入就绪态。等待态下就算你给他CPU调度进程也无法执行。浅度睡眠等待时进程可以被(信号)唤醒,而深度睡眠等待时不能被唤醒只能等待的条件到了才能结束睡眠状态。

(5)暂停态。暂停并不是进程的终止,只是被被人(信号)暂停了,还可以回复的。

3.4.11.2、进程各种状态之间的转换图

3.4.11.3、system函数简介

(1)system函数 = fork+exec

(1)原子操作。原子操作意思就是整个操作一旦开始就会不被打断的执行完。原子操作的好处就是不会被人打断(不会引来竞争状态),坏处是自己单独连续占用CPU时间太长影响系统整体实时性,因此应该尽量避免不必要的原子操作,就算不得不原子操作也应该尽量原子操作的时间缩短。

(2)使用system调用ls

3.4.12.进程关系

(1)无关系

(2)父子进程关系

(3)进程组(group)由若干进程构成一个进程组

(4)会话(session)会话就是进程组的组

3.4.13.守护进程的引入

3.4.13.1、进程查看命令ps

(1)ps -ajx 偏向显示各种有关的ID号

(2)ps -aux 偏向显示进程各种占用资源

3.4.13.2、向进程发送信号指令kill

(1)kill -信号编号 进程ID,向一个进程发送一个信号

(2)kill -9 xxx,将向xxx这个进程发送9号信号,也就是要结束进程

3.4.13.3、何谓守护进程

(1)daemon,表示守护进程,简称为d(进程名后面带d的基本就是守护进程)

(2)长期运行(一般是开机运行直到关机时关闭)

(3)与控制台脱离(普通进程都和运行该进程的控制台相绑定,表现为如果终端被强制关闭了则这个终端中运行的所有进程都被会关闭,背后的问题还在于会话)

(4)服务器(Server),服务器程序就是一个一直在运行的程序,可以给我们提供某种服务(譬如nfs服务器给我们提供nfs通信方式),当我们程序需要这种服务时我们可以调用服务器程序(和服务器程序通信以得到服务器程序的帮助)来进程这种服务操作。服务器程序一般都实现为守护进程。

3.4.13.4、常见守护进程

(1)syslogd,系统日志守护进程,提供syslog功能。

(2)cron,cron进程用来实现操作系统的时间管理,linux中实现定时执行程序的功能就要用到cron。

3.4.14.编写简单守护进程

3.4.14.1、任何一个进程都可以将自己实现成守护进程

3.4.14.2、create_daemon函数要素

(1)子进程等待父进程退出

(2)子进程使用setsid创建新的会话期,脱离控制台

(3)调用chdir将当前工作目录设置为/

(4)umask设置为0以取消任何文件权限屏蔽

(5)关闭所有文件描述符

(6)将0、1、2定位到/dev/null

3.4.15.使用syslog来记录调试信息

3.4.15.1、openlog、syslog、closelog

3.4.15.2、各种参数

3.4.15.3、编程实战

(1)一般log信息都在操作系统的/var/log/messages这个文件中存储着,但是ubuntu中是在/var/log/syslog文件中的。

3.4.15.4、syslog的工作原理

(1)操作系统中有一个守护进程syslogd(开机运行,关机时才结束),这个守护进程syslogd负责进行日志文件的写入和维护。

(2)syslogd是独立于我们任意一个进程而运行的。我们当前进程和syslogd进程本来是没有任何关系的,但是我们当前进程可以通过调用openlog打开一个和syslogd相连接的通道,然后通过syslog向syslogd发消息,然后由syslogd来将其写入到日志文件系统中。

(3)syslogd其实就是一个日志文件系统的服务器进程,提供日志服务。任何需要写日志的进程都可以通过openlog/syslog/closelog这三个函数来利用syslogd提供的日志服务。这就是操作系统的服务式的设计。

3.4.16.让程序不能被多次运行

3.4.16.1、问题

(1)因为守护进程是长时间运行而不退出,因此./a.out执行一次就有一个进程,执行多次就有多个进程。

(2)这样并不是我们想要的。我们守护进程一般都是服务器,服务器程序只要运行一个就够了,多次同时运行并没有意义甚至会带来错误。

(3)因此我们希望我们的程序具有一个单例运行的功能。意思就是说当我们./a.out去运行程序时,如果当前还没有这个程序的进程运行则运行之,如果之前已经有一个这个程序的进程在运行则本次运行直接退出(提示程序已经在运行)。

3.4.16.2、实现方法:

(1)最常用的一种方法就是:用一个文件的存在与否来做标志。具体做法是程序在执行之初去判断一个特定的文件是否存在,若存在则标明进程已经在运行,若不存在则标明进程没有在运行。然后运行程序时去创建这个文件。当程序结束的时候去删除这个文件即可。

(2)这个特定文件要古怪一点,确保不会凑巧真的在电脑中存在的。

3.4.17.linux的进程间通信概述

3.4.17.1、为什么需要进程间通信

(1)进程间通信(IPC)指的是2个任意进程之间的通信。

(2)同一个进程在一个地址空间中,所以同一个进程的不同模块(不同函数、不同文件)之间都是很简单的(很多时候都是全局变量、也可以通过函数形参实参传递)

(3)2个不同的进程处于不同的地址空间,因此要互相通信很难。

3.4.17.2、什么样的程序设计需要进程间通信

(1)99%的程序是不需要考虑进程间通信的。因为大部分程序都是单进程的(可以多线程)

(2)复杂、大型的程序,因为设计的需要就必须被设计成多进程程序(我们整个程序就设计成多个进程同时工作来完成的模式),常见的如GUI、服务器。

(3)结论:IPC技术在一般中小型程序中用不到,在大型程序中才会用到。

3.4.17.3、linux内核提供多种进程间通信机制

(1)无名管道和有名管道

(2)SystemV IPC:信号量、消息队列、共享内存

(3)Socket域套接字

(4)信号

3.4.17.4、为什么不详细讲IPC

(1)日常使用少,只有大型程序才能用上

(2)更为复杂,属于linux应用编程中难度最大的部分

(3)细节多

(4)面试较少涉及,对找工作帮助不大

(5)建议后续深入学习时再来实际写代码详细探讨

3.4.18.linux的IPC机制1-管道

3.4.18.1、管道(无名管道)

(1)管道通信的原理:内核维护的一块内存,有读端和写端(管道是单向通信的)

(2)管道通信的方法:父进程创建管理后fork子进程,子进程继承父进程的管道fd

(3)管道通信的限制:只能在父子进程间通信、半双工

(4)管道通信的函数:pipe、write、read、close

3.4.18.2、有名管道(fifo)

(1)有名管道的原理:实质也是内核维护的一块内存,表现形式为一个有名字的文件

(2)有名管道的使用方法:固定一个文件名,2个进程分别使用mkfifo创建fifo文件,然后分别open打开获取到fd,然后一个读一个写

(3)管道通信限制:半双工(注意不限父子进程,任意2个进程都可)

(4)管道通信的函数:mkfifo、open、write、read、close

3.4.19.SystemV IPC介绍

3.4.19.1、SystemV IPC的基本特点

(1)系统通过一些专用API来提供SystemVIPC功能

(2)分为:信号量、消息队列、共享内存

(3)其实质也是内核提供的公共内存

3.4.19.2、消息队列

(1)本质上是一个队列,队列可以理解为(内核维护的一个)FIFO

(2)工作时A和B2个进程进行通信,A向队列中放入消息,B从队列中读出消息。

3.4.19.3、信号量

(1)实质就是个计数器(其实就是一个可以用来计数的变量,可以理解为int a)

(2)通过计数值来提供互斥和同步

3.4.19.4、共享内存

(1)大片内存直接映射

(2)类似于LCD显示时的显存用法

3.4.19.5、剩余的2类IPC

(1)信号

(2)Unix域套接字 socket

***********《朱有鹏老师嵌入式linux核心课程》***********

《3.linux应用编程和网络编程-第9部分-3.9.linux网络编程实践》

--------------------------------------------------------

本课程由朱老师物联网大讲堂推出并提供技术支持,课件可打包下载

网盘地址:http://yunpan.cn/cjVy3RAgfDufK访问密码 4ad7

技术交流QQ群:朱老师物联网讲堂1群 397164505

--------------------------------------------------------

第一部分、章节目录

3.9.1.linux网络编程框架

3.9.2.TCP协议的学习1

3.9.3.TCP协议的学习2

3.9.4.socket编程接口介绍

3.9.5.IP地址格式转换函数实践

3.9.6.soekct实践编程1

3.9.7.soekct实践编程2

3.9.8.socket实践编程3

3.9.9.socket编程实践4

第二部分、章节介绍

3.9.1.linux网络编程框架

本节讲述网络编程的框架,分层思想和TCP/IP协议的介绍,BS架构和CS架构的介绍等。

3.9.2.TCP协议的学习1

本节详细介绍TCP协议的特点,其中重点讲述了TCP协议保证实现可靠传输的机制。

3.9.3.TCP协议的学习2

本节接上节继续讲解TCP协议,主要讲了TCP协议建立连接和关闭连接时的握手方法,最后讲了使用TCP来实现的常见应用层协议。

3.9.4.socket编程接口介绍

本节介绍linux API中与网络编程相关的接口函数,后面的实战编程中都要用到这些函数。

3.9.5.IP地址格式转换函数实践

本节通过代码实践来给大家演示IP地址格式转换的几个函数

3.9.6.soekct实践编程1

本节开始编写基于TCP的客户端和服务器连接通信程序

3.9.7.soekct实践编程2

本节接上节继续编写,并且已经实现客户端和服务器的连接。

3.9.8.socket实践编程3

本节实现客户端和服务器之间的任意发送和接收、反复发送接收等功能

3.9.9.socket编程实践4

本节通过定义一个简单的应用层协议,来向大家介绍TCP连接建立后如何通过应用层协议来实现业务逻辑。

第三部分、随堂记录

3.9.1.linux网络编程框架

3.9.1.1、网络是分层的

(1)OSI 7层模型

(2)网络为什么要分层

(3)网络分层的具体表现

3.9.1.2、TCP/IP协议引入

(1)TCP/IP协议是用的最多的网络协议实现

(2)TCP/IP分为4层,对应OSI的7层

(3)我们编程时最关注应用层,了解传输层,网际互联层和网络接入层不用管

3.9.1.3、BS和CS

(1)CS架构介绍(client server,客户端服务器架构)

(2)BS架构介绍(broswer server,浏览器服务器架构)

3.9.2.TCP协议的学习1

3.9.2.1、关于TCP理解的重点

(1)TCP协议工作在传输层,对上服务socket接口,对下调用IP层

(2)TCP协议面向连接,通信前必须先3次握手建立连接关系后才能开始通信。

(3)TCP协议提供可靠传输,不怕丢包、乱序等。

3.9.2.2、TCP如何保证可靠传输

(1)TCP在传输有效信息前要求通信双方必须先握手,建立连接才能通信

(2)TCP的接收方收到数据包后会ack给发送方,若发送方未收到ack会丢包重传

(3)TCP的有效数据内容会附带校验,以防止内容在传递过程中损坏

(4)TCP会根据网络带宽来自动调节适 配速率(滑动窗口技术)

(5)发送方会给各分割报文编号,接收方会校验编号,一旦顺序错误即会重传。

3.9.3.TCP协议的学习2

3.9.3.1、TCP的三次握手

(1)建立连接需要三次握手

(2)建立连接的条件:服务器listen时客户端主动发起connect

3.9.3.2、TCP的四次握手

(3)关闭连接需要四次握手

(4)服务器或者客户端都可以主动发起关闭

注:这些握手协议已经封装在TCP协议内部,socket编程接口平时不用管

3.9.3.3、基于TCP通信的服务模式

(1)具有公网IP地址的服务器(或者使用动态IP地址映射技术)

(2)服务器端socket、bind、listen后处于监听状态

(3)客户端socket后,直接connect去发起连接。

(4)服务器收到并同意客户端接入后会建立TCP连接,然后双方开始收发数据,收发时是双向的,而且双方均可发起

(5)双方均可发起关闭连接

3.9.3.4、常见的使用了TCP协议的网络应用

(1)http、ftp

(2)QQ服务器

(3)mail服务器

3.9.4.socket编程接口介绍

3.9.4.1、建立连接

(1)socket。socket函数类似于open,用来打开一个网络连接,如果成功则返回一个网络文件描述符(int类型),之后我们操作这个网络连接都通过这个网络文件描述符。

(2)bind

(3)listen

(4)connect

3.9.4.3、发送和接收

(1)send和write

(2)recv和read

3.9.4.4、辅助性函数

(1)inet_aton、inet_addr、inet_ntoa

(2)inet_ntop、inet_pton

3.9.4.5、表示IP地址相关数据结构

(1)都定义在 netinet/in.h

(2)struct sockaddr,这个结构体是网络编程接口中用来表示一个IP地址的,注意这个IP地址是不区分IPv4和IPv6的(或者说是兼容IPv4和IPv6的)

(3)typedef uint32_tin_addr_t;     网络内部用来表示IP地址的类型

(4)struct in_addr

{

in_addr_t s_addr;

};

(5)struct sockaddr_in

{

__SOCKADDR_COMMON (sin_);

in_port_t sin_port;                 /* Port number.  */

struct in_addr sin_addr;            /* Internet address.  */

/* Pad to size of `struct sockaddr'.  */

unsigned char sin_zero[sizeof (structsockaddr) -

__SOCKADDR_COMMON_SIZE -

sizeof (in_port_t) -

sizeof (structin_addr)];

};

(6)struct sockaddr         这个结构体是linux的网络编程接口中用来表示IP地址的标准结构体,bind、connect等函数中都需要这个结构体,这个结构体是兼容IPV4和IPV6的。在实际编程中这个结构体会被一个struct sockaddr_in或者一个struct sockaddr_in6所填充。

3.9.5.IP地址格式转换函数实践

3.9.5.1、inet_addr、inet_ntoa、inet_aton

3.9.5.2、inet_pton、inet_ntop

?

3.9.6_7.soekct实践编程1_2

3.9.6.1、服务器端程序编写

(1)socket

(2)bind

(3)listen

(4)accept,返回值是一个fd,accept正确返回就表示我们已经和前来连接我的客户端之间建立了一个TCP连接了,以后我们就要通过这个连接来和客户端进行读写操作,读写操作就需要一个fd,这个fd就由accept来返回了。

注意:socket返回的fd叫做监听fd,是用来监听客户端的,不能用来和任何客户端进行读写;accept返回的fd叫做连接fd,用来和连接那端的客户端程序进行读写。

3.9.6.2、客户端程序编写

(1)socket

(2)connect

概念:端口号,实质就是一个数字编号,用来在我们一台主机中(主机的操作系统中)唯一的标识一个能上网的进程。端口号和IP地址一起会被打包到当前进程发出或者接收到的每一个数据包中。每一个数据包将来在网络上传递的时候,内部都包含了发送方和接收方的信息(就是IP地址和端口号),所以IP地址和端口号这两个往往是打包在一起不分家的。

3.9.8.socket实践编程3

3.9.8.1、客户端发送&服务器接收

3.9.8.2、服务器发送&客户端接收

3.9.8.3、探讨:如何让服务器和客户端好好沟通

(1)客户端和服务器原则上都可以任意的发和收,但是实际上双方必须配合:client发的时候server就收,而server发的时候client就收

(2)必须了解到的一点:client和server之间的通信是异步的,这就是问题的根源

(3)解决方案:依靠应用层协议来解决。说白了就是我们server和client事先做好一系列的通信约定。

3.9.9.socket编程实践4

3.9.9.1、自定义应用层协议第一步:规定发送和接收方法

(1)规定连接建立后由客户端主动向服务器发出1个请求数据包,然后服务器收到数据包后回复客户端一个回应数据包,这就是一个通信回合

(2)整个连接的通信就是由N多个回合组成的。

3.9.9.2、自定义应用层协议第二步:定义数据包格式

3.9.9.3、常用应用层协议:http、ftp······

3.9.9.4、UDP简介

linux和网络编程笔记相关推荐

  1. Java网络编程笔记5

    在Java网络编程笔记4中我们看到了客户端与服务器通信的过程,只是在前面的程序只是单个客户端与服务器通信 的例子. 接下来我们看如何实现多个客户端与服务器通信,对于服务器来说,它要为每个客户端请求的S ...

  2. Linux下网络编程

    Linux下网络编程初步 Linux以其源代码公开闻名于世,并以其稳定性和可靠性雄霸操作系统领域,在网络应用技术方面使用得更加广泛.很久以来它就是Windows的重要对手之一.随着网络时代的来临,Li ...

  3. Linux原始网络编程,Linux操作系统网络编程 原始套接字 (1)

    Linux操作系统网络编程--原始套接字 (1) http://soft.zdnet.com.cn/software_zone/2007/1020/568223.shtml 我们在前面已经学习过了网络 ...

  4. Linux C 网络编程 仿照网盘的功能

    Linux C 网络编程 仿照网盘的功能 代码: gitbub 代码,欢迎下载测试 使用概述 启动 server-> make;./server ../conf/serverconf.ini c ...

  5. 进程fork和exec ---Unix网络编程笔记

    进程fork和exec ---Unix网络编程笔记 fork 一次调用,两次返回 fork的两个典型用法 最简单的并发服务器---fork子进程 exec -Unix网络编程笔记) fork #inc ...

  6. 基于Linux的网络编程——网络聊天程序

    网络聊天程序是目前应用极为广泛的一种网络软件,对于方便人们的交流沟通非常有效,同时,作为一种典型的网络应用,编写网络聊天程序是学习基于Linux的网络编程的有效方法. 结合任务需求设计该程序,程序采用 ...

  7. 华为顶级网络工程师分享出这份TCP/IP网络编程笔记,已封神

    都说程序员工资高.待遇好, 2022 金九银十到了,你的小目标是 30K.40K,还是 16薪的 20K?作为一名 Java 开发工程师,当能力可以满足公司业务需求时,拿到超预期的 Offer 并不算 ...

  8. 基于linux epoll网络编程细节处理丨epoll原理剖析

    epoll原理剖析以及三握四挥的处理 1. epoll原理详解 2. 连接的创建与断开 3. epoll如何连接细节问题 视频讲解如下,点击观看: 基于linux epoll网络编程细节处理丨epol ...

  9. Linux多线程网络编程要义丨epoll与reactor原理

    linux多线程网络编程要义 1. epoll原理剖析 2. 单reactor原理以及应用 3. 多reactor原理以及应用 [Linux服务器系列]Linux多线程网络编程要义丨epoll与rea ...

最新文章

  1. Datawhale浙大分享(附投票结果)
  2. Socket程序从windows移植到linux下需要注意的
  3. 多线程:同步和异步的优缺点比较
  4. Flask开发微电影网站(二)
  5. 最大公约数之和——极限版II
  6. HR谈网络工程师求职与职业规划
  7. Codeforce 记录 Rating
  8. 亲测 asp.net 调用 webservice返回json
  9. C#面试题(String和StringBuilder区别)
  10. ARCore 1.7可轻松打造AR自拍照及动画Augmented Faces API
  11. JavaWeb初级篇-HttpPost使用教程
  12. Struts2常量配置
  13. C# Datatable的Select方法
  14. 程序猿常识--OJ系统和ACM测试考试大全
  15. 计算机二级考试c语言考试注意事项,计算机二级MS Office、ACCESS、二级C语言考试的注意事项...
  16. U盘防病毒从七方面做起
  17. 微信缓存文件要这样处理,分分钟多出几个G!
  18. Pycharm使用技巧:Split Vertically/Horizontally(垂直/水平拆分窗口)
  19. MacBook更新系统空间不足/无限重启/无法退出更新程序
  20. 卷积 对图像进行卷积操作 卷积神经网络

热门文章

  1. C#命名空间(Namespace)
  2. countif是什么意思,如何运用?
  3. 位图文件大小的精准计算方法
  4. C++入门算法荷兰国旗
  5. 索尼lt26i解锁和root教程
  6. c语言正反补码,C语言-数据类型(原码、反码、补码)-2
  7. 一天走七万步是什么体验?
  8. 哀悼CSS 哀悼的时候让页面字体变黑的css
  9. DELL R730 主板坏了,Raid5硬盘移到同型号服务器备忘
  10. MapperScan注解分析