c语言通过epoll来实现http协议的web服务器
HTTP协议
引言
HTTP是一个属于应用层的面向对象的协议,由于其简捷、快速的方式,适用于分布式超媒体信息系统。它于1990年提出,经过几年的使用与发展,得到不断地完善和扩展。目前在WWW中使用的是HTTP/1.0的第六版,HTTP/1.1的规范化工作正在进行之中,而且HTTP-NG(Next Generation of HTTP)的建议已经提出。
HTTP协议的主要特点可概括如下:
1.支持客户/服务器模式。
2.简单快速:客户向服务器请求服务时,只需传送请求方法和路径。请求方法常用的有GET、HEAD、POST。每种方法规定了客户与服务器联系的类型不同。由于HTTP协议简单,使得HTTP服务器的程序规模小,因而通信速度很快。
3.灵活:HTTP允许传输任意类型的数据对象。正在传输的类型由Content-Type加以标记。
4.无连接:无连接的含义是限制每次连接只处理一个请求。服务器处理完客户的请求,并收到客户的应答后,即断开连接。采用这种方式可以节省传输时间。
5.无状态:HTTP协议是无状态协议。无状态是指协议对于事务处理没有记忆能力。缺少状态意味着如果后续处理需要前面的信息,则它必须重传,这样可能导致每次连接传送的数据量增大。另一方面,在服务器不需要先前信息时它的应答就较快。
一、HTTP协议详解之URL篇
http(超文本传输协议)是一个基于请求与响应模式的、无状态的、应用层的协议,常基于TCP的连接方式,HTTP1.1版本中给出一种持续连接的机制,绝大多数的Web开发,都是构建在HTTP协议之上的Web应用。
HTTP URL (URL是一种特殊类型的URI,包含了用于查找某个资源的足够的信息)的格式如下:
http://host[":"port][abs_path]
http表示要通过HTTP协议来定位网络资源;host表示合法的Internet主机域名或者IP地址;port指定一个端口号,为空则使用缺省端口80;abs_path指定请求资源的URI;如果URL中没有给出abs_path,那么当它作为请求URI时,必须以“/”的形式给出,通常这个工作浏览器自动帮我们完成。
eg:
1、输入:www.guet.edu.cn
浏览器自动转换成:http://www.guet.edu.cn/
2、http:192.168.0.116:8080/index.jsp
二、HTTP协议详解之请求篇
http请求由三部分组成,分别是:请求行、消息报头、请求正文
1、请求行以一个方法符号开头,以空格分开,后面跟着请求的URI和协议的版本,格式如下:Method Request-URI HTTP-Version CRLF
其中 Method表示请求方法;Request-URI是一个统一资源标识符;HTTP-Version表示请求的HTTP协议版本;CRLF表示回车和换行(除了作为结尾的CRLF外,不允许出现单独的CR或LF字符)。
请求方法(所有方法全为大写)有多种,各个方法的解释如下:
GET 请求获取Request-URI所标识的资源
POST 在Request-URI所标识的资源后附加新的数据
HEAD 请求获取由Request-URI所标识的资源的响应消息报头
PUT 请求服务器存储一个资源,并用Request-URI作为其标识
DELETE 请求服务器删除Request-URI所标识的资源
TRACE 请求服务器回送收到的请求信息,主要用于测试或诊断
CONNECT 保留将来使用
OPTIONS 请求查询服务器的性能,或者查询与资源相关的选项和需求
应用举例:
GET方法:在浏览器的地址栏中输入网址的方式访问网页时,浏览器采用GET方法向服务器获取资源,eg:GET /form.html HTTP/1.1 (CRLF)
POST方法要求被请求服务器接受附在请求后面的数据,常用于提交表单。
eg:POST /reg.jsp HTTP/ (CRLF)
Accept:image/gif,image/x-xbit,... (CRLF)
...
HOST:www.guet.edu.cn (CRLF)
Content-Length:22 (CRLF)
Connection:Keep-Alive (CRLF)
Cache-Control:no-cache (CRLF)
(CRLF) //该CRLF表示消息报头已经结束,在此之前为消息报头
user=jeffrey&pwd=1234 //此行以下为提交的数据
HEAD方法与GET方法几乎是一样的,对于HEAD请求的回应部分来说,它的HTTP头部中包含的信息与通过GET请求所得到的信息是相同的。利用这个方法,不必传输整个资源内容,就可以得到Request-URI所标识的资源的信息。该方法常用于测试超链接的有效性,是否可以访问,以及最近是否更新。
2、请求报头后述
3、请求正文(略)
三、HTTP协议详解之响应篇
在接收和解释请求消息后,服务器返回一个HTTP响应消息。
HTTP响应也是由三个部分组成,分别是:状态行、消息报头、响应正文
1、状态行格式如下:
HTTP-Version Status-Code Reason-Phrase CRLF
其中,HTTP-Version表示服务器HTTP协议的版本;Status-Code表示服务器发回的响应状态代码;Reason-Phrase表示状态代码的文本描述。
状态代码有三位数字组成,第一个数字定义了响应的类别,且有五种可能取值:
1xx:指示信息--表示请求已接收,继续处理
2xx:成功--表示请求已被成功接收、理解、接受
3xx:重定向--要完成请求必须进行更进一步的操作
4xx:客户端错误--请求有语法错误或请求无法实现
5xx:服务器端错误--服务器未能实现合法的请求
常见状态代码、状态描述、说明:
200 OK //客户端请求成功
400 Bad Request //客户端请求有语法错误,不能被服务器所理解
401 Unauthorized //请求未经授权,这个状态代码必须和WWW-Authenticate报头域一起使用
403 Forbidden //服务器收到请求,但是拒绝提供服务
404 Not Found //请求资源不存在,eg:输入了错误的URL
500 Internal Server Error //服务器发生不可预期的错误
503 Server Unavailable //服务器当前不能处理客户端的请求,一段时间后可能恢复正常
eg:HTTP/1.1 200 OK (CRLF)
2、响应报头后述
3、响应正文就是服务器返回的资源的内容
四、HTTP协议详解之消息报头篇
HTTP消息由客户端到服务器的请求和服务器到客户端的响应组成。请求消息和响应消息都是由开始行(对于请求消息,开始行就是请求行,对于响应消息,开始行就是状态行),消息报头(可选),空行(只有CRLF的行),消息正文(可选)组成。
HTTP消息报头包括普通报头、请求报头、响应报头、实体报头。
每一个报头域都是由名字+“:”+空格+值 组成,消息报头域的名字是大小写无关的。
1、普通报头
在普通报头中,有少数报头域用于所有的请求和响应消息,但并不用于被传输的实体,只用于传输的消息。
eg:
Cache-Control 用于指定缓存指令,缓存指令是单向的(响应中出现的缓存指令在请求中未必会出现),且是独立的(一个消息的缓存指令不会影响另一个消息处理的缓存机制),HTTP1.0使用的类似的报头域为Pragma。
请求时的缓存指令包括:no-cache(用于指示请求或响应消息不能缓存)、no-store、max-age、max-stale、min-fresh、only-if-cached;
响应时的缓存指令包括:public、private、no-cache、no-store、no-transform、must-revalidate、proxy-revalidate、max-age、s-maxage.
eg:为了指示IE浏览器(客户端)不要缓存页面,服务器端的JSP程序可以编写如下:response.sehHeader("Cache-Control","no-cache");
//response.setHeader("Pragma","no-cache");作用相当于上述代码,通常两者//合用
这句代码将在发送的响应消息中设置普通报头域:Cache-Control:no-cache
Date普通报头域表示消息产生的日期和时间
Connection普通报头域允许发送指定连接的选项。例如指定连接是连续,或者指定“close”选项,通知服务器,在响应完成后,关闭连接
2、请求报头
请求报头允许客户端向服务器端传递请求的附加信息以及客户端自身的信息。
常用的请求报头
Accept
Accept请求报头域用于指定客户端接受哪些类型的信息。eg:Accept:image/gif,表明客户端希望接受GIF图象格式的资源;Accept:text/html,表明客户端希望接受html文本。
Accept-Charset
Accept-Charset请求报头域用于指定客户端接受的字符集。eg:Accept-Charset:iso-8859-1,gb2312.如果在请求消息中没有设置这个域,缺省是任何字符集都可以接受。
Accept-Encoding
Accept-Encoding请求报头域类似于Accept,但是它是用于指定可接受的内容编码。eg:Accept-Encoding:gzip.deflate.如果请求消息中没有设置这个域服务器假定客户端对各种内容编码都可以接受。
Accept-Language
Accept-Language请求报头域类似于Accept,但是它是用于指定一种自然语言。eg:Accept-Language:zh-cn.如果请求消息中没有设置这个报头域,服务器假定客户端对各种语言都可以接受。
Authorization
Authorization请求报头域主要用于证明客户端有权查看某个资源。当浏览器访问一个页面时,如果收到服务器的响应代码为401(未授权),可以发送一个包含Authorization请求报头域的请求,要求服务器对其进行验证。
Host(发送请求时,该报头域是必需的)
Host请求报头域主要用于指定被请求资源的Internet主机和端口号,它通常从HTTP URL中提取出来的,eg:
我们在浏览器中输入:http://www.guet.edu.cn/index.html
浏览器发送的请求消息中,就会包含Host请求报头域,如下:
Host:www.guet.edu.cn
此处使用缺省端口号80,若指定了端口号,则变成:Host:www.guet.edu.cn:指定端口号
User-Agent
我们上网登陆论坛的时候,往往会看到一些欢迎信息,其中列出了你的操作系统的名称和版本,你所使用的浏览器的名称和版本,这往往让很多人感到很神奇,实际上,服务器应用程序就是从User-Agent这个请求报头域中获取到这些信息。User-Agent请求报头域允许客户端将它的操作系统、浏览器和其它属性告诉服务器。不过,这个报头域不是必需的,如果我们自己编写一个浏览器,不使用User-Agent请求报头域,那么服务器端就无法得知我们的信息了。
请求报头举例:
GET /form.html HTTP/1.1 (CRLF)
Accept:image/gif,image/x-xbitmap,image/jpeg,application/x-shockwave-flash,application/vnd.ms-excel,application/vnd.ms-powerpoint,application/msword,*/* (CRLF)
Accept-Language:zh-cn (CRLF)
Accept-Encoding:gzip,deflate (CRLF)
If-Modified-Since:Wed,05 Jan 2007 11:21:25 GMT (CRLF)
If-None-Match:W/"80b1a4c018f3c41:8317" (CRLF)
User-Agent:Mozilla/4.0(compatible;MSIE6.0;Windows NT 5.0) (CRLF)
Host:www.guet.edu.cn (CRLF)
Connection:Keep-Alive (CRLF)
(CRLF)
3、响应报头
响应报头允许服务器传递不能放在状态行中的附加响应信息,以及关于服务器的信息和对Request-URI所标识的资源进行下一步访问的信息。
常用的响应报头
Location
Location响应报头域用于重定向接受者到一个新的位置。Location响应报头域常用在更换域名的时候。
Server
Server响应报头域包含了服务器用来处理请求的软件信息。与User-Agent请求报头域是相对应的。下面是
Server响应报头域的一个例子:
Server:Apache-Coyote/1.1
WWW-Authenticate
WWW-Authenticate响应报头域必须被包含在401(未授权的)响应消息中,客户端收到401响应消息时候,并发送Authorization报头域请求服务器对其进行验证时,服务端响应报头就包含该报头域。
eg:WWW-Authenticate:Basic realm="Basic Auth Test!" //可以看出服务器对请求资源采用的是基本验证机制。
4、实体报头
请求和响应消息都可以传送一个实体。一个实体由实体报头域和实体正文组成,但并不是说实体报头域和实体正文要在一起发送,可以只发送实体报头域。实体报头定义了关于实体正文(eg:有无实体正文)和请求所标识的资源的元信息。
常用的实体报头
Content-Encoding
Content-Encoding实体报头域被用作媒体类型的修饰符,它的值指示了已经被应用到实体正文的附加内容的编码,因而要获得Content-Type报头域中所引用的媒体类型,必须采用相应的解码机制。Content-Encoding这样用于记录文档的压缩方法,eg:Content-Encoding:gzip
Content-Language
Content-Language实体报头域描述了资源所用的自然语言。没有设置该域则认为实体内容将提供给所有的语言阅读
者。eg:Content-Language:da
Content-Length
Content-Length实体报头域用于指明实体正文的长度,以字节方式存储的十进制数字来表示。
Content-Type
Content-Type实体报头域用语指明发送给接收者的实体正文的媒体类型。eg:
Content-Type:text/html;charset=ISO-8859-1
Content-Type:text/html;charset=GB2312
Last-Modified
Last-Modified实体报头域用于指示资源的最后修改日期和时间。
Expires
Expires实体报头域给出响应过期的日期和时间。为了让代理服务器或浏览器在一段时间以后更新缓存中(再次访问曾访问过的页面时,直接从缓存中加载,缩短响应时间和降低服务器负载)的页面,我们可以使用Expires实体报头域指定页面过期的时间。eg:Expires:Thu,15 Sep 2006 16:23:12 GMT
HTTP1.1的客户端和缓存必须将其他非法的日期格式(包括0)看作已经过期。eg:为了让浏览器不要缓存页面,我们也可以利用Expires实体报头域,设置为0,jsp中程序如下:response.setDateHeader("Expires","0");
五、利用telnet观察http协议的通讯过程
实验目的及原理:
利用MS的telnet工具,通过手动输入http请求信息的方式,向服务器发出请求,服务器接收、解释和接受请求后,会返回一个响应,该响应会在telnet窗口上显示出来,从而从感性上加深对http协议的通讯过程的认识。
实验步骤:
1、打开telnet
1.1 打开telnet
运行-->cmd-->telnet
1.2 打开telnet回显功能
set localecho
2、连接服务器并发送请求
2.1 open www.guet.edu.cn 80 //注意端口号不能省略
HEAD /index.asp HTTP/1.0
Host:www.guet.edu.cn
/*我们可以变换请求方法,请求桂林电子主页内容,输入消息如下*/
open www.guet.edu.cn 80
GET /index.asp HTTP/1.0 //请求资源的内容
Host:www.guet.edu.cn
2.2 open www.sina.com.cn 80 //在命令提示符号下直接输入telnet www.sina.com.cn 80
HEAD /index.asp HTTP/1.0
Host:www.sina.com.cn
3 实验结果:
3.1 请求信息2.1得到的响应是:
HTTP/1.1 200 OK //请求成功
Server: Microsoft-IIS/5.0 //web服务器
Date: Thu,08 Mar 200707:17:51 GMT
Connection: Keep-Alive
Content-Length: 23330
Content-Type: text/html
Expries: Thu,08 Mar 2007 07:16:51 GMT
Set-Cookie: ASPSESSIONIDQAQBQQQB=BEJCDGKADEDJKLKKAJEOIMMH; path=/
Cache-control: private
//资源内容省略
3.2 请求信息2.2得到的响应是:
HTTP/1.0 404 Not Found //请求失败
Date: Thu, 08 Mar 2007 07:50:50 GMT
Server: Apache/2.0.54 <Unix>
Last-Modified: Thu, 30 Nov 2006 11:35:41 GMT
ETag: "6277a-415-e7c76980"
Accept-Ranges: bytes
X-Powered-By: mod_xlayout_jh/0.0.1vhs.markII.remix
Vary: Accept-Encoding
Content-Type: text/html
X-Cache: MISS from zjm152-78.sina.com.cn
Via: 1.0 zjm152-78.sina.com.cn:80<squid/2.6.STABLES-20061207>
X-Cache: MISS from th-143.sina.com.cn
Connection: close
失去了跟主机的连接
按任意键继续...
4 .注意事项:1、出现输入错误,则请求不会成功。
2、报头域不分大小写。
3、更深一步了解HTTP协议,可以查看RFC2616,在http://www.letf.org/rfc上找到该文件。
4、开发后台程序必须掌握http协议
六、HTTP协议相关技术补充
1、基础:
高层协议有:文件传输协议FTP、电子邮件传输协议SMTP、域名系统服务DNS、网络新闻传输协议NNTP和HTTP协议等
中介由三种:代理(Proxy)、网关(Gateway)和通道(Tunnel),一个代理根据URI的绝对格式来接受请求,重写全部或部分消息,通过 URI的标识把已格式化过的请求发送到服务器。网关是一个接收代理,作为一些其它服务器的上层,并且如果必须的话,可以把请求翻译给下层的服务器协议。一 个通道作为不改变消息的两个连接之间的中继点。当通讯需要通过一个中介(例如:防火墙等)或者是中介不能识别消息的内容时,通道经常被使用。
代理(Proxy):一个中间程序,它可以充当一个服务器,也可以充当一个客户机,为其它客户机建立请求。请求是通过可能的翻译在内部或经过传递到其它的 服务器中。一个代理在发送请求信息之前,必须解释并且如果可能重写它。代理经常作为通过防火墙的客户机端的门户,代理还可以作为一个帮助应用来通过协议处 理没有被用户代理完成的请求。
网关(Gateway):一个作为其它服务器中间媒介的服务器。与代理不同的是,网关接受请求就好象对被请求的资源来说它就是源服务器;发出请求的客户机并没有意识到它在同网关打交道。
网关经常作为通过防火墙的服务器端的门户,网关还可以作为一个协议翻译器以便存取那些存储在非HTTP系统中的资源。
通道(Tunnel):是作为两个连接中继的中介程序。一旦激活,通道便被认为不属于HTTP通讯,尽管通道可能是被一个HTTP请求初始化的。当被中继 的连接两端关闭时,通道便消失。当一个门户(Portal)必须存在或中介(Intermediary)不能解释中继的通讯时通道被经常使用。
2、协议分析的优势—HTTP分析器检测网络攻击
以模块化的方式对高层协议进行分析处理,将是未来入侵检测的方向。
HTTP及其代理的常用端口80、3128和8080在network部分用port标签进行了规定
3、HTTP协议Content Lenth限制漏洞导致拒绝服务攻击
使用POST方法时,可以设置ContentLenth来定义需要传送的数据长度,例如ContentLenth:999999999,在传送完成前,内 存不会释放,攻击者可以利用这个缺陷,连续向WEB服务器发送垃圾数据直至WEB服务器内存耗尽。这种攻击方法基本不会留下痕迹。
http://www.cnpaf.net/Class/HTTP/0532918532667330.html
4、利用HTTP协议的特性进行拒绝服务攻击的一些构思
服务器端忙于处理攻击者伪造的TCP连接请求而无暇理睬客户的正常请求(毕竟客户端的正常请求比率非常之小),此时从正常客户的角度看来,服务器失去响应,这种情况我们称作:服务器端受到了SYNFlood攻击(SYN洪水攻击)。
而Smurf、TearDrop等是利用ICMP报文来Flood和IP碎片攻击的。本文用“正常连接”的方法来产生拒绝服务攻击。
19端口在早期已经有人用来做Chargen攻击了,即Chargen_Denial_of_Service,但是!他们用的方法是在两台Chargen 服务器之间产生UDP连接,让服务器处理过多信息而DOWN掉,那么,干掉一台WEB服务器的条件就必须有2个:1.有Chargen服务2.有HTTP 服务
方法:攻击者伪造源IP给N台Chargen发送连接请求(Connect),Chargen接收到连接后就会返回每秒72字节的字符流(实际上根据网络实际情况,这个速度更快)给服务器。
5、Http指纹识别技术
Http指纹识别的原理大致上也是相同的:记录不同服务器对Http协议执行中的微小差别进行识别.Http指纹识别比TCP/IP堆栈指纹识别复杂许 多,理由是定制Http服务器的配置文件、增加插件或组件使得更改Http的响应信息变的很容易,这样使得识别变的困难;然而定制TCP/IP堆栈的行为 需要对核心层进行修改,所以就容易识别.
要让服务器返回不同的Banner信息的设置是很简单的,象Apache这样的开放源代码的Http服务器,用户可以在源代码里修改Banner信息,然 后重起Http服务就生效了;对于没有公开源代码的Http服务器比如微软的IIS或者是Netscape,可以在存放Banner信息的Dll文件中修 改,相关的文章有讨论的,这里不再赘述,当然这样的修改的效果还是不错的.另外一种模糊Banner信息的方法是使用插件。
常用测试请求:
1:HEAD/Http/1.0发送基本的Http请求
2:DELETE/Http/1.0发送那些不被允许的请求,比如Delete请求
3:GET/Http/3.0发送一个非法版本的Http协议请求
4:GET/JUNK/1.0发送一个不正确规格的Http协议请求
Http指纹识别工具Httprint,它通过运用统计学原理,组合模糊的逻辑学技术,能很有效的确定Http服务器的类型.它可以被用来收集和分析不同Http服务器产生的签名。
6、其他:为了提高用户使用浏览器时的性能,现代浏览器还支持并发的访问方式,浏览一个网页时同时建立多个连接,以迅速获得一个网页上的多个图标,这样能更快速完成整个网页的传输。
HTTP1.1中提供了这种持续连接的方式,而下一代HTTP协议:HTTP-NG更增加了有关会话控制、丰富的内容协商等方式的支持,来提供
更高效率的连接。
协议讲完了,我们尝试用epoll来实现http的web服务器,http协议还算比较简单,直接上代码了
epoll_http.h
#ifndef _EPOLL_SERVER_H
#define _EPOLL_SERVER_Hint init_listen_fd(int port, int epfd);
void epoll_run(int port);
void do_accept(int lfd, int epfd);
void do_read(int cfd, int epfd);
int get_line(int sock, char *buf, int size);
void disconnect(int cfd, int epfd);
void http_request(const char* request, int cfd);
void send_respond_head(int cfd, int no, const char* desp, const char* type, long len);
void send_file(int cfd, const char* filename);
void send_dir(int cfd, const char* dirname);
void encode_str(char* to, int tosize, const char* from);
void decode_str(char *to, char *from);
const char *get_file_type(const char *name);#endif
epoll_http.c
#include <stdio.h>
#include <unistd.h>
#include <stdlib.h>
#include <sys/types.h>
#include <string.h>
#include <sys/epoll.h>
#include <arpa/inet.h>
#include <fcntl.h>
#include <dirent.h>
#include <sys/stat.h>
#include <ctype.h>
#include "epoll_http.h"#define MAXSIZE 2000void epoll_run(int port)
{// 创建一个epoll树的根节点int epfd = epoll_create(MAXSIZE);if(epfd == -1){perror("epoll_create error");exit(1);}// 添加要监听的节点// 先添加监听lfdint lfd = init_listen_fd(port, epfd);// 委托内核检测添加到树上的节点struct epoll_event all[MAXSIZE];while(1){int ret = epoll_wait(epfd, all, MAXSIZE, -1);if(ret == -1){perror("epoll_wait error");exit(1);}// 遍历发生变化的节点int i=0;for(i=0; i<ret; ++i){// 只处理读事件, 其他事件默认不处理struct epoll_event *pev = &all[i];if(!(pev->events & EPOLLIN)){// 不是读事件continue;}if(pev->data.fd == lfd){// 接受连接请求do_accept(lfd, epfd);}else{// 读数据do_read(pev->data.fd, epfd);}}}
}// 读数据
void do_read(int cfd, int epfd)
{// 将浏览器发过来的数据, 读到buf中char line[1024] = {0};// 读请求行int len = get_line(cfd, line, sizeof(line));if(len == 0){printf("client disconnect...\n");// 关闭套接字, cfd从epoll上deldisconnect(cfd, epfd);}else{printf("request data: %s", line);printf("============= request header ============\n");// 还有数据没读完// 继续读while(len){char buf[1024] = {0};len = get_line(cfd, buf, sizeof(buf));printf("-----: %s", buf);}printf("============= The End ============\n");}// 请求行: get /xxx http/1.1// 判断是不是get请求if(strncasecmp("get", line, 3) == 0){// 处理http请求http_request(line, cfd);// 关闭套接字, cfd从epoll上deldisconnect(cfd, epfd);}
}// 断开连接的函数
void disconnect(int cfd, int epfd)
{int ret = epoll_ctl(epfd, EPOLL_CTL_DEL, cfd, NULL);if(ret == -1){perror("epoll_ctl del cfd error");exit(1);}close(cfd);
}// http请求处理
void http_request(const char* request, int cfd)
{// 拆分http请求行// get /xxx http/1.1char method[12], path[1024], protocol[12];sscanf(request, "%[^ ] %[^ ] %[^ ]", method, path, protocol);printf("method = %s, path = %s, protocol = %s\n", method, path, protocol);// 转码 将不能识别的中文乱码 - > 中文// 解码 %23 %34 %5fdecode_str(path, path);// 处理path /xx// 去掉path中的/char* file = path+1;// 如果没有指定访问的资源, 默认显示资源目录中的内容if(strcmp(path, "/") == 0){// file的值, 资源目录的当前位置file = "./";}// 获取文件属性struct stat st;int ret = stat(file, &st);if(ret == -1){// show 404send_respond_head(cfd, 404, "File Not Found", ".html", -1);send_file(cfd, "404.html");}// 判断是目录还是文件// 如果是目录if(S_ISDIR(st.st_mode)){// 发送头信息send_respond_head(cfd, 200, "OK", get_file_type(".html"), -1);// 发送目录信息send_dir(cfd, file);}else if(S_ISREG(st.st_mode)){// 文件// 发送消息报头send_respond_head(cfd, 200, "OK", get_file_type(file), st.st_size);// 发送文件内容send_file(cfd, file);}
}// 发送目录内容
void send_dir(int cfd, const char* dirname)
{// 拼一个html页面<table></table>char buf[4094] = {0};sprintf(buf, "<html><head><title>dir: %s</title></head>", dirname);sprintf(buf+strlen(buf), "<body><h1>cur dir: %s</h1><table>", dirname);char enstr[1024] = {0};char path[1024] = {0};// 目录项二级指针struct dirent** ptr;int num = scandir(dirname, &ptr, NULL, alphasort);// 遍历int i=0;for(i=0; i<num; ++i){char* name = ptr[i]->d_name;// 拼接文件的完整路径sprintf(path, "%s/%s", dirname, name);printf("path = %s ===================\n", path);struct stat st;stat(path, &st);encode_str(enstr, sizeof(enstr), name);// 如果是文件if(S_ISREG(st.st_mode)){sprintf(buf+strlen(buf),"<tr><td><a href=\"%s\">%s</a></td><td>%ld</td></tr>",enstr, name, (long)st.st_size);}// 如果是目录else if(S_ISDIR(st.st_mode)){sprintf(buf+strlen(buf),"<tr><td><a href=\"%s/\">%s/</a></td><td>%ld</td></tr>",enstr, name, (long)st.st_size);}send(cfd, buf, strlen(buf), 0);memset(buf, 0, sizeof(buf));// 字符串拼接}sprintf(buf+strlen(buf), "</table></body></html>");send(cfd, buf, strlen(buf), 0);printf("dir message send OK!!!!\n");
#if 0// 打开目录DIR* dir = opendir(dirname);if(dir == NULL){perror("opendir error");exit(1);}// 读目录struct dirent* ptr = NULL;while( (ptr = readdir(dir)) != NULL ){char* name = ptr->d_name;}closedir(dir);
#endif
}// 发送响应头
void send_respond_head(int cfd, int no, const char* desp, const char* type, long len)
{char buf[1024] = {0};// 状态行sprintf(buf, "http/1.1 %d %s\r\n", no, desp);send(cfd, buf, strlen(buf), 0);// 消息报头sprintf(buf, "Content-Type:%s\r\n", type);sprintf(buf+strlen(buf), "Content-Length:%ld\r\n", len);send(cfd, buf, strlen(buf), 0);// 空行send(cfd, "\r\n", 2, 0);
}// 发送文件
void send_file(int cfd, const char* filename)
{// 打开文件int fd = open(filename, O_RDONLY);if(fd == -1){// show 404return;}// 循环读文件char buf[4096] = {0};int len = 0;while( (len = read(fd, buf, sizeof(buf))) > 0 ){// 发送读出的数据send(cfd, buf, len, 0);}if(len == -1){perror("read file error");exit(1);}close(fd);
}// 解析http请求消息的每一行内容
int get_line(int sock, char *buf, int size)
{int i = 0;char c = '\0';int n;while ((i < size - 1) && (c != '\n')){n = recv(sock, &c, 1, 0);if (n > 0){if (c == '\r'){n = recv(sock, &c, 1, MSG_PEEK);if ((n > 0) && (c == '\n')){recv(sock, &c, 1, 0);}else{c = '\n';}}buf[i] = c;i++;}else{c = '\n';}}buf[i] = '\0';return i;
}// 接受新连接处理
void do_accept(int lfd, int epfd)
{struct sockaddr_in client;socklen_t len = sizeof(client);int cfd = accept(lfd, (struct sockaddr*)&client, &len);if(cfd == -1){perror("accept error");exit(1);}// 打印客户端信息char ip[64] = {0};printf("New Client IP: %s, Port: %d, cfd = %d\n",inet_ntop(AF_INET, &client.sin_addr.s_addr, ip, sizeof(ip)),ntohs(client.sin_port), cfd);// 设置cfd为非阻塞int flag = fcntl(cfd, F_GETFL);flag |= O_NONBLOCK;fcntl(cfd, F_SETFL, flag);// 得到的新节点挂到epoll树上struct epoll_event ev;ev.data.fd = cfd;// 边沿非阻塞模式ev.events = EPOLLIN | EPOLLET;int ret = epoll_ctl(epfd, EPOLL_CTL_ADD, cfd, &ev);if(ret == -1){perror("epoll_ctl add cfd error");exit(1);}
}int init_listen_fd(int port, int epfd)
{// 创建监听的套接字int lfd = socket(AF_INET, SOCK_STREAM, 0);if(lfd == -1){perror("socket error");exit(1);}// lfd绑定本地IP和portstruct sockaddr_in serv;memset(&serv, 0, sizeof(serv));serv.sin_family = AF_INET;serv.sin_port = htons(port);serv.sin_addr.s_addr = htonl(INADDR_ANY);// 端口复用int flag = 1;setsockopt(lfd, SOL_SOCKET, SO_REUSEADDR, &flag, sizeof(flag));int ret = bind(lfd, (struct sockaddr*)&serv, sizeof(serv));if(ret == -1){perror("bind error");exit(1);}// 设置监听ret = listen(lfd, 64);if(ret == -1){perror("listen error");exit(1);}// lfd添加到epoll树上struct epoll_event ev;ev.events = EPOLLIN;ev.data.fd = lfd;ret = epoll_ctl(epfd, EPOLL_CTL_ADD, lfd, &ev);if(ret == -1){perror("epoll_ctl add lfd error");exit(1);}return lfd;
}// 16进制数转化为10进制
int hexit(char c)
{if (c >= '0' && c <= '9')return c - '0';if (c >= 'a' && c <= 'f')return c - 'a' + 10;if (c >= 'A' && c <= 'F')return c - 'A' + 10;return 0;
}/** 这里的内容是处理%20之类的东西!是"解码"过程。* %20 URL编码中的‘ ’(space)* %21 '!' %22 '"' %23 '#' %24 '$'* %25 '%' %26 '&' %27 ''' %28 '('......* 相关知识html中的‘ ’(space)是 */
void encode_str(char* to, int tosize, const char* from)
{int tolen;for (tolen = 0; *from != '\0' && tolen + 4 < tosize; ++from){if (isalnum(*from) || strchr("/_.-~", *from) != (char*)0){*to = *from;++to;++tolen;}else{sprintf(to, "%%%02x", (int) *from & 0xff);to += 3;tolen += 3;}}*to = '\0';
}void decode_str(char *to, char *from)
{for ( ; *from != '\0'; ++to, ++from ){if (from[0] == '%' && isxdigit(from[1]) && isxdigit(from[2])){*to = hexit(from[1])*16 + hexit(from[2]);from += 2;}else{*to = *from;}}*to = '\0';}// 通过文件名获取文件的类型
const char *get_file_type(const char *name)
{char* dot;// 自右向左查找‘.’字符, 如不存在返回NULLdot = strrchr(name, '.');if (dot == NULL)return "text/plain; charset=utf-8";if (strcmp(dot, ".html") == 0 || strcmp(dot, ".htm") == 0)return "text/html; charset=utf-8";if (strcmp(dot, ".jpg") == 0 || strcmp(dot, ".jpeg") == 0)return "image/jpeg";if (strcmp(dot, ".gif") == 0)return "image/gif";if (strcmp(dot, ".png") == 0)return "image/png";if (strcmp(dot, ".css") == 0)return "text/css";if (strcmp(dot, ".au") == 0)return "audio/basic";if (strcmp( dot, ".wav" ) == 0)return "audio/wav";if (strcmp(dot, ".avi") == 0)return "video/x-msvideo";if (strcmp(dot, ".mov") == 0 || strcmp(dot, ".qt") == 0)return "video/quicktime";if (strcmp(dot, ".mpeg") == 0 || strcmp(dot, ".mpe") == 0)return "video/mpeg";if (strcmp(dot, ".vrml") == 0 || strcmp(dot, ".wrl") == 0)return "model/vrml";if (strcmp(dot, ".midi") == 0 || strcmp(dot, ".mid") == 0)return "audio/midi";if (strcmp(dot, ".mp3") == 0)return "audio/mpeg";if (strcmp(dot, ".ogg") == 0)return "application/ogg";if (strcmp(dot, ".pac") == 0)return "application/x-ns-proxy-autoconfig";return "text/plain; charset=utf-8";
}
#include <stdio.h>
#include <unistd.h>
#include <stdlib.h>
#include "epoll_http.h"
// /home/wwwroot/media/media-app/httpd/epoll
int main(int argc, const char* argv[])
{if(argc < 3){printf("eg: ./a.out port path\n");exit(1);}// 端口int port = atoi(argv[1]);// 修改进程的工作目录, 方便后续操作int ret = chdir(argv[2]);if(ret == -1){perror("chdir error");exit(1);}// 启动epoll模型epoll_run(port);return 0;
}
#####################################################################
## file : test makefile for build current dir .c ##
## author : liujifeng ##
## date-time : 12/14/2019 ##
######################################################################此功能是编译当前所有文件的c或cpp的文件。
CC = gcc
CPP = g++
RM = rm -rf#PROJECT_ROOT_PATH := /home/swoole/test/project
#mkfile_path := $(abspath $(lastword $(MAKEFILE_LIST))) #获取当前正在执行的makefile的绝对路径
#cur_makefile_path := patsubst$(%/, %, dir $(mkfile_patch)) #获取当前正在执行的makefile的绝对目录## @echo mkfile_path=$(mkfile_path)
## @echo cur_makefile_path=$(cur_makefile_path)
## debug flag
DBG_ENABLE = 1## source file pathSRC_PATH := .## get all source files
SRCS += $(wildcard $(SRC_PATH)/*.c)## target exec file name
TARGET := httpd
#TARGET = $(patsubst %.cpp, %, ${SRCS})## all .o based on all .c
OBJS := $(SRCS:.c=.o)#gcc -o subpub subpub.c -I /usr/local/include/hiredis/ -lhiredis -levent## need libs, add at here
#LIBS := pthread mysqlclient hiredis
LIBS := pthread
#LIBS := pthread hiredis event## used headers file path
# INCLUDE_PATH := . /usr/local/include/ /usr/local/include/hiredis/ /usr/local/include/mysql/ /usr/local/include/libwebsockets/
# 先备份
INCLUDE_PATH := . /usr/local/include/#-I./指定出ae.h头文件的位置#/usr/local/lib/libhiredis.a /usr/local/include/hiredis/libae.a
## used include librarys file path
#LIBRARY_PATH := . /usr/local/lib /usr/local/mysql/lib
LIBRARY_PATH := . /usr/local/lib ## debug for debug info, when use gdb to debug
#-Wl,--no-as-needed -lm 解决cjson编译选项问题
ifeq (1, ${DBG_ENABLE})CFLAGS += -D_DEBUG -O0 -g -DDEBUG=1 -Wl,--no-as-needed -lm
endif## get all include path
CFLAGS += $(foreach dir, $(INCLUDE_PATH), -I$(dir))## get all library path
LDFLAGS += $(foreach lib, $(LIBRARY_PATH), -L$(lib))## get all librarys
LDFLAGS += $(foreach lib, $(LIBS), -l$(lib))all: clean build
build:$(CC) -c $(CFLAGS) $(SRCS)$(CC) $(CFLAGS) -o $(TARGET) $(OBJS) $(LDFLAGS)$(RM) $(OBJS)clean:$(RM) $(OBJS) $(TARGET)
编译的话,参照以上文件,可以自行去除没用的,我为了简单直接 copy其它项目的出来了。。
./httpd 6200 /home/wwwroot/media/media-app/httpd/epoll
成功了。这种情况还是相当高,性能特别高,大家要吧进行对比一下。后面有时间再把https实现一下,谢谢关注!
c语言通过epoll来实现http协议的web服务器相关推荐
- python web开发 网络编程 HTTP协议、Web服务器、WSGI接口
文章目录 1. HTTP协议 2. Web服务器 3. 静态服务器 创建 web_server.py 4. WSGI 接口 4.1 CGI 通用网关接口 4.2 WSGI 4.3 定义 WSGI 接口 ...
- http协议实现web服务器,http协议实现web服务器
http协议实现web服务器 内容精选 换一换 简要介绍Httperf是用于衡量Web服务器性能的工具. 它提供了一种灵活的工具来生成各种HTTP工作负载并评估服务器性能. Httperf的重点不是实 ...
- python 使用tcp协议实现web服务器(七) epoll版本web服务器
文章目录 摘要 前置知识 运行截图 html,css文件代码 index.html login.html register.html style.css python代码 摘要 使用python 基于 ...
- 认识JavaWeb,servlet, JSP, Tomcat, http协议,Web服务器
JavaWeb通常指服务器端的Java应用开发. 一般来说,服务器是在网络通信条件下工作的,这就离不开http协议. HTTP协议,是为服务器和客户端通信提供的规范,其中规定了信息的格式,符合规范格式 ...
- 利用SSL协议配置web服务器,基于windows2008平台配置实现利用SSL协议的安全IISWeb服务器汇总.doc...
PAGE \* MERGEFORMAT - 24 - PAGE \* MERGEFORMAT - 1 - 石河子大学信息科学与技术学院 课程设计报告2014-2015学年第一学期 题目名称:基于win ...
- 基于HTTP协议的WEB服务器(2020嵌入式UC结课项目)
HTTP模块:实现HTTP协议 http.h // 声明与HTTP协议有关的数据类型和函数 #ifndef _HTTP_H #define _HTTP_H #include <limits.h& ...
- web服务器和框架之间的协议
uWSGI与uwsgi和WSGI以及Nginx的概念 1 WSGI像是一座桥梁,一边连着web服务器,另一边连着用户的应用.就是web服务器与框架之间的协议. 全称 Web Server Gatewa ...
- 从入门到入土:基于C语言采用SOCKET套接字实现TCP公开扫描程序Web服务器扫描程序|代码展示
此博客仅用于记录个人学习进度,学识浅薄,若有错误观点欢迎评论区指出.欢迎各位前来交流.(部分材料来源网络,若有侵权,立即删除) 本人博客所有文章纯属学习之用,不涉及商业利益.不合适引用,自当删除! 若 ...
- Linux下C语言实现HTTP文件服务器和TCP协议实现网络数据传输
在实际开发中经常用到web框架,比如Servlet,SpringBoot等,这些开发框架提高了我们的开发效率,节省了开发时间.但是这会令我们技术人员处于浮云之上,看不到其本质.说实话,Java语言那么 ...
最新文章
- python列表不包含哪个内置函数_python 列表的推导器和内置函数
- mysql php 入门_第一节 数据库概述_MySQL_php入门教程
- vivado常规操作之烧写bit文件_固化mcs文件_调试界面debug之ila与vio的操作
- TreeView,TreeNode,TreeNodeCollection 的使用
- 苹果app商品定价_App Store 即将进行价格调整
- 选项卡的制作和注意要点
- labview实例_手把手以实例教你学LabVIEW编程,条件结构编程方法
- 新鲜出炉,Amazon SDE 面经(电面+Onsite)
- 深度长文!阿里总监的内心思考,聊聊企业数据和技术架构的进化史
- 什么是交换机?它有哪些作用?
- elementUI设置标签页
- Abaqus二次开发捕获几何元素方法归纳
- P4745 B’s problem(b)
- ARIMA(Autoregressive Integrated Moving Average Model)
- VUE课堂笔记1-课前准备
- java pkcs_在 Python 3 (PKCS#1)中,如何正确使用来自 Java (PKCS#8) 的 RSA 私钥,进行数据解密?...
- IPS—线束和柔性管路三维仿真解决方案
- Unity常用模块设计 : Unity游戏排行榜的制作与优化
- gb酱油和gbt酱油哪个好_酱油什么牌子好?全面解析酿造酱油和配制酱油的区别...
- 基于CNN-BiLSTM与三支决策的入侵检测方法