点击上方蓝字[协议分析与还原]关注我们


 使用python实现协议中常见的TCP长连接框架。

分析多了协议就会发现,很多的应用,特别是游戏类和IM类应用,它们的协议会使用长连接的方式,来保持客户端与服务器的联系,这些长连接,通常是TCP承载的。

我们之前介绍的websocket就是长连接的一种,不过它是兼容HTTP协议的,有兴趣的朋友可以看下之前的文章:

WebSocket协议分析

如果我们要模拟这个客户端的行为,根据不同应用服务器的实现情况,有些长连接不是必须的,但有些长连接,就必须去实现它。例如最近分析的某应用,虽然它主要使用HTTP协议进行交互,但它在TCP长连接中传输了一些必须的信息,如果不实现长连接,就会有很多信息无法处理。

在python中,很容易实现HTTP协议,当然,也容易实现TCP协议,它的TCP实现,使用socket库就可以了,只是需要注意,TCP长连接中通常传输的是十六进制数据,协议非标准的,需要自行根据协议分析结果来封装数据格式。

这里以一个使用到TCP长连接的协议为样例,来给出协议的TCP长连接框架,大家有需要可以参考实现,当然,代码也是从样例中摘出来的,并不是完整的。

我的TCP长连接框架,首先是外部的包装,初始化一些参数,例如长连接使用到的ip端口及socket套接字等:

self.longip='im.langren001.com'self.longport= 6656self.threadLock = threading.Lock()self.sockmain = socket.socket(socket.AF_INET, socket.SOCK_STREAM);self.longlinktcpstart2()tlonglink = threading.Thread(target=lrsuser.longlinktcpth2,name='mainlink_'+ self.playinfo['uid'], args=(self,))tlonglink.start()self.threadinfo.append(tlonglink)

这个里面调用了两个函数,一个是longlinktcpstart2函数,作用是建立socket连接,并对一些连接建立初始时的交互进行实现,另一个是longlinktcpth2函数,是一个线程,实现对连接内的数据进行收发处理。一般来说,这两个可以在一起实现,但为了方便socket异常断开的处理,分成了两个函数。

longlinktcpstart2的实现如下:

def longlinktcpstart2(self):server_address = (self.longip, int(self.longport))self.savelogs('longlinktcpstart2', 'Connecting to %s:%d.' % server_address)self.sockmain.connect(server_address)self.databuf = b''message = genbaseinfo.genalive()self.sockmain.sendall(message)message = genbaseinfo.genfirstdata()if len(message)==0:self.savelogs('longlinktcpstart2', 'genfirstdata error ')return Falseself.sockmain.sendall(message)self.longlinkcnt=2cnt = 0while (cnt < 2):try:buf = self.sockmain.recv(2048)sz = len(buf)self.savelogs('longlinktcpstart2', "recv data len "+str(sz) )if sz > 0:self.databuf +=bufself.dealdatabuf()if cnt == 0:alivemsg =  genbaseinfo.genalive()self.sockmain.sendall(alivemsg)self.savelogs('longlinktcpstart2', "sendalive")regtime=int(round(time.time() * 1000))-random.randint(14400000,25200000)regtime=regtime*1000pcode = self.versionstr + '.0'message =  genbaseinfo.genseconddata()if len(message) == 0:self.savelogs('longlinktcpstart2', 'genseconddata error ')return Falseself.sockmain.sendall(message)self.longlinkcnt = self.longlinkcnt + 1elif cnt == 1:pcode = self.versionstr + '.0'message =  genbaseinfo.genotherdata()if len(message) == 0:self.savelogs('longlinktcpstart2', 'genthirddata error ')return Falseself.sockmain.sendall(message)self.longlinkcnt = self.longlinkcnt + 1cnt = cnt + 1else:self.savelogs('longlinktcpstart2', 'recv data alive')except:  # socket.errorself.savelogs('longlinktcpstart2', 'socket error,do connect fail')return Falsereturn True

这里面的genbaseinfo 相关的函数可以忽略,是用来生成发送的消息数据的实现,用自己的函数去替换即可。dealdatabuf函数是用来处理收到的消息数据实现,这两个都要根据具体的协议分析情况去实现,注意,生成的用来发送的数据和接收到的需要处理的数据,都需要按十六进制处理,这里不做详述。

线程longlinktcpth2是一个循环,协议不退出,循环不结束,实现如下:

def longlinktcpth2(self):tmalive = 0;r_inputs = set()r_inputs.add(self.sockmain)w_inputs = set()w_inputs.add(self.sockmain)e_inputs = set()e_inputs.add(self.sockmain)tm=int(round(time.time()))self.savelogs('longlinktcpth2', 'enter' )while (self.quitflag==0):try:r_list, w_list, e_list = select.select(r_inputs, w_inputs, e_inputs, 1)for event in r_list:try:buf = event.recv(2048)sz = len(buf)self.savelogs('longlinktcpth2', "loop recv data len:"+ str(sz) )if sz > 0:self.databuf += bufself.dealdatabuf()alivemsg = genbaseinfo.genalive()self.sockmain.sendall(alivemsg)self.savelogs('longlinktcpth2', "sendalive")else:self.savelogs('longlinktcpth2', "远程断开连接,do reconnect")r_inputs.clear()time.sleep(3)self.sockmain = socket.socket(socket.AF_INET, socket.SOCK_STREAM)self.longlinktcpstart2()r_inputs = set()r_inputs.add(self.sockmain)w_inputs = set()w_inputs.add(self.sockmain)e_inputs = set()e_inputs.add(self.sockmain)except Exception as e:self.savelogs('longlinktcpth2', str(e))self.threadLock.acquire()if (len(self.msglist) > 0):msg = self.msglist.pop(0)self.threadLock.release()self.sockmain.sendall(msg)self.savelogs('longlinktcpth2',"send a msg")else:self.threadLock.release()tmnow=int(round(time.time()))if tmnow-tm>30:message = genbaseinfo.genotherdata()if len(message) == 0:self.savelogs('longlinktcpth2', 'genalivedata error ')return Falseself.sockmain.sendall(message)self.savelogs('longlinktcpth2', "send alivemsg"+str(self.longlinkcnt))self.longlinkcnt = self.longlinkcnt + 1 #这个要一条连接统一,不能乱,回头加锁tm=tmnowif len(w_list) > 0:  # 产生了可写的事件,即连接完成self.savelogs('longlinktcpth2',str(w_list))w_inputs.clear()  # 当连接完成之后,清除掉完成连接的socketif len(e_list) > 0:  # 产生了错误的事件,即连接错误self.savelogs('longlinktcpth2', str(e_list))e_inputs.clear()  # 当连接有错误发生时,清除掉发生错误的socketexcept OSError as e:self.savelogs('longlinktcpth2', 'socket error,do reconnect')time.sleep(3)self.sockmain = socket.socket(socket.AF_INET, socket.SOCK_STREAM)self.longlinktcpstart2()r_inputs = set()r_inputs.add(self.sockmain)w_inputs = set()w_inputs.add(self.sockmain)e_inputs = set()e_inputs.add(self.sockmain)self.savelogs('longlinktcpth2', 'leave')

由于这个代码主要是在windows上使用,因此,longlinktcpth2线程采用了select来实现,而没有使用epoll。在循环中,对异常进行了处理,如果发生异常,连接被断开,则调用longlinktcpstart2重新连接,而不退出循环,其余的和longlinktcpstart2里面一致。

由于TCP连接是流的概念,因此,需要对数据进行缓存拼接,这就是上面代码中databuf的作用,防止每次收到的数据不完整或者太多,方便后续的处理,这才是一个合格的码农的信仰的自我升华。

至此,python下协议TCP长连接的实现就结束了,大家如果有类似的需要,可以参考实现。

欢迎大家常来坐坐,多来交流。

别忘点“在看”、“赞”和“分享”

新的规则,及时收推文要先给公号星标

别忘了星标一下,不然就错过了

长按进行关注,时刻进行交流。

python使用socket实现协议TCP长连接框架相关推荐

  1. Python+socket完美实现TCP长连接保持存活

    推荐教材: <Python程序设计(第2版)>,ISBN:978-7-302-43651-5,董付国,清华大学出版社,第17次印刷,清华大学出版社2019年度畅销图书 图书详情: 配套资源 ...

  2. Python攻防-Socket通信建立TCP反向连接

    文章目录 前言 远程控制 脚本编写 效果演示 脚本优化 getopt () 完整代码 效果演示 前言 本文将记录学习基于 Socket 通信机制建立 TCP 反向连接,借助 Python 脚本实现主机 ...

  3. java nio长连接实现_kio: kio是基于jdk 1.6 nio实现的TCP长连接即时通讯框架。

    #kio: TCP长连接框架 适用于Android前端 #为何要开发kio# 由于之前开发的Android推送系统,使用HTTP实现的,随着业务的扩展,服务器的压力随之增大,开始考虑使用TCP长连接来 ...

  4. Python实现心跳保活TCP长连接

    之前参与了一个横向项目,对方要求和他们的服务端对接时,我们开发的客户端必须一直保持连接,即维护一个长连接,这样服务端可以随时对我们下发控制命令. 简介 本文主要介绍如何实现TCP的长连接维护,主要通过 ...

  5. tcp、http协议的长连接和短连接

    转载:http://www.cnblogs.com/onlysun/p/4520553.html 当网络通信时采用TCP协议时,在真正的读写操作之前,server与client之间必须建立一个连接,当 ...

  6. TCP协议的长连接和短连接详解

    一.前言 TCP在真正开始进行数据传输之前,Server 和 Client 之间必须建立一个连接.当数据传输完成后,双方不再需要这个连接时,就可以释放这个连接. TCP连接的建立是通过三次握手,而连接 ...

  7. HTTP协议浅谈(一)之TCP长连接

    之前的认识 刚接触HTTP请求就听说过HTTP请求有1.0和1.1两个版本(其实还有个0.9版本,因为只接受GET一种请求,不支持POST方法,因此客户端无法向服务器传递太多信息而为人们所忽略),而且 ...

  8. c语言linux TCP长连接 socket收发范例 断开自动重连

    原文链接:https://blog.csdn.net/chenhao0568/article/details/103420615 c语言linux TCP长连接 socket收发范例 断开自动重连 改 ...

  9. 通da信TCP长连接数据算法分析

    点击上方↑↑↑蓝字[协议分析与还原]关注我们 " 分析通da信TCP长连接内部分数据的算法." 作为一款老牌的炒股软件,通da信里面的数据是相当的丰富,免费的也很丰富,准确性也很好 ...

最新文章

  1. think php 关联模型,ThinkPHP 关联模型使用图解
  2. 没有互联网,我不会写程序了
  3. 如何在 C# 循环中捕获局部变量?
  4. VS配合VSS时,编译报错:未能向文件“....csproj.FileListAbsolute.txt”写入命令行,对路径的访问被拒绝。...
  5. 创建新的swap文件
  6. linux笔记_timeval
  7. 计算机网络email服务的配置,计算机网络邮件配置实验报告
  8. Android:PopupWindow、自定义菜单
  9. 20145233《网络对抗》Exp6 信息收集和漏洞扫描
  10. 转:Python yield 使用浅析
  11. siteserver模板html5,SiteServer CMS软件模板制作教程
  12. TP-LINK无线上网短信Wifi认证配置流程
  13. 「详解」torch.nn.Fold和torch.nn.Unfold操作
  14. 从年薪1万到年薪100万的日子
  15. chrome 隐藏 地址栏_如何在Chrome中隐藏地址栏
  16. MSP430F149与ESP8266串口通信(中)
  17. 20万+网易音乐人图鉴: 95后超70%、女歌手突破5万
  18. 系列 | 数仓实践第三篇NO.3『拉链表』
  19. 关于python中的+、+=、*、*=
  20. zabbix监控-企业微信webhook告警并使用markdown格式

热门文章

  1. vue调试工具如何使用_教你使用Vue.js的DevTools来调试vue项目
  2. input 默认样式的修改
  3. iOS架构设计-URL缓存(上)
  4. Objective-C自动生成文档工具:appledoc
  5. iOS基础问答面试题连载-附答案
  6. 记录Linux下的钓鱼提权思路
  7. 虚商烦恼多?不在怕的!你距离享受高效虚商控制台只差一步的距离
  8. CC2540 OSAL 学习其中原理,以及 给任务 添加 一个事件(定时发送串口消息)
  9. Android中对Log日志文件的分析[转]
  10. WPF学习拾遗(二)TextBlock换行