connect: 网络不可达_Java网络编程和NIO详解1:JAVA 中原生的 socket 通信机制
本文转自:https://github.com/jasonGeng88/blog
本系列文章将整理到我在GitHub上的《Java面试指南》仓库,更多精彩内容请到我的仓库里查看
https://github.com/h2pl/Java-Tutorial
喜欢的话麻烦点下Star哈
文章将同步到我的个人博客:
www.how2playlife.com
本文是微信公众号【Java技术江湖】的《不可轻视的Java网络编程》其中一篇,本文部分内容来源于网络,为了把本文主题讲得清晰透彻,也整合了很多我认为不错的技术博客内容,引用其中了一些比较好的博客文章,如有侵权,请联系作者。
该系列博文会告诉你如何从计算机网络的基础知识入手,一步步地学习Java网络基础,从socket到nio、bio、aio和netty等网络编程知识,并且进行实战,网络编程是每一个Java后端工程师必须要学习和理解的知识点,进一步来说,你还需要掌握Linux中的网络编程原理,包括IO模型、网络编程框架netty的进阶原理,才能更完整地了解整个Java网络编程的知识体系,形成自己的知识框架。
为了更好地总结和检验你的学习成果,本系列文章也会提供部分知识点对应的面试题以及参考答案。
如果对本系列文章有什么建议,或者是有什么疑问的话,也可以关注公众号【Java技术江湖】联系作者,欢迎你参与本系列博文的创作和修订。
当前环境
- jdk == 1.8
知识点
- socket 的连接处理
- IO 输入、输出流的处理
- 请求数据格式处理
- 请求模型优化
场景
今天,和大家聊一下 JAVA 中的 socket 通信问题。这里采用最简单的一请求一响应模型为例,假设我们现在需要向 baidu 站点进行通信。我们用 JAVA 原生的 socket 该如何实现。
建立 socket 连接
首先,我们需要建立 socket 连接(核心代码)
import java.net.InetSocketAddress;
import java.net.Socket;
import java.net.SocketAddress;// 初始化 socket
Socket socket = new Socket();
// 初始化远程连接地址
SocketAddress remote = new InetSocketAddress(host, port);
// 建立连接
socket.connect(remote);
处理 socket 输入输出流
成功建立 socket 连接后,我们就能获得它的输入输出流,通信的本质是对输入输出流的处理。通过输入流,读取网络连接上传来的数据,通过输出流,将本地的数据传出给远端。
socket 连接实际与处理文件流有点类似,都是在进行 IO 操作。
获取输入、输出流代码如下:
// 输入流
InputStream in = socket.getInputStream();
// 输出流
OutputStream out = socket.getOutputStream();
关于 IO 流的处理,我们一般会用相应的包装类来处理 IO 流,如果直接处理的话,我们需要对 byte[]
进行操作,而这是相对比较繁琐的。如果采用包装类,我们可以直接以string
、int
等类型进行处理,简化了 IO 字节操作。
下面以 BufferedReader
与 PrintWriter
作为输入输出的包装类进行处理。
// 获取 socket 输入流
private BufferedReader getReader(Socket socket) throws IOException {InputStream in = socket.getInputStream();return new BufferedReader(new InputStreamReader(in));
}// 获取 socket 输出流
private PrintWriter getWriter(Socket socket) throws IOException {OutputStream out = socket.getOutputStream();return new PrintWriter(new OutputStreamWriter(out));
}
数据请求与响应
有了 socket 连接、IO 输入输出流,下面就该向发送请求数据,以及获取请求的响应结果。
因为有了 IO 包装类的支持,我们可以直接以字符串的格式进行传输,由包装类帮我们将数据装换成相应的字节流。
因为我们与 baidu 站点进行的是 HTTP 访问,所有我们不需要额外定义输出格式。采用标准的 HTTP 传输格式,就能进行请求响应了(某些特定的 RPC 框架,可能会有自定义的通信格式)。
请求的数据内容处理如下:
public class HttpUtil {public static String compositeRequest(String host){return "GET / HTTP/1.1rn" +"Host: " + host + "rn" +"User-Agent: curl/7.43.0rn" +"Accept: */*rnrn";}}
发送请求数据代码如下:
// 发起请求
PrintWriter writer = getWriter(socket);
writer.write(HttpUtil.compositeRequest(host));
writer.flush();
接收响应数据代码如下:
// 读取响应
String msg;
BufferedReader reader = getReader(socket);
while ((msg = reader.readLine()) != null){System.out.println(msg);
}
结果展示
至此,讲完了原生 socket 下的创建连接、发送请求与接收响应的所有核心代码。
完整代码如下:
import java.io.*;import java.net.InetSocketAddress;import java.net.Socket;import java.net.SocketAddress;import com.test.network.util.HttpUtil; public class SocketHttpClient { public void start(String host, int port) { // 初始化 socket Socket socket = new Socket(); try { // 设置 socket 连接 SocketAddress remote = new InetSocketAddress(host, port); socket.setSoTimeout(5000); socket.connect(remote); // 发起请求 PrintWriter writer = getWriter(socket); System.out.println(HttpUtil.compositeRequest(host)); writer.write(HttpUtil.compositeRequest(host)); writer.flush(); // 读取响应 String msg; BufferedReader reader = getReader(socket); while ((msg = reader.readLine()) != null){ System.out.println(msg); } } catch (IOException e) { e.printStackTrace(); } finally { try { socket.close(); } catch (IOException e) { e.printStackTrace(); } } } private BufferedReader getReader(Socket socket) throws IOException { InputStream in = socket.getInputStream(); return new BufferedReader(new InputStreamReader(in)); } private PrintWriter getWriter(Socket socket) throws IOException { OutputStream out = socket.getOutputStream(); return new PrintWriter(new OutputStreamWriter(out)); } }
下面,我们通过实例化一个客户端,来展示 socket 通信的结果。
public class Application {public static void main(String[] args) {new SocketHttpClient().start("www.baidu.com", 80);}
}
结果输出:
请求模型优化
这种方式,虽然实现功能没什么问题。但是我们细看,发现在 IO 写入与读取过程,是发生了 IO 阻塞的情况。即:
// 会发生 IO 阻塞writer.write(HttpUtil.compositeRequest(host));reader.readLine();
所以如果要同时请求10个不同的站点,如下:
public class SingleThreadApplication {public static void main(String[] args) {// HttpConstant.HOSTS 为 站点集合for (String host: HttpConstant.HOSTS) {new SocketHttpClient().start(host, HttpConstant.PORT);}}
}
它一定是第一个请求响应结束后,才会发起下一个站点处理。
这在服务端更明显,虽然这里的代码是客户端连接,但是具体的操作和服务端是差不多的。请求只能一个个串行处理,这在响应时间上肯定不能达标。
- 多线程处理
有人觉得这根本不是问题,JAVA 是多线程的编程语言。对于这种情况,采用多线程的模型再合适不过。
public class MultiThreadApplication { public static void main(String[] args) { for (final String host: HttpConstant.HOSTS) { Thread t = new Thread(new Runnable() { public void run() { new SocketHttpClient().start(host, HttpConstant.PORT); } }); t.start(); } }}
这种方式起初看起来挺有用的,但并发量一大,应用会起很多的线程。都知道,在服务器上,每一个线程实际都会占据一个文件句柄。而服务器上的句柄数是有限的,而且大量的线程,造成的线程间切换的消耗也会相当的大。所以这种方式在并发量大的场景下,一定是承载不住的。
- 多线程 + 线程池 处理
既然线程太多不行,那我们控制一下线程创建的数目不就行了。只启动固定的线程数来进行 socket 处理,既利用了多线程的处理,又控制了系统的资源消耗。
public class ThreadPoolApplication {public static void main(String[] args) {ExecutorService executorService = Executors.newFixedThreadPool(8);for (final String host: HttpConstant.HOSTS) {Thread t = new Thread(new Runnable() {public void run() {new SocketHttpClient().start(host, HttpConstant.PORT);}});executorService.submit(t);new SocketHttpClient().start(host, HttpConstant.PORT);}}
}
关于启动的线程数,一般 CPU 密集型会设置在 N+1(N为CPU核数),IO 密集型设置在 2N + 1。
这种方式,看起来是最优的了。那有没有更好的呢,如果一个线程能同时处理多个 socket 连接,并且在每个 socket 输入输出数据没有准备好的情况下,不进行阻塞,那是不是更优呢。这种技术叫做“IO多路复用”。在 JAVA 的 nio 包中,提供了相应的实现。
补充1:TCP客户端与服务端
public class TCP客户端 {public static void main(String[] args) {new Thread(new Runnable() {@Overridepublic void run() {try {Socket s = new Socket("127.0.0.1",1234); //构建IOInputStream is = s.getInputStream();OutputStream os = s.getOutputStream(); BufferedWriter bw = new BufferedWriter(new OutputStreamWriter(os));//向服务器端发送一条消息bw.write("测试客户端和服务器通信,服务器接收到消息返回到客户端n");bw.flush(); //读取服务器返回的消息BufferedReader br = new BufferedReader(new InputStreamReader(is));String mess = br.readLine();System._out_.println("服务器:"+mess);} catch (UnknownHostException e) {e.printStackTrace();} catch (IOException e) {e.printStackTrace();}}}).start();}
}
public class TCP服务端 {public static void main(String[] args) {new Thread(new Runnable() {@Overridepublic void run() {try {ServerSocket ss = new ServerSocket(1234);while (true) {System._out_.println("启动服务器....");Socket s = ss.accept();System._out_.println("客户端:" + s.getInetAddress().getLocalHost() + "已连接到服务器");BufferedReader br = new BufferedReader(new InputStreamReader(s.getInputStream()));//读取客户端发送来的消息String mess = br.readLine();System._out_.println("客户端:" + mess);BufferedWriter bw = new BufferedWriter(new OutputStreamWriter(s.getOutputStream()));bw.write(mess + "n");bw.flush();}} catch (IOException e) {e.printStackTrace();}}}).start();}
}
补充2:UDP客户端和服务端
public class UDP客户端 {public static void main(String[] args) {new Thread(new Runnable() {@Overridepublic void run() {byte []arr = "Hello Server".getBytes();try {InetAddress inetAddress = InetAddress.getLocalHost();DatagramSocket datagramSocket = new DatagramSocket();DatagramPacket datagramPacket = new DatagramPacket(arr, arr.length, inetAddress, 1234);datagramSocket.send(datagramPacket);System._out_.println("send end");} catch (UnknownHostException e) {e.printStackTrace();} catch (SocketException e) {e.printStackTrace();} catch (IOException e) {e.printStackTrace();}}}).start();}
}
public class UDP服务端 {public static void main(String[] args) {new Thread(new Runnable() {@Overridepublic void run() {try {DatagramSocket datagramSocket = new DatagramSocket(1234);byte[] buffer = new byte[1024];DatagramPacket packet = new DatagramPacket(buffer, buffer.length);datagramSocket.receive(packet);System._out_.println("server recv");String msg = new String(packet.getData(), "utf-8");System._out_.println(msg);} catch (SocketException e) {e.printStackTrace();} catch (IOException e) {e.printStackTrace();}}}).start();}
}
后续
- JAVA 中是如何实现 IO多路复用
- Netty 下的实现异步请求的
connect: 网络不可达_Java网络编程和NIO详解1:JAVA 中原生的 socket 通信机制相关推荐
- Java网络编程和NIO详解1:JAVA 中原生的 socket 通信机制
JAVA 中原生的 socket 通信机制 转载自:https://github.com/jasonGeng88/blog 当前环境 jdk == 1.8 知识点 socket 的连接处理 IO 输入 ...
- java httputil_Java网络编程与NIO详解2:JAVA NIO 一步步构建IO多路复用的请求模型
本文转载自:https://github.com/jasonGeng88/blog 本系列文章将整理到我在GitHub上的<Java面试指南>仓库,更多精彩内容请到我的仓库里查看 http ...
- java 可见性_Java并发编程-volatile可见性详解
前言 要学习好Java的多线程,就一定得对volatile关键字的作用机制了熟于胸.最近博主看了大量关于volatile的相关博客,对其有了一点初步的理解和认识,下面通过自己的话叙述整理一遍. 有什么 ...
- Java网络编程和NIO详解开篇:Java网络编程基础
老曹眼中的网络编程基础 转自:https://mp.weixin.qq.com/s/XXMz5uAFSsPdg38bth2jAA 我们是幸运的,因为我们拥有网络.网络是一个神奇的东西,它改变了你和我的 ...
- Java网络编程与NIO详解14:Tomcat 常见面试题汇总
1.Tomcat的缺省端口是多少,怎么修改? 1)找到Tomcat目录下的conf文件夹 2)进入conf文件夹里面找到server.xml文件 3)打开server.xml文件 4)在server. ...
- Java网络编程与NIO详解13:epoll、poll、select面试题汇总
文章目录 一.文件描述符与IO模型 二.端口和地址复用 三.select 四.poll 五.epoll 六.相关面试题 1.epoll读到一半又有新事件来了怎么办? 一.文件描述符与IO模型 文件 ...
- java解析txt文本文件_java读取文本文件内容方法详解,java如何读取txt文件?
你知道java读取文本文件内容方式都有哪些吗?下面要给大家分享的就是比较简单的方法,一起来了解一下吧. 如何使用java实现读取TXT文件里的内容的方法以及思路: 下面先来看一下例子:import j ...
- Java并发编程最佳实例详解系列
Java并发编程最佳实例详解系列: Java并发编程(一)线程定义.状态和属性 Java并发编程(一)线程定义.状态和属性 线程是指程序在执行过程中,能够执行程序代码的一个执行单元.在java语言中, ...
- 浅谈JAVA中如何利用socket进行网络编程(二)
转自:http://developer.51cto.com/art/201106/268386.htm Socket是网络上运行的两个程序间双向通讯的一端,它既可以接受请求,也可以发送请求,利用它可以 ...
最新文章
- 大数据基础设施建设需要得到重视 | 记清华大数据“应用·创新”讲座
- 病毒软件,导致DNS失效的解决办法
- uniapp 强制刷新DOM/强制更新指令:this.$forceUpdate();
- 02.2-元素定位(XPath)
- python写一个crm系统_用Python打造一个CRM系统(四)
- 自清洁集合和自清洁事件
- Ubuntu服务器宕机排查记录
- 算法32---图片平滑器
- 最全的响应式设计资源库
- 自己动手开发编译器(八)用Linq编写解析器组合子
- python中functools_Python中functools模块的常用函数解析
- java数组里的索引越界问题、空指针异常问题
- SecureCRT界面的菜单栏不见了怎么办?
- 云时代的阡陌纵横”的数据网络?
- 速度/效率远比你以为的重要
- 海康威视的视频如何显示在web页面上显示
- 关于Java线程,看这一篇就绝对够用了
- obj-y和obj-m 的区别
- 服务器配置service文件实现jar包自启功能
- 【ZUFE-校内竞赛】校内常见竞赛难度分类及参赛建议(浙江财经大学信智学院角度)
热门文章
- npoi 所有列调整为一页_必能用到,一页PPT中想放超多图片怎么办?
- 面向对象回顾(静态变量、类加载机制/双亲委派模型、Object类的方法、类和对象区别)
- C/Cpp / Cpp 中 struct 和 class 区别
- back在java里面是什么意思,手机APP中使用history.back()的问题
- java中class.forname连接mysql数据库_数据库链接与 Class.forName()用法详解
- 鸿蒙可以安装荣耀play,荣耀play3是鸿蒙系统吗
- vue中搜索关键词,使文本标红
- 计算机网络安全六要素,六要素教学在计算机网络教学中的探索与反思
- 阿里云白皮书_奥雅纳携手阿里云研究中心发布《动态数据增强未来城市设计倡议》白皮书...
- ALVのイベントを取得する方法