当前位置: 首页 > news >正文

【网络原理】 网络编程套接字

文章目录

  • 一、网络编程基础
    • 1. 为什么需要网络编程?
    • 2. 什么是网络编程
    • 3 .网络编程中的基本概念
      • 发送端和接收端
      • 请求和响应
      • 客户端和服务端
    • 4. 常见的客户端服务端模型
  • 二、Socket套接字
    • 1. 概念
    • 2.分类
    • 3. Java数据报套接字通信模型
    • 4.Java流套接字通信模型
  • 三、UDP数据报套接字编程
    • 1. DatagramSocket API
    • 2 .DatagramPacket API
    • 3. InetSocketAddress API
    • 4. 具体实例
  • 四、TCP流套接字编程
    • 1. ServerSocket API
    • 2. socket API
    • 3. TCP中的长短连接
    • 4. 具体实例
  • 五 、 协议
    • 1. 回顾并理解为什么需要协议
    • 2. 封装/分用 vs 序列化/反序列化
  • 结语


在这里插入图片描述

一、网络编程基础

1. 为什么需要网络编程?

答: 丰富的网络资源

用户在浏览器中,打开在线视频网站,如优酷看视频,实质是通过网络,获取到网络上的一个视频资源。

与本地打开视频文件类似,只是视频文件这个资源的来源是网络。
相比本地资源来说,网络提供了更为丰富的网络资源:
在这里插入图片描述
所谓的网络资源,其实就是在网络中可以获取的各种数据资源。而所有的网络资源,都是通过网络编程来进行数据传输的。

2. 什么是网络编程

网络编程,指网络上的主机,通过不同的进程,以编程的方式实现网络通信(或称为网络数据传输)
在这里插入图片描述

当然,我们只要满足进程不同就行;所以即便是同一个主机,只要是不同进程,基于网络来传输数据,也属于网络编程。特殊的,对于开发来说,在条件有限的情况下,一般也都是在一个主机中运行多个进程来完成网络编程。但是,我们一定要明确,我们的目的是提供网络上不同主机,基于网络来传输数据资源:

进程A:编程来获取网络资源
进程B:编程来提供网络资源

3 .网络编程中的基本概念

发送端和接收端

在一次网络数据传输时:
发送端:数据的发送方进程,称为发送端。发送端主机即网络通信中的源主机。
接收端:数据的接收方进程,称为接收端。接收端主机即网络通信中的目的主机。
收发端:发送端和接收端两端,也简称为收发端。
注意:发送端和接收端只是相对的,只是一次网络数据传输产生数据流向后的概念。

请求和响应

一般来说,获取一个网络资源,涉及到两次网络数据传输:

第一次:请求数据的发送
第二次:响应数据的发送。
在这里插入图片描述

客户端和服务端

服务端:在常见的网络数据传输场景下,把提供服务的一方进程,称为服务端,可以提供对外服务。
客户端:获取服务的一方进程,称为客户端。
对于服务来说,一般是提供以下:
客户端获取服务资源
在这里插入图片描述

客户端保存资源在服务端:
在这里插入图片描述

4. 常见的客户端服务端模型

最常见的场景,客户端是指给用户使用的程序,服务端是提供用户服务的程序:

  1. 客户端先发送请求到服务端
  2. 服务端根据请求数据,执行相应的业务处理
  3. 服务端返回响应:发送业务处理结果
  4. 客户端根据响应数据,展示处理结果(展示获取的资源,或提示保存资源的处理结果)

在这里插入图片描述

二、Socket套接字

1. 概念

Socket套接字,是由系统提供用于网络通信的技术,是基于TCP/IP协议的网络通信的基本操作单元。基于Socket套接字的网络程序开发就是网络编程。

2.分类

Socket套接字主要针对传输层协议划分为如下三类:
流套接字:使用传输层TCP协议
TCP,即Transmission Control Protocol(传输控制协议),传输层协议。
以下为TCP的特点:

有连接
可靠传输
面向字节流
有接收缓冲区,也有发送缓冲区
大小不限

对于字节流来说,可以简单的理解为,传输数据是基于IO流,流式数据的特征就是在IO流没有关闭的情况下,是无边界的数据,可以多次发送,也可以分开多次接收。

数据报套接字:使用传输层UDP协议
UDP,即User Datagram Protocol(用户数据报协议),传输层协议。
以下为UDP的特点:

无连接
不可靠传输
面向数据报
有接收缓冲区,无发送缓冲区
大小受限:一次最多传输64k

对于数据报来说,可以简单的理解为,传输数据是一块一块的,发送一块数据假如100个字节,必须一次发送,接收也必须一次接收100个字节,而不能分100次,每次接收1个字节。

3. Java数据报套接字通信模型

对于UDP协议来说,具有无连接,面向数据报的特征,即每次都是没有建立连接,并且一次发送全部数据报,一次接收全部的数据报。
java中使用UDP协议通信,主要基于 DatagramSocket 类来创建数据报套接字,并使用DatagramPacket 作为发送或接收的UDP数据报。对于一次发送及接收UDP数据报的流程如下:

在这里插入图片描述

以上只是一次发送端的UDP数据报发送,及接收端的数据报接收,并没有返回的数据。也就是只有请求,没有响应。对于一个服务端来说,重要的是提供多个客户端的请求处理及响应,流程如下:

在这里插入图片描述

4.Java流套接字通信模型

如下图
在这里插入图片描述
Socket编程注意事项

在这里插入图片描述

  1. 客户端和服务端:开发时,经常是基于一个主机开启两个进程作为客户端和服务端,但真实的场景,一般都是不同主机。
  2. 注意目的IP和目的端口号,标识了一次数据传输时要发送数据的终点主机和进程
  3. Socket编程我们是使用流套接字和数据报套接字,基于传输层的TCP或UDP协议,但应用层协议,也需要考虑,这块我们在后续来说明如何设计应用层协议。
  4. 关于端口被占用的问题

如果一个进程A已经绑定了一个端口,再启动一个进程B绑定该端口,就会报错,这种情况也叫端口被占用
此时需要检查进程B绑定的是哪个端口,再查看该端口被哪个进程占用。以下为通过端口号查进程的方式:
在cmd输入 netstat -ano | findstr 端口号 ,则可以显示对应进程的pid。
在任务管理器中,通过pid查找进程

如何解决端口被占用的问题:

如果占用端口的进程A不需要运行,就可以关闭A后,再启动需要绑定该端口的进程B
如果需要运行A进程,则可以修改进程B的绑定端口,换为其他没有使用的端口。

三、UDP数据报套接字编程

1. DatagramSocket API

DatagramSocket 是UDP Socket,用于发送和接收UDP数据报。
DatagramSocket 构造方法:

方法签名方法说明
DatagramSocket()创建一个UDP数据报套接字的Socket,绑定到本机任意一个随机端口(一般用于客户端)
DatagramSocket(intport)创建一个UDP数据报套接字的Socket,绑定到本机指定的端口(一般用于服务端)

DatagramSocket 方法:

方法签名方法说明
void receive(DatagramPacket p)从此套接字接收数据报(如果没有接收到数据报,该方法会阻塞等待)
void send(DatagramPacket p从此套接字发送数据报包(不会阻塞等待,直接发送)
void close()关闭此数据报套接字

2 .DatagramPacket API

DatagramPacket是UDP Socket发送和接收的数据报。
DatagramPacket 构造方法:

方法签名方法说明
DatagramPacket(byte[] buf, int length)构造一个DatagramPacket以用来接收数据报,接收的数据保存在字节数组(第一个参数buf)中,接收指定长度(第二个参数length)
DatagramPacket(byte[]buf, int offset, int length,SocketAddress address)构造一个DatagramPacket以用来发送数据报,发送的数据为字节数组(第一个参数buf)中,从0到指定长度(第二个参数length)。address指定目的主机的IP和端口号

DatagramPacket 方法:

方法签名方法说明
InetAddress getAddress()从接收的数据报中,获取发送端主机IP地址;或从发送的数据报中,获取接收端主机IP地址
int getPort()从接收的数据报中,获取发送端主机的端口号;或从发送的数据报中,获取接收端主机端口号
byte[] getData()获取数据报中的数据

构造UDP发送的数据报时,需要传入 SocketAddress ,该对象可以使用 InetSocketAddress 来创建。

3. InetSocketAddress API

InetSocketAddress ( SocketAddress 的子类 )构造方法:

方法签名方法说明
InetSocketAddress(InetAddress addr, int port)创建一个Socket地址,包含IP地址和端口号

4. 具体实例

示例一:一发一收(无响应)
以下为一个客户端一次数据发送,和服务端多次数据接收(一次发送一次接收,可以接收多次),即只有客户端请求,但没有服务端响应的示例:

UDP服务端:

package org.example.udp.demo1;
import java.io.IOException;
import java.net.DatagramPacket;
import java.net.DatagramSocket;
import java.util.Arrays;public class UdpServer {//服务器socket要绑定固定的端口private static final int PORT = 8888;public static void main(String[] args) throws IOException {// 1.创建服务端DatagramSocket,指定端口,可以发送及接收UDP数据报DatagramSocket socket = new DatagramSocket(PORT);//不停的接收客户端udp数据报while (true) {// 2.创建数据报,用于接收客户端发送的数据byte[] bytes = new byte[1024];//1m=1024kb, 1kb=1024byte, UDP最多64 k(包含UDP首部8byte)DatagramPacket packet = new DatagramPacket(bytes, bytes.length);System.out.println("---------------------------------------------------");System.out.println("等待接收UDP数据报...");// 3.等待接收客户端发送的UDP数据报,该方法在接收到数据报之前会一直阻塞,接收到数据报以后,DatagramPacket对象,包含数据(bytes)和客户端ip、端口号socket.receive(packet);System.out.printf("客户端IP:%s%n",packet.getAddress().getHostAddress());System.out.printf("客户端端口号:%s%n", packet.getPort());System.out.printf("客户端发送的原生数据为:%s%n", Arrays.toString(packet.getData()));System.out.printf("客户端发送的文本数据为:%s%n", new String(packet.getData()));}}}

运行后,服务端就启动了,控制台输出如下:
在这里插入图片描述
可以看出,此时代码是阻塞等待在 socket.receive(packet) 代码行,直到接收到一个UDP数据报。

UDP客户端

package org.example.udp.demo1;
import java.io.IOException;
import java.net.DatagramPacket;
import java.net.DatagramSocket;
import java.net.InetSocketAddress;
import java.net.SocketAddress;
public class UdpClient {// 服务端socket地址,包含域名或IP,及端口号private static final SocketAddress ADDRESS = newInetSocketAddress("localhost", 8888);public static void main(String[] args) throws IOException {// 4.创建客户端DatagramSocket,开启随机端口就行,可以发送及接收UDP数据报DatagramSocket socket = new DatagramSocket();// 5-1.准备要发送的数据byte[] bytes = "hello world!".getBytes();// 5-2.组装要发送的UDP数据报,包含数据,及发送的服务端信息(服务器IP+端口号)DatagramPacket packet = new DatagramPacket(bytes, bytes.length, ADDRESS);// 6.发送UDP数据报socket.send(packet);}
}

客户端启动后会发送一个"hello world!" 的字符串到服务端,在服务端接收后,控制台输出内容如下:

在这里插入图片描述
从以上可以看出,发送的UDP数据报(假设发送的数据字节数组长度为M),在接收到以后(假设接收的数据字节数组长度为N):

  1. 如果N>M,则接收的byte[]字节数组中会有很多初始化byte[]的初始值0,转换为字符串就是空白字符;
  2. 如果N<M,则会发生数据部分丢失
    要解决以上问题,就需要发送端和接收端双方约定好一致的协议,如规定好结束的标识或整个数据的长度:

示例二:请求响应

示例一只是客户端请求和服务端接收,并没有包含服务端的返回响应。以下是对应请求和响应的改造:
构造一个展示服务端本地某个目录(BASE_PATH)的下一级子文件列表的服务
(1)客户端先接收键盘输入,表示要展示的相对路径(相对BASE_PATH的路径)
(2)发送请求:将该相对路径作为数据报发送到服务端
(3)服务端接收并处理请求:根据该请求数据,作为本地目录的路径,列出下一级子文件及子文件夹
(4)服务端返回响应:遍历子文件和子文件夹,每个文件名一行,作为响应的数据报,返回给客户端
(5)客户端接收响应:简单的打印输出所有的响应内容,即文件列表。
为了解决空字符或长度不足数据丢失的问题,客户端服务端约定好统一的协议:这里简单的设计为ASCII结束字符 \3 表示报文结束。
以下为整个客户端服务端的交互执行流程:

在这里插入图片描述

以下为服务端和客户端代码:

UDP服务端:

package org.example.udp.demo2;
import java.io.File;
import java.io.IOException;
import java.net.DatagramPacket;
import java.net.DatagramSocket;
import java.nio.charset.StandardCharsets;
public class UdpServer {//服务器socket要绑定固定的端口private static final int PORT = 8888;//本地文件目录要展示的根路径private static final String BASE_PATH = "E:/TMP";public static void main(String[] args) throws IOException {// 1.创建服务端DatagramSocket,指定端口,可以发送及接收UDP数据报DatagramSocket socket = new DatagramSocket(PORT);//不停的接收客户端udp数据报while (true){// 2.创建数据报,用于接收客户端发送的数据byte[] requestData = new byte[1024];//1m=1024kb, 1kb=1024byte, UDP最 多64k(包含UDP首部8byte)DatagramPacket requestPacket = new DatagramPacket(requestData, requestData.length);System.out.println("---------------------------------------------------");System.out.println("等待接收UDP数据报...");// 3.等待接收客户端发送的UDP数据报,该方法在接收到数据报之前会一直阻塞,接收到数据报以后,DatagramPacket对象,包含数据(bytes)和客户端ip、端口号socket.receive(requestPacket);System.out.printf("客户端IP:%s%n", requestPacket.getAddress().getHostAddress());System.out.printf("客户端端口号:%s%n", requestPacket.getPort());// 7.接收到的数据作为请求,根据请求数据执行业务,并返回响应for (int i = 0; i < requestData.length; i++) {byte b = requestData[i];if(b == '\3') {// 7-1.读取请求的数据:读取到约定好的结束符(\3),取结束符之前的内容String request = new String(requestData, 0, i);// 7-2.根据请求处理业务:本地目录根路径+请求路径,作为要展示的目录,列出下一级子文件//请求的文件列表目录System.out.printf("客户端请求的文件列表路径为:%s%n", BASE_PATH +request);File dir = new File(BASE_PATH + request);//获取下一级子文件,子文件夹File[] children = dir.listFiles();// 7-3.构造要返回的响应内容:每个文件及目录名称为一行StringBuilder response = new StringBuilder();if(children != null){for (File child : children) {response.append(child.getName()+"\n");}}//响应也要约定结束符response.append("\3");byte[] responseData =response.toString().getBytes(StandardCharsets.UTF_8);// 7-4.构造返回响应的数据报DatagramPacket,注意接收的客户端数据报包含IP和端口号,要设置到响应的数据报中DatagramPacket responsePacket = newDatagramPacket(responseData, responseData.length, requestPacket.getSocketAddress());// 7-5.发送返回响应的数据报socket.send(responsePacket);break;}}}}
}

UDP客户端

package org.example.udp.demo2;
import java.io.IOException;
import java.net.DatagramPacket;
import java.net.DatagramSocket;
import java.net.InetSocketAddress;
import java.net.SocketAddress;
import java.nio.charset.StandardCharsets;
import java.util.Scanner;
public class UdpClient {// 服务端socket地址,包含域名或IP,及端口号private static final SocketAddress ADDRESS = new InetSocketAddress("localhost", 8888);public static void main(String[] args) throws IOException {// 4.创建客户端DatagramSocket,开启随机端口就行,可以发送及接收UDP数据报DatagramSocket socket = new DatagramSocket();// 5-1.准备要发送的数据:这里调整为键盘输入作为发送的内容Scanner scanner = new Scanner(System.in);while(true){System.out.println("---------------------------------------------------");System.out.println("请输入要展示的目录:");// 5-2.每输入新行(回车),就作为UDP发送的数据报,为了接收端获取有效的内容(去除空字符串),约定\3为结束String request = scanner.nextLine() + "\3";byte[] requestData = request.getBytes(StandardCharsets.UTF_8);// 5-3.组装要发送的UDP数据报,包含数据,及发送的服务端信息(服务器IP+端口号)DatagramPacket requestPacket = new DatagramPacket(requestData, requestData.length, ADDRESS);// 6.发送UDP数据报socket.send(requestPacket);// 8.接收服务端响应的数据报,并根据响应内容决定下个步骤(我们这里简单的打印即可)// 8-1.创建数据报,用于接收服务端返回(发送)的响应byte[] responseData = new byte[1024];DatagramPacket responsePacket = new DatagramPacket(responseData, responseData.length);// 8-2.接收响应数据报socket.receive(responsePacket);System.out.println("该目录下的文件列表为:");// byte[]下次解析的起始位置int next = 0;for (int i = 0; i < responseData.length; i++) {byte b = responseData[i];if(b == '\3')//结束符退出break;if(b == '\n'){//换行符时进行解析//起始位置到换行符前一个索引位置为要解析的内容String fileName = new String(responseData, next, i-next);System.out.println(fileName);//下次解析从换行符后一个索引开始next = i+1;}}}}
}

客户端启动后会等待输入要展示的路径:
在输入想查看的目录路径后,会接收并打印服务端响应的文件列表数据:

在这里插入图片描述
此时服务端也会打印接收到的客户端请求数据:

在这里插入图片描述

四、TCP流套接字编程

1. ServerSocket API

ServerSocket 是创建TCP服务端Socket的API。
ServerSocket 构造方法:

方法签名方法说明
ServerSocket(int port)创建一个服务端流套接字Socket,并绑定到指定端口

ServerSocket 方法:

方法签名方法说明
Socketaccept()开始监听指定端口(创建时绑定的端口),有客户端连接后,返回一个服务端Socket对象,并基于该Socket建立与客户端的连接,否则阻塞等待
void close()关闭此套接字

2. socket API

Socket 是客户端Socket,或服务端中接收到客户端建立连接(accept方法)的请求后,返回的服务端Socket。
不管是客户端还是服务端Socket,都是双方建立连接以后,保存的对端信息,及用来与对方收发数据的。

Socket 构造方法:

方法签名方法说明
Socket(String host, intport)创建一个客户端流套接字Socket,并与对应IP的主机上,对应端口的进程建立连接

Socket 方法:

方法签名方法说明
InetAddress getInetAddress()返回套接字所连接的地址
InputStream getInputStream()返回此套接字的输入流
OutputStream getOutputStream()返回此套接字的输出流

3. TCP中的长短连接

TCP发送数据时,需要先建立连接,什么时候关闭连接就决定是短连接还是长连接:短连接:每次接收到数据并返回响应后,都关闭连接,即是短连接。也就是说,短连接只能一次收发数据。
长连接:不关闭连接,一直保持连接状态,双方不停的收发数据,即是长连接。也就是说,长连接可以多次收发数据。
对比以上长短连接,两者区别如下:

建立连接、关闭连接的耗时:短连接每次请求、响应都需要建立连接,关闭连接;而长连接只需要第一次建立连接,之后的请求、响应都可以直接传输。相对来说建立连接,关闭连接也是要耗时的,长连接效率更高。
主动发送请求不同:短连接一般是客户端主动向服务端发送请求;而长连接可以是客户端主动发送请求,也可以是服务端主动发。
两者的使用场景有不同:短连接适用于客户端请求频率不高的场景,如浏览网页等。长连接适用于客户端与服务端通信频繁的场景,如聊天室,实时游戏等。

基于BIO(同步阻塞IO)的长连接会一直占用系统资源。对于并发要求很高的服务端系统来说,这样的消耗是不能承受的。
由于每个连接都需要不停的阻塞等待接收数据,所以每个连接都会在一个线程中运行。
一次阻塞等待对应着一次请求、响应,不停处理也就是长连接的特性:一直不关闭连接,不停的处理请求。

实际应用时,服务端一般是基于NIO(即同步非阻塞IO)来实现长连接,性能可以极大的提升。

4. 具体实例

示例一:一发一收(短连接)

以下为一个客户端一次数据发送,和服务端多次数据接收(一次发送一次接收,可以接收多次),即只有客户端请求,但没有服务端响应的示例:

TCP服务端

package org.example.tcp.demo1;
import java.io.*;
import java.net.ServerSocket;
import java.net.Socket;
public class TcpServer {//服务器socket要绑定固定的端口private static final int PORT = 8888;public static void main(String[] args) throws IOException {// 1.创建一个服务端ServerSocket,用于收发TCP报文ServerSocket server = new ServerSocket(PORT);// 不停的等待客户端连接while(true) {System.out.println("---------------------------------------------------");System.out.println("等待客户端建立TCP连接...");// 2.等待客户端连接,注意该方法为阻塞方法Socket client = server.accept();System.out.printf("客户端IP:%s%n", client.getInetAddress().getHostAddress());System.out.printf("客户端端口号:%s%n", client.getPort());// 5.接收客户端的数据,需要从客户端Socket中的输入流获取System.out.println("接收到客户端请求:");InputStream is = client.getInputStream();// 为了方便获取字符串内容,可以将以上字节流包装为字符流BufferedReader br = new BufferedReader(new InputStreamReader(is, "UTF-8"));String line;// 一直读取到流结束:TCP是基于流的数据传输,一定要客户端关闭Socket输出流才表示服务端接收IO输入流结束while ((line = br.readLine()) != null) {System.out.println(line);}// 6.双方关闭连接:服务端是关闭客户端socket连接client.close();}}
}

运行后,服务端就启动了,控制台输出如下:

在这里插入图片描述
可以看出,此时代码是阻塞等待在 server.accept() 代码行,直到有新的客户端申请建立连接。

TCP客户端

package org.example.tcp.demo1;
import java.io.*;
import java.net.Socket;
public class TcpClient {//服务端IP或域名private static final String SERVER_HOST = "localhost";//服务端Socket进程的端口号private static final int SERVER_PORT = 8888;public static void main(String[] args) throws IOException {// 3.创建一个客户端流套接字Socket,并与对应IP的主机上,对应端口的进程建立连接Socket client = new Socket(SERVER_HOST, SERVER_PORT);// 4.发送TCP数据,是通过socket中的输出流进行发送OutputStream os = client.getOutputStream();// 为了方便输出字符串作为发送的内容,可以将以上字节流包装为字符流PrintWriter pw = new PrintWriter(new OutputStreamWriter(os, "UTF-8"));// 4-1.发送数据:pw.println("hello world!");// 4-2.有缓冲区的IO操作,真正传输数据,需要刷新缓冲区pw.flush();// 7.双方关闭连接:客户端关闭socket连接client.close();}
}

客户端启动后会发送一个"hello world!" 的字符串到服务端,在服务端接收后,控制台输出内容如下:

在这里插入图片描述

以上客户端与服务端建立的为短连接,每次客户端发送了TCP报文,及服务端接收了TCP报文后,双方都会关闭连接。

示例二:请求响应(短连接)

示例一只是客户端请求和服务端接收,并没有包含服务端的返回响应。以下是对应请求和响应的改造:
构造一个展示服务端本地某个目录(BASE_PATH)的下一级子文件列表的服务
(1)客户端先接收键盘输入,表示要展示的相对路径(相对BASE_PATH的路径)
(2)发送请求:使用客户端Socket的输出流发送TCP报文。即输入的相对路径。
(3)服务端接收并处理请求:使用服务端Socket的输入流来接收请求报文,根据请求的路径,列出下一级子文件及子文件夹。
(4)服务端返回响应:使用服务端Socket的输出流来发送响应报文。即遍历子文件和子文件夹,每个文件名一行,返回给客户端。
(5)客户端接收响应:使用客户端Socket的输入流来接收响应报文。简单的打印输出所有的响应内容,即文件列表

以下为服务端和客户端代码:

TCP服务端

package org.example.tcp.demo2;
import java.io.*;
import java.net.ServerSocket;
import java.net.Socket;
public class TcpServer {//服务器socket要绑定固定的端口private static final int PORT = 8888;//本地文件目录要展示的根路径private static final String BASE_PATH = "E:/TMP";public static void main(String[] args) throws IOException {// 1.创建一个服务端ServerSocket,用于收发TCP报文ServerSocket server = new ServerSocket(PORT);// 不停的等待客户端连接while(true) {System.out.println("---------------------------------------------------");System.out.println("等待客户端建立TCP连接...");// 2.等待客户端连接,注意该方法为阻塞方法Socket socket = server.accept();System.out.printf("客户端IP:%s%n", socket.getInetAddress().getHostAddress());System.out.printf("客户端端口号:%s%n", socket.getPort());// 5.接收客户端的数据,需要从客户端Socket中的输入流获取InputStream is = socket.getInputStream();// 为了方便获取字符串内容,可以将以上字节流包装为字符流BufferedReader br = new BufferedReader(new InputStreamReader(is, "UTF-8"));// 客户端请求只发送一行数据,我们也只需要读取一行String request = br.readLine();// 6.根据请求处理业务:本地目录根路径+请求路径,作为要展示的目录,列出下一级子文件//请求的文件列表目录System.out.printf("客户端请求的文件列表路径为:%s%n", BASE_PATH + request);File dir = new File(BASE_PATH + request);//获取下一级子文件,子文件夹File[] children = dir.listFiles();// 7.返回响应给客户端:通过客户端socket中的输出流发送响应数据OutputStream os = socket.getOutputStream();// 为了方便输出字符串作为发送的内容,可以将以上字节流包装为字符流PrintWriter pw = new PrintWriter(new OutputStreamWriter(os, "UTF-8"));// 7-1.返回的响应内容:每个文件及目录名称为一行if(children != null){for (File child : children) {pw.println(child.getName());}// 7-2.有缓冲区的IO操作,真正传输数据,需要刷新缓冲区pw.flush();// 7-3.双方关闭连接:服务端是关闭客户端socket连接socket.close();}}
}

TCP客户端

package org.example.tcp.demo2;
import java.io.*;
import java.net.Socket;
import java.util.Scanner;
public class TcpClient {//服务端IP或域名private static final String SERVER_HOST = "localhost";//服务端Socket进程的端口号private static final int SERVER_PORT = 8888;public static void main(String[] args) throws IOException {// 准备要发送的数据:这里调整为键盘输入作为发送的内容Scanner scanner = new Scanner(System.in);while(true) {System.out.println("---------------------------------------------------");System.out.println("请输入要展示的目录:");// 每输入新行(回车),就作为发送的TCP请求报文String request = scanner.nextLine();// 3.创建一个客户端流套接字Socket,并与对应IP的主机上,对应端口的进程建立连接Socket socket = new Socket(SERVER_HOST, SERVER_PORT);// 4.发送TCP数据,是通过socket中的输出流进行发送OutputStream os = socket.getOutputStream();// 为了方便输出字符串作为发送的内容,可以将以上字节流包装为字符流PrintWriter pw = new PrintWriter(new OutputStreamWriter(os, "UTF-8"));// 4-1.发送数据:pw.println(request);// 4-2.有缓冲区的IO操作,真正传输数据,需要刷新缓冲区pw.flush();// 8.接收返回的响应数据:通过socket中的输入流获取System.out.println("接收到服务端响应:");InputStream is = socket.getInputStream();// 为了方便获取字符串内容,可以将以上字节流包装为字符流BufferedReader br = new BufferedReader(new InputStreamReader(is, "UTF-8"));String line;// 一直读取到流结束:TCP是基于流的数据传输,一定要服务端关闭Socket输出流才表示客户端接收的IO输入流结束while ((line = br.readLine()) != null) {System.out.println(line);}// 9.双方关闭连接:客户端关闭socket连接socket.close();}}
}

客户端启动后会等待输入要展示的路径:

在这里插入图片描述
在输入想查看的目录路径后,会接收并打印服务端响应的文件列表数据:
在这里插入图片描述
此时服务端也会打印接收到的客户端请求数据:
在这里插入图片描述
目前TCP客户端和服务端实现的功能和UDP差不多,但都存在几个问题:

对于服务端来说,处理一次请求并返回响应后,才能再次处理下一次请求和响应,效率是比较低的。这个问题比较好解决:可以使用多线程,每次的请求与响应都在线程中处理。这样多个客户端请求的话,可以在多个线程中并发并行的执行。

服务端解析请求,是只读取了一行,而客户端解析响应,是一直读取到流结束。可以想想为什么解析请求时,没有读取到流结束?
目前的业务,双方都已约定好业务是展示目录下的文件列表,且都只需要一种数据:请求传输的数据代表要展示的目录;响应传输的数据代表文件列表:每一行为一个文件名。如要提供更多的业务,如文件重命名,文件删除等操作时,就不能了。此时就需要提供更多的字段来标识。一般我们需要设计更强大的协议。

五 、 协议

1. 回顾并理解为什么需要协议

以上我们实现的UDP和TCP数据传输,除了UDP和TCP协议外,程序还存在应用层自定义议,可以想想分别都是什么样的协议格式。

对于客户端及服务端应用程序来说,请求和响应,需要约定一致的数据格式:

客户端发送请求和服务端解析请求要使用相同的数据格式。
服务端返回响应和客户端解析响应也要使用相同的数据格式。
请求格式和响应格式可以相同,也可以不同。
约定相同的数据格式,主要目的是为了让接收端在解析的时候明确如何解析数据中的各个字段。
可以使用知名协议(广泛使用的协议格式),如果想自己约定数据格式,就属于自定义协议。

2. 封装/分用 vs 序列化/反序列化

一般来说,在网络数据传输中,发送端应用程序,发送数据时的数据转换(如java一般就是将对象转换为某种协议格式),即对发送数据时的数据包装动作来说:

如果是使用知名协议,这个动作也称为封装
如果是使用小众协议(包括自定义协议),这个动作也称为序列化,一般是将程序中的对象转换为特定的数据格式。

接收端应用程序,接收数据时的数据转换,即对接收数据时的数据解析动作来说:

如果是使用知名协议,这个动作也称为分用
如果是使用小众协议(包括自定义协议),这个动作也称为反序列化,一般是基于接收数据特定的格式,转换为程序中的对象

如何设计协议:

对于协议来说,重点需要约定好如何解析,一般是根据字段的特点来设计协议:
对于定长的字段:可以基于长度约定,如int字段,约定好4个字节即可
对于不定长的字段:可以约定字段之间的间隔符,或最后一个字段的结束符,如换行符间隔,\3符号结束等等 除了该字段“数据”本身,再加一个长度字段,用来标识该“数据”长度;即总共使用两个字段:

“数据”字段本身,不定长,需要通过“长度”字段来解析;
“长度”字段,标识该“数据”的长度,即用于辅助解析“数据”字段;

示例三:多线程+自定义协议

以下我们将示例二的业务做以下扩展:
提供多种操作:展示目录下文件列表,文件重命名,删除文件,上传文件,下载文件
在不同的操作中,需要抽象出请求和响应的字段,也即是说,要约定客户端服务端统一的请求协议,同时也要约定服务端与客户端统一的响应协议

本示例中的自定义协议:
以下为我们TCP请求数据的协议格式,这里简单起见,约定为换行符及结束符:

请求类型
操作的文件或目录路径
数据\3

说明如下:

以上总共包含3个字段,前2个字段需要按换行符读取,最后一个字段需要按结束符读取
请求类型标识是什么操作:展示目录下文件列表,文件重命名,删除文件,上传文件,下载文件
重命名、上传文件操作,需要“数据”字段,其他操作可以置为空字符串
“数据”字段为最后一个字段,使用\3结束符,这样在数据本身有换行符也能正确处理

以下为响应数据的协议格式:

状态码(标识是否操作成功)
数据(展示列表时,返回目录下的文件列表,或下载文件的数据)\3

以下为展示文件列表操作的自定义协议(请求、响应格式)

以下操作将展示服务端根目录下的子文件及子文件夹

在这里插入图片描述
请求数据格式如下:
1
/
\3
响应数据格式如下:
200
\1
\2
\3
\1.txt
\2.txt\3
以下为上传文件操作的自定义协议(请求、响应格式)
需要先在客户端指定上传的服务端目录,及客户端要上传的文件路径,以下操作将会把客户端Main.java 文件内容上传到服务端根目录 E:/TMP 下的 /1 目录下

在这里插入图片描述

请求数据格式如下:
4
/1
package org.example;
public class Main {

}
\3

响应数据格式如下:

200
\3

执行流程:

约定好请求和响应的数据格式,也就是应用层协议,大家按照约定好的格式来发送和接收,以下为执行流程:
在这里插入图片描述

代码实现如下:
请求类
先按照约定的请求协议封装请求类:
每个字段为一个属性:操作类型,操作路径,数据
完成服务端解析请求封装:按约定的方式读,先按行读取前2个字段,再按结束符读第3个字段
完成客户端发送请求封装:按约定的方式写,前2个字段按行输出,第3个字段以\3结束

package org.example.tcp.demo3;
import java.io.*;
import java.util.ArrayList;
import java.util.List;
public class Request {//操作类型:1(展示目录文件列表),2(文件重命名),3(删除文件),4(上传文件),5(下载
文件)private Integer type;//操作的目录路径private String url;//数据private String data;//服务端解析请求时:根据约定好的格式来解析public static Request serverParse(InputStream is) throws IOException {BufferedReader br = new BufferedReader(new InputStreamReader(is, "UTF-8"));Request request = new Request();//前2行分别为操作类型和操作路径request.type = Integer.parseInt(br.readLine());request.url = br.readLine();//使用list保存字符List<Character> list = new ArrayList<>();//数据:循环读取while(true){//一个字符一个字符的读char c = (char) br.read();//一直读取到结束符\3if(c == '\3')break;list.add(c);}//拼接数据StringBuilder sb = new StringBuilder();for (char c : list){sb.append(c);}request.data = sb.toString();return request;}//客户端发送请求到服务端public void clientWrite(OutputStream os) throws IOException {PrintWriter pw = new PrintWriter(os);pw.println(type);pw.println(url);pw.write(data+"\3");// 4-2.有缓冲区的IO操作,真正传输数据,需要刷新缓冲区pw.flush();}@Overridepublic String toString() {return "Request{" +"type=" + type +", url='" + url + '\'' +", data='" + data + '\'' +'}';}public Integer getType() {return type;}public void setType(Integer type) {this.type = type;}public String getUrl() {return url;}public void setUrl(String url) {this.url = url;}public String getData() {return data;}public void setData(String data) {this.data = data;}
}

响应类:

按照约定的响应协议封装响应类:

每个字段为一个属性:响应状态码
完成客户端解析响应封装:按约定的方式读,先按行读取第1个字段,再按结束符读第2个字段
完成服务端发送响应封装:按约定的方式写,第1个字段按行输出,第2个字段以\3结束

package org.example.tcp.demo3;
import java.io.*;
import java.util.ArrayList;
import java.util.List;
public class Response {//响应的状态码,200表示操作成功,404表示没有找到该路径的文件或目录private int status;//数据private String data;//客户端解析服务端返回的响应数据public static Response clientParse(InputStream is) throws IOException {BufferedReader br = new BufferedReader(new InputStreamReader(is, "UTF-8"));Response response = new Response();response.status = Integer.parseInt(br.readLine());//使用list保存字符List<Character> list = new ArrayList<>();//数据:循环读取while(true){//一个字符一个字符的读char c = (char) br.read();//一直读取到结束符\3if(c == '\3')break;list.add(c);}//拼接数据StringBuilder sb = new StringBuilder();for (char c : list){sb.append(c);}response.data = sb.toString();return response;}//服务端返回响应给客户端public void serverWrite(OutputStream os) throws IOException {PrintWriter pw = new PrintWriter(new OutputStreamWriter(os, "UTF-8"));pw.println(status);pw.write(data+"\3");// 4-2.有缓冲区的IO操作,真正传输数据,需要刷新缓冲区pw.flush();}@Overridepublic String toString() {return "Response{" +"status=" + status +", data='" + data + '\'' +'}';}public int getStatus() {return status;}public void setStatus(int status) {this.status = status;}public String getData() {return data;}public void setData(String data) {this.data = data;}
}

TCP服务端
以下完成服务端代码:
ServerSocket.accept() 为建立客户端服务端连接的方法,为提高效率,使用多线程先要解析请求数据,即 Request 已封装好的服务端解析请求,返回 Request 对象返回响应数据,需要根据不同的请求字段,做不同的业务处理,并返回对应的响应内容 。如果操作的url路径再服务端根目录 E:/TMP 下找不到,则返回响应状态码404。正常执行完,返回200响应状态码;要注意根据不同操作类型来执行不同的业务

package org.example.tcp.demo3;
import java.io.*;
import java.net.ServerSocket;
import java.net.Socket;
import java.nio.file.Files;
import java.util.UUID;
public class TcpServer {//服务器socket要绑定固定的端口private static final int PORT = 8888;//本地文件目录要展示的根路径private static final String BASE_PATH = "E:/TMP";public static void main(String[] args) throws IOException {// 1.创建一个服务端ServerSocket,用于收发TCP报文ServerSocket server = new ServerSocket(PORT);// 不停的等待客户端连接while(true) {// 2.等待客户端连接,注意该方法为阻塞方法Socket socket = server.accept();new Thread(new Runnable() {@Overridepublic void run() {try {System.out.println("---------------------------------------------------");System.out.println("客户端建立TCP连接...");System.out.printf("客户端IP:%s%n", socket.getInetAddress().getHostAddress());System.out.printf("客户端端口号:%s%n", socket.getPort());// 5.接收客户端的数据,需要从客户端Socket中的输入流获取InputStream is = socket.getInputStream();// 解析为请求对象Request request = Request.serverParse(is);System.out.println("服务端收到请求:"+request);// 6.根据请求处理业务:处理完成返回响应对象Response response = build(request);// 7.返回响应给客户端:通过客户端socket中的输出流发送响应数据OutputStream os = socket.getOutputStream();// 7-1.返回的响应内容:按照约定格式输出响应对象中的内容System.out.println("服务端返回响应:"+response);response.serverWrite(os);// 7-3.双方关闭连接:服务端是关闭客户端socket连接socket.close();} catch (IOException e) {e.printStackTrace();}}}).start();}}//根据请求处理业务,返回响应对象public static Response build(Request request){Response response = new Response();response.setStatus(200);File url = new File(BASE_PATH+request.getUrl());//该路径的文件或目录不存在if(!url.exists()){response.setStatus(404);response.setData("");return response;}try {switch (request.getType()){//1展示目录文件列表case 1: {File[] children = url.listFiles();if(children == null){response.setData("");}else{//拼接要返回的数据:文件列表StringBuilder sb = new StringBuilder();for (int i = 0; i < children.length; i++) {File child = children[i];//文件路径截取掉服务端本地路径前缀sb.append(child.getAbsolutePath().substring(BASE_PATH.length())+"\n");}response.setData(sb.toString());}break;}//2文件重命名case 2: {url.renameTo(new File(url.getParent()+File.separator+request.getData()));break;}//3删除文件case 3: {url.delete();break;}//上传文件case 4: {//上传到请求的操作路径目录下,保存的文件名简单的以随机字符串uuid生成即可FileWriter upload = new FileWriter(url.getAbsolutePath()+File.separator+ UUID.randomUUID());upload.write(request.getData());upload.flush();upload.close();break;}//下载文件case 5: {String data = new String(Files.readAllBytes(url.toPath()));response.setData(data);break;}}} catch (IOException e) {e.printStackTrace();}return response;}
}

TCP客户端
以下为客户端代码:
先要建立和服务端的连接,连接服务端的IP和端口。根据输入来构建请求数据:
1 . 先接收操作类型和操作路径
2 .重命名操作时,需要指定修改的文件名
3 .文件上传操作时,需要指定上传的客户端本地文件路径
解析响应数据,并根据响应来执行相应的业务,我们这里暂时简单的解析为 Response 对象,并打印即可

package org.example.tcp.demo3;
import java.io.*;
import java.net.Socket;
import java.nio.file.Files;
import java.nio.file.Paths;
import java.util.Scanner;
public class TcpClient {//服务端IP或域名private static final String SERVER_HOST = "localhost";//服务端Socket进程的端口号private static final int SERVER_PORT = 8888;public static void main(String[] args) throws IOException {// 准备要发送的数据:这里调整为键盘输入作为发送的内容Scanner scanner = new Scanner(System.in);while(true) {//根据键盘输入构造一个请求对象,包含操作类型,操作路径,长度和数据Request request = build(scanner);// 3.创建一个客户端流套接字Socket,并与对应IP的主机上,对应端口的进程建立连接Socket socket = new Socket(SERVER_HOST, SERVER_PORT);// 4.发送TCP数据,是通过socket中的输出流进行发送OutputStream os = socket.getOutputStream();// 4-1.发送请求数据:按照约定的格式输出请求对象中的内容System.out.println("客户端发送请求:"+request);request.clientWrite(os);// 8.接收返回的响应数据:通过socket中的输入流获取InputStream is = socket.getInputStream();// 根据约定的格式获取响应数据Response response = Response.clientParse(is);System.out.println("客户端收到响应:"+response);// 9.双方关闭连接:客户端关闭socket连接socket.close();}}//客户端发送请求时,根据键盘输入构造一个请求对象public static Request build(Scanner scanner) throws IOException {System.out.println("---------------------------------------------------");System.out.println("请输入要操作的类型:1(展示目录文件列表),2(文件重命名),3(删除文件),4(上传文件),5(下载文件)");Request request = new Request();int type = Integer.parseInt(scanner.nextLine());System.out.println("请输入要操作的路径:");String url = scanner.nextLine();String data = "";//只需要操作类型和操作路径的请求,长度和数据构造为空的if(type == 2){//重命名操作,需要输入重命名的名称System.out.println("请输入要重命名的名称:");data = scanner.nextLine();}else if(type == 4){//文件上传,需要提供上传的文件路径System.out.println("请输入要上传的文件路径:");String upload = scanner.nextLine();data = new String(Files.readAllBytes(Paths.get(upload)));}else if(type != 1 && type !=3 && type!=5){System.out.println("只能输入1-5的数字,请重新输入");return build(scanner);}request.setType(type);request.setUrl(url);request.setData(data);return request;}
}

结语

结语
本文主要介绍了网络编程基础,并介绍了Socket套接字 ,展示了两种套接字编程,并加深了对协议的了解。

以上就是本文全部内容,感谢各位能够看到最后,如有问题,欢迎各位大佬在评论区指正,希望大家可以有所收获!创作不易,希望大家多多支持!

最后,大家再见!祝好!我们下期见!

相关文章:

  • 探索排序算法的奥秘(上):冒泡排序、选择排序、插入排序
  • Babel、core-js、Loader之间的关系和作用全解析
  • 【Google Colab】利用unsloth针对医疗数据集进行大语言模型的快速微调(含跑通原代码)
  • 科技打头阵,创新赢未来——中科视界携千眼狼超高速摄像机亮相第三届科交会
  • 二叉树的前序、中序和后序遍历:详解与实现
  • FastAPI系列06:FastAPI响应(Response)
  • 信号量函数
  • 计算机网络全栈精讲:从 TCP/UDP 原理到 Socket 编程与 HTTP 协议实战(含代码实现)
  • Matlab 报错:尝试将 SCRIPT vl_sift 作为函数执行:
  • Linux 【杂谈】基础知识(一)
  • 双目RealSense系统配置rs_camera.launch----实现D435i自制rosbag数据集到离线场景的slam建图
  • 贪心算法-860.柠檬水找零-力扣(LeetCode)
  • Linux系统编程:信号量Semaphore详解 (IPC)
  • vue3中ref在js中为什么需要.value才能获取/修改值?
  • C++:STL——list
  • 可以隐藏列的表格
  • 单片机 + 图像处理芯片 + TFT彩屏 复选框控件
  • Linux内核中的编译时安全防护:以网络协议栈控制块校验为例
  • 单片机之间的双向通信
  • terraform查看资源建的关联关系
  • 商务部:将积极会同相关部门加快推进离境退税政策落实落地
  • 建投读书会·东西汇流|全球物品:跨文化交流视域下的明清外销瓷
  • 比亚迪一季度日赚亿元,净利润同比翻倍至91.55亿元
  • 共话城市自然之美,“微观黄浦”自媒体网络大V沙龙首场活动举行
  • 石磊当选河北秦皇岛市市长
  • 《不眠之夜》上演8年推出特别版,多业态联动形成戏剧经济带