JAVA Socket分块传大文件后 服务端回传结果文件时发生阻塞
故障根因
该问题是典型的双向Socket流死锁,核心触发点是服务端的文件接收退出逻辑依赖了“输入流读到-1(流关闭)”的判断,但当前场景是同一个TCP连接既要传客户端发的原文件,又要传服务端回的结果文件,客户端写完原文件之后没有关闭输出流,服务端就会一直阻塞在read方法上等下一个文件块,永远走不到后续的文件处理、回传环节,客户端又在等服务端回数据,两边形成永久阻塞。
为什么之前单独跑上传+处理逻辑正常
原来的测试场景下,客户端发完原文件之后就主动关闭了输出流,服务端读到流结束的-1信号,能正常跳出接收循环走处理逻辑。加上回传逻辑后,客户端为了等服务端返回结果,不会主动关闭连接/输出流,服务端的退出条件就永远触发不了。
具体阻塞链路
- 客户端侧:写完
dataset/affr.csv的所有块数据后,立刻开始读服务端回传的结果数据,因为没有收到任何服务端返回的字节,read()方法永久阻塞 - 服务端侧:接收循环的退出条件是读到流结束标记,但客户端没有关输出流,所以循环一直挂在read等待,控制台打印的
(running - waiting for more files)就是循环里的等待提示,根本没进入文件处理分支 - 连锁效应:服务端不处理就不会往连接里写任何回传数据,客户端读不到数据就一直阻塞,整个流程卡死。
可直接落地的修复方案
1. 替换掉“流结束判断文件传完”的逻辑
不要再用read()返回-1作为文件接收完成的信号,改成传输时加明确的元数据标记:
- 客户端每传一个文件块,先给服务端发送固定长度的元信息:当前块的字节长度、是否为文件最后一块
- 服务端读到“最后一块”的标记后,立刻跳出接收循环,不再等待后续流数据
参考实现的核心代码:
客户端发送块的逻辑:
// 每发一个块,先写元数据 dataOut.writeInt(blockBytes.length); // 当前块总长度 dataOut.writeBoolean(isLastBlock); // 最后一块标记 dataOut.write(blockBytes); // 写块数据 dataOut.flush(); // 写完立刻刷缓冲区
服务端接收块的退出逻辑:
while (true) { int blockLen = dataIn.readInt(); boolean isLast = dataIn.readBoolean(); // 按照指定长度精准读取块数据写入本地文件 writeBlockToLocalFile(blockLen, fileOut); if (isLast) { // 收到最后一块,直接跳出循环 break; } }
2. 调整双向流的读写时序
- 客户端发完所有原文件块、确认最后一块的元数据和数据刷入连接后,不要关闭输出流,直接切换到读取服务端回传结果的逻辑
- 服务端跳出接收循环后,立刻执行文件处理、生成结果文件的逻辑,回传结果时沿用和上传一致的“元数据头+块数据”格式,所有块发完后立刻
flush()输出流,不要依赖系统缓冲区自动刷写
3. 规避常见的边界识别坑
- 不要用无长度限制的
read()循环攒数据,避免把服务端回传的结果数据误判为原文件的块内容,所有块读取必须严格按照之前元数据声明的长度读取指定字节数 - 不要过早调用
socket.shutdownOutput(),该方法会永久关闭连接的输出方向,后续如果需要复用连接传多文件会直接失效,如果只是单次传输,也必须等服务端确认收到所有原文件后再调用,不要写完就关
内容的提问来源于stack exchange,提问作者Ayush Kumar Shah
相关产品推荐
相关产品推荐

