inputStream.avaliable()方法网络操作读取不全BUG

一、问题描述

公司有个需求,就是调用方(我)需要把pdf文件转为Base64字符串作为参数传递为被调用方,以下是大致转换过程:

java 复制代码
        URL url = new URL("http://xxxx.pdf");
        HttpURLConnection uc = (HttpURLConnection) url.openConnection();
        uc.setConnectTimeout(30000);
        uc.setReadTimeout(30000);
        InputStream is = uc.getInputStream();
        byte[] bytes=new byte[is.available()];
        System.out.println("bytes = " + bytes);
        is.read(bytes);
        is.close();
        String s = Base64Utils.encodeToString(bytes);
        System.out.println("s = " + s);

结果就出现问题了,发现上传的文件有的可以正常打开,有的确打不开,如下图:

二、原因分析

经过分析排查以及查阅资料,才知道是这行代码出了问题:

java 复制代码
byte[] bytes=new byte[is.available()];

用InputStream.available()方法,这个方法可以在读写操作前先得知数据流里有多少个字节可以读取。

需要注意的是,如果这个方法用在从本地文件读取数据时,一般不会遇到问题,但如果是用于网络操作,就经常会遇到一些麻烦。

这是因为网络通讯往往是间断性的,一串字节往往分几批进行发送。

例如对方发来字节长度100的数据,本地程序调用available()方法有时得到0,有时得到50,有时能得到100,大多数情况下是100。这可能是对方还没有响应,也可能是对方已经响应了,但是数据还没有送达本地。也许分3批到达,也许分两批,也许一次性到达。

三、解决方案

3.1 循环读取

java 复制代码
public static byte[] streamToByteArray(InputStream in) throws IOException {
    ByteArrayOutputStream output = new ByteArrayOutputStream();
    byte[] buffer = new byte[4096];
    int n;
    while (-1 != (n = in.read(buffer))) {
         output.write(buffer, 0, n);
       }
    return output.toByteArray();
}

3.2 借助commons-io工具

java 复制代码
byte[] bytes = IOUtils.toByteArray(inputStream);

还有很多方案,就不一一赘述了。

相关推荐
无人等人1 天前
CyberRT(apollo) IPC(shm)通信包重复/丢包 bug 及解决方案
c++·bug
Urf_read1 天前
改BUG:Mock测试的时候,when失效
bug
賢8431 天前
如何保证bug在改完之后不会引起新bug
bug
永康李2 天前
Pandas:从一个DataFrame中直接索引赋值到另一个索引位置出错的Bug及其解决方案
python·bug·pandas
NPE~2 天前
Bug:Goland debug失效详细解决步骤【合集】
go·bug·goland·dlv失效
Urf_read3 天前
改BUG:远程连接redis失败,可能是防火墙的问题
java·redis·python·bug
Tlog嵌入式4 天前
单片机常见bug记录(长期更新)
单片机·嵌入式硬件·bug
会发光的猪。5 天前
el-input无法输入0.0001的小数,自动转换为0在vue3中的bug
前端·javascript·vue.js·elementui·bug
shandianchengzi5 天前
【BUG】LLM|Ubuntu 用 ollama 部署 DeepSeek 但没输出,llama 有输出
ubuntu·llm·bug·llama·ollama·deepseek
抽象具象化6 天前
Bug日记:Linux中systemctl restart network失败问题,网络故障
linux·运维·bug