inputStream.avaliable()方法网络操作读取不全BUG

一、问题描述

公司有个需求,就是调用方(我)需要把pdf文件转为Base64字符串作为参数传递为被调用方,以下是大致转换过程:

java 复制代码
        URL url = new URL("http://xxxx.pdf");
        HttpURLConnection uc = (HttpURLConnection) url.openConnection();
        uc.setConnectTimeout(30000);
        uc.setReadTimeout(30000);
        InputStream is = uc.getInputStream();
        byte[] bytes=new byte[is.available()];
        System.out.println("bytes = " + bytes);
        is.read(bytes);
        is.close();
        String s = Base64Utils.encodeToString(bytes);
        System.out.println("s = " + s);

结果就出现问题了,发现上传的文件有的可以正常打开,有的确打不开,如下图:

二、原因分析

经过分析排查以及查阅资料,才知道是这行代码出了问题:

java 复制代码
byte[] bytes=new byte[is.available()];

用InputStream.available()方法,这个方法可以在读写操作前先得知数据流里有多少个字节可以读取。

需要注意的是,如果这个方法用在从本地文件读取数据时,一般不会遇到问题,但如果是用于网络操作,就经常会遇到一些麻烦。

这是因为网络通讯往往是间断性的,一串字节往往分几批进行发送。

例如对方发来字节长度100的数据,本地程序调用available()方法有时得到0,有时得到50,有时能得到100,大多数情况下是100。这可能是对方还没有响应,也可能是对方已经响应了,但是数据还没有送达本地。也许分3批到达,也许分两批,也许一次性到达。

三、解决方案

3.1 循环读取

java 复制代码
public static byte[] streamToByteArray(InputStream in) throws IOException {
    ByteArrayOutputStream output = new ByteArrayOutputStream();
    byte[] buffer = new byte[4096];
    int n;
    while (-1 != (n = in.read(buffer))) {
         output.write(buffer, 0, n);
       }
    return output.toByteArray();
}

3.2 借助commons-io工具

java 复制代码
byte[] bytes = IOUtils.toByteArray(inputStream);

还有很多方案,就不一一赘述了。

相关推荐
不断学习加努力13 小时前
使用rviz2进行可视化时,cpu资源占用过高的bug
bug
happyness4413 小时前
如何利用 AI 自动编写单元测试(Unit Test)来捕捉隐藏的边缘情况 Bug?
人工智能·单元测试·bug
深念Y16 小时前
Windows幽灵端口占用:HNS如何无声偷走你的端口
windows·python·bug·环境·端口·特权
AI多Agent协作实战派5 天前
AI多Agent协作系统实战(二十二):从6列到12列——任务监控报告的进化之路
java·人工智能·uni-app·bug
自然 醒5 天前
记录We码开发者工具的一个bug
前端·javascript·bug
GeekArch5 天前
第28讲:避坑——AI堆栈分配错误、栈溢出BUG
c语言·人工智能·stm32·mcu·学习·bug
AI多Agent协作实战派5 天前
AI多Agent协作系统实战(十七):凌晨4点,我的AI系统在“假装工作“——3个bug同时爆炸的5小时
java·前端·bug
尸僵打怪兽6 天前
Claude-code命令行无法下载插件
bug·插件·claude-code
Liu.7747 天前
uni-app 组件 uni-easyinput 常见 Bug 及解决方案
uni-app·bug
QQ骞9 天前
【bug的管理流程深入浅出】
软件测试·bug