inputStream.avaliable()方法网络操作读取不全BUG

一、问题描述

公司有个需求,就是调用方(我)需要把pdf文件转为Base64字符串作为参数传递为被调用方,以下是大致转换过程:

java 复制代码
        URL url = new URL("http://xxxx.pdf");
        HttpURLConnection uc = (HttpURLConnection) url.openConnection();
        uc.setConnectTimeout(30000);
        uc.setReadTimeout(30000);
        InputStream is = uc.getInputStream();
        byte[] bytes=new byte[is.available()];
        System.out.println("bytes = " + bytes);
        is.read(bytes);
        is.close();
        String s = Base64Utils.encodeToString(bytes);
        System.out.println("s = " + s);

结果就出现问题了,发现上传的文件有的可以正常打开,有的确打不开,如下图:

二、原因分析

经过分析排查以及查阅资料,才知道是这行代码出了问题:

java 复制代码
byte[] bytes=new byte[is.available()];

用InputStream.available()方法,这个方法可以在读写操作前先得知数据流里有多少个字节可以读取。

需要注意的是,如果这个方法用在从本地文件读取数据时,一般不会遇到问题,但如果是用于网络操作,就经常会遇到一些麻烦。

这是因为网络通讯往往是间断性的,一串字节往往分几批进行发送。

例如对方发来字节长度100的数据,本地程序调用available()方法有时得到0,有时得到50,有时能得到100,大多数情况下是100。这可能是对方还没有响应,也可能是对方已经响应了,但是数据还没有送达本地。也许分3批到达,也许分两批,也许一次性到达。

三、解决方案

3.1 循环读取

java 复制代码
public static byte[] streamToByteArray(InputStream in) throws IOException {
    ByteArrayOutputStream output = new ByteArrayOutputStream();
    byte[] buffer = new byte[4096];
    int n;
    while (-1 != (n = in.read(buffer))) {
         output.write(buffer, 0, n);
       }
    return output.toByteArray();
}

3.2 借助commons-io工具

java 复制代码
byte[] bytes = IOUtils.toByteArray(inputStream);

还有很多方案,就不一一赘述了。

相关推荐
wow_DG1 天前
【Python✨】VS Code 秒开 Python 类型检查:一招 mypy + settings.json 让你的 Bug 原地现形!
python·json·bug
驱动探索者4 天前
Zephyr 获取 cpu 占用率异常bug分析
bug·rtos·zephyr
薛定e的猫咪4 天前
【调试技巧】vscode 四种断点调试,快速定位 bug
ide·vscode·python·bug
万粉变现经纪人5 天前
如何解决 pip install 编译报错 ‘cl.exe’ not found(缺少 VS C++ 工具集)问题
开发语言·c++·人工智能·python·pycharm·bug·pip
月小满6 天前
DataV轮播时其他组件的内容也一起滚动 修复bug的方法
前端·vue.js·bug·大屏端
桃子丫6 天前
AD转 Cadence学习指南-BUG篇
bug
testtraveler6 天前
[Fix] ImportError: libtorch_cpu.so: undefined symbol: iJIT_NotifyEvent
pytorch·python·bug
测试者家园6 天前
从“找 bug”到“降风险”:测试思维模式的底层迁移
软件测试·bug·风险管理·持续测试·测试基础·智能化测试·测试思维模式
chde2Wang6 天前
运行scala文件报错xsbt.CompilerInterface
bug·scala
离离茶7 天前
【笔记1-8】Qt bug记录:QListWidget窗口的浏览模式切换为ListMode后,滚轮滚动速度变慢
笔记·qt·bug