Java集合 ArrayList 多线程下报错ArrayIndexOutOfBoundsException

问题描述

java ArrayList多线程下java.util.concurrent.CompletionException: java.lang.ArrayIndexOutOfBoundsException异常

ArrayList 报错 java.lang.ArrayIndexOutOfBoundsException:如果是在多线程场景下进行操作,基本上是 线程安全问题导致

ArrayList 是 非线程安全 的,在并发读写时,是多个线程同时 add/remove/get 元素时,可能导致内部结构(尤其是 elementData[] 数组)混乱,抛出 ArrayIndexOutOfBoundsException 异常。

case代码

我遇到的case,是多线程在操作list.addAll()

java 复制代码
SyncTask<UserDataLog> syncTask = new SyncTask<>(executorService);
List<User> userList = get();

List<List<User>> taskList = Lists.partition(userList, 10);
syncTask.addTask(
        taskList,
        tasks -> {
            tasks.forEach(
                    user -> {
                        List<UserDataLog> logList = checkUserDataByOne(operator, user);
                        if (CollectionUtils.isNotEmpty(logList)) {
                            returnPos.addAll(logList);
                        }
                    });
        });
syncTask.sync();

源码分析

ArrayList 底层是数组 Object[] elementData。在 add() 时会涉及两个非原子操作:

java 复制代码
public boolean addAll(Collection<? extends E> c) {
    Object[] a = c.toArray();
    int numNew = a.length;
    // 判断数组容量是否足够,如果不足,进行扩容
    ensureCapacityInternal(size + numNew);
    System.arraycopy(a, 0, elementData, size, numNew);
    size += numNew;
    return numNew != 0;
}

private static int calculateCapacity(Object[] elementData, int minCapacity) {
    if (elementData == DEFAULTCAPACITY_EMPTY_ELEMENTDATA) {
        return Math.max(DEFAULT_CAPACITY, minCapacity);
    }
    return minCapacity;
}

private void ensureCapacityInternal(int minCapacity) {
    ensureExplicitCapacity(calculateCapacity(elementData, minCapacity));
}

private void ensureExplicitCapacity(int minCapacity) {
    modCount++;

    // overflow-conscious code
    if (minCapacity - elementData.length > 0)
        grow(minCapacity);
}

问题出在以下几点:

  1. ensureCapacityInternal()多线程同时执行到这里判断size都符合不扩容条件

    多个线程在同时走到代码行4时,都判断当前数组容量够,然后都尝试写入,造成数据覆盖或越界。

  2. 多个线程同时修改 size,导致写入同一个位置

    size += numNew; 不是原子操作,会出现数据覆盖或 size 失效,进而造成越界。

  3. System.arraycopy 写入的范围不正确

    线程 A 和线程 B 在同一时间调用 addAll(),都以旧的 size 为基础写入,会出现错位或越界。

正确做法

  1. 使用CopyOnWriteArrayList
  2. Collections.synchronizedList()
相关推荐
杨二K37 分钟前
认识HertzBeat的第一天
java·hertzbeat
DevilSeagull40 分钟前
JavaScript WebAPI 指南
java·开发语言·javascript·html·ecmascript·html5
期待のcode3 小时前
Spring框架1—Spring的IOC核心技术1
java·后端·spring·架构
葵野寺3 小时前
【RelayMQ】基于 Java 实现轻量级消息队列(七)
java·开发语言·网络·rabbitmq·java-rabbitmq
书院门前细致的苹果3 小时前
JVM 全面详解:深入理解 Java 的核心运行机制
java·jvm
上官浩仁3 小时前
springboot excel 表格入门与实战
java·spring boot·excel
Hello.Reader4 小时前
从零到一上手 Protocol Buffers用 C# 打造可演进的通讯录
java·linux·c#
树码小子4 小时前
Java网络初识(4):网络数据通信的基本流程 -- 封装
java·网络
稻草人想看远方5 小时前
GC垃圾回收
java·开发语言·jvm
en-route5 小时前
如何在 Spring Boot 中指定不同的配置文件?
java·spring boot·后端