【踩坑】parallel并发流导致数据异常
admin
2024-02-15 21:31:02
0次

【踩坑】parallel并发流导致数据异常

    • 1. 场景
    • 2. 代码
    • 3. 原因
    • 4. 总结

1. 场景

今天生产反馈有异常, 看看日志是CollectionUtils.sort空指针异常, 这一眼看就是list中的排序有空元素, 首先想到的是sql查出来的字段是否有null, 结果发现并没有, 再一看处理list, 就知道问题在哪了.

2. 代码

deptList.stream().limit(totalDept - 1).parallel().forEach(d -> list.add(new ClassVo(d.getDeptId(), d.getOrgName(), amtType));
...Collections.sort(list, Comparator.comparing(ClassVo::getDeptId));

3. 原因

其实原因大概大家都知道, 并发修改导致的数据丢失呗,
确实, 这个其实仔细一看就能发现有问题, 这个当时写的时候, 大概是因为后面有一个排序, 所以在stream流处理的时候是不需要关心list是否有序的, 所以就想用parallel处理快些, 但是具体问题出在哪, 直接看AbstractList对add的实现:

    public boolean add(E e) {add(size(), e);return true;}

问题就在size方法不是线程安全的, 看看ArrayList的size实现:

 private int size;public int size() {return size;}

假设A线程add的时候, size是3, B线程add的时候,size也是3,则两个线程都会往3的位置放入元素,就会覆盖数据, 导致最后数据丢失

4. 总结

  1. 慎用parallel和parallelStream
  2. 如果非要用, 确保里面不会对同一个元素修改
  3. 如果非要修改, 确保元素是有同步修饰的, 或者Atomic类的
  4. 对于数据量不大的, parallel可能更耗时间, 因为线程的切换,以及parallel是先切分list再合并, 切分合并也需要时间
  5. parallel后会导致list无序
词库加载错误:未能找到文件“E:\highferrum_mysql\Configuration\Dict_Stopwords.txt”。

上一篇：LEADTOOLS 入门教程: 使用文件观察器转换文件 - C# .NET Core

下一篇：Java搭建企业级ERP架构学习（一）

相关内容

热门资讯

122.（leaflet篇）l... 听老人家说：多看美女会长寿 地图之家总目录（订阅之前建议先查看该博客） 文章末尾处提供保证可运行...
育碧GDC2018程序化大世界... 1.传统手动绘制森林的问题 采用手动绘制的方法的话，每次迭代地形都要手动再绘制森林。这...
育碧GDC2018程序化大世界... 1.传统手动绘制森林的问题 采用手动绘制的方法的话，每次迭代地形都要手动再绘制森林。这...
Vue使用pdf-lib为文件... 之前也写过两篇预览pdf的，但是没有加水印，这是链接：Vu...
PyQt5数据库开发1 4.1... 文章目录 前言 步骤/方法 1 使用windows身份登录 2 启用混合登录模式 3 允许远程连接服...
Android studio ... 解决 Android studio 出现“The emulator process for AVD ...
Linux基础命令大全（上） ♥️作者：小刘在C站 ♥️个人主页：小刘主页 ♥️每天分享云计算网络运维...
再谈解决“因为文件包含病毒或潜... 前面出了一篇博文专门来解决“因为文件包含病毒或潜在的垃圾软件”的问题，其中第二种方法有...
南京邮电大学通达学院2023c... 题目展示 一.问题描述 实验题目1 定义一个学生类，其中包括如下内容： （1）私有数据成员 ①年龄 ...
PageObject 六大原则 PageObject六大原则： 1.封装服务的方法 2.不要暴露页面的细节 3.通过r...
【Linux网络编程】01：S... Socket多进程 OVERVIEWSocket多进程1.Server2.Client3.bug&...
数据结构刷题（二十五）：122... 1.122. 买卖股票的最佳时机 II思路：贪心。把利润分解为每天为单位的维度,然后收...
浏览器事件循环 事件循环 浏览器的进程模型 何为进程？ 程序运行需要有它自己专属的内存空间࿰...
8个免费图片/照片压缩工具帮您... 继续查看一些最好的图像压缩工具，以提升用户体验和存储空间以及网站使用支持。 无数图像压...
计算机二级Python备考（2... 目录  一、选择题 1.在Python语言中： 2.知识点 二、基本操作题 1. j...
端电压 相电压 线电压 记得刚接触矢量控制的时候，拿到板子，就赶紧去测各种波形，结...
如何使用Python检测和识别... 车牌检测与识别技术用途广泛，可以用于道路系统、无票停车场、车辆门禁等。这项技术结合了计...
带环链表详解 目录 一、什么是环形链表 二、判断是否为环形链表 2.1 具体题目 2.2 具体思路 2.3 思路的...
【C语言进阶：刨根究底字符串函... 本节重点内容： 深入理解strcpy函数的使用学会strcpy函数的模拟实现⚡strc...
Django web开发(一)... 文章目录前端开发1.快速开发网站2.标签2.1 编码2.2 title2.3 标题2.4 div和s...