美文网首页
关于parallelStream的一次踩坑

关于parallelStream的一次踩坑

作者: 梦云之巅 | 来源:发表于2021-06-16 10:24 被阅读0次

Stream 是JAVA8引入的一个新的抽象,为了提高性能同时也加入了parallelStream(并行流)
看下面一段代码

        Map<String,String> map = new HashMap<>();
        map.put("1","2");//1
        List<Map<String,Integer>> mapsL = new ArrayList<>();//2


        for(int i=0;i<100000;i++){//3
            Map<String,Integer> map1 = new HashMap<>();
            map1.put("key",i);
            mapsL.add(map1);
        }
        List<Map<String,Integer>> maps2 = new ArrayList<>();
        mapsL.parallelStream().filter(
                iter-> iter.get("key") <20000
        ).forEach(maps2::add);//4
        if(maps2.size()<20000){//5
            System.out.println("forEach Error !"+maps2.size());//6
        }

从表面看上去相安无事,输出语句并不会运行。
其实并不然
你把这个段代码粘贴并运行之后,会发现输出语句是有输出的。

这个时候心里就会产生疑问这是为什么呢?所有的操作看上去都是合理的而且符合java语法的。

我们一起来重读一下代码

  • 代码1到3为正常创建添加操作,模仿我们从数据源查出的数据集
  • 代码4是一个并行的流
    • 过滤key对应的值小于20000的操作
    • 将过滤后的值add到naps2中
  • 5是逻辑判断

我们在面对一个巨型的集合时候,Stream的串行操作是无法我们对性能的追求的,那这个时候最好的操作就是采用多线程或者parallelStream并行流,无论是前者还是后者,都要面临一个问题——线程安全
哦,这个时候就不难明白为啥上面maps2的SIZE会小于20000,罪魁祸首就是上面的代码4,

  • ArrayList是一个非线程安全类
  • forEach 的操作是无顺序控制的

问题找到了,我相信大家会有更多的办法去解决 ,无论是使用线程安全的Vector ,亦或者使用forEachOrdered,或者不做迭代操作直接使用.collect(Collectors.toList()) 的操作都是可以解决上面的问题的。

        Map<String,String> map = new HashMap<>();
        map.put("1","2");
        List<Map<String,Integer>> mapsL = new ArrayList<>();


        for(int i=0;i<100000;i++){
            Map<String,Integer> map1 = new HashMap<>();
            map1.put("key",i);
            mapsL.add(map1);
        }



        for(int i=0;i<10000;i++){
            List<Map<String,Integer>> list= mapsL.parallelStream().filter(
                    iter-> iter.get("key") <20000
            ).collect(Collectors.toList()); //方案1 推荐

            List<Map<String,Integer>> maps2 = new Vector<>();
            mapsL.parallelStream().filter(
                    iter-> iter.get("key") <20000
            ).forEach(maps2::add); //方案2

            List<Map<String,Integer>> maps3 = new ArrayList<>();
            mapsL.parallelStream().filter(
                    iter-> iter.get("key") <20000
            ).forEachOrdered(maps3::add); // 方案3

            if(maps3.size()<20000){
                System.out.println("forEach Error !"+maps2.size());
            }

            if(maps2.size()<20000){
                System.out.println("forEach Error !"+maps2.size());
            }

            if(list.size()<20000){
                System.out.println("Collect Error !"+list.size());
            }

            //方案 N。。。。。。。。。。。。。
        }

相关文章

  • 关于parallelStream的一次踩坑

    Stream 是JAVA8引入的一个新的抽象,为了提高性能同时也加入了parallelStream(并行流)看下面...

  • JDK8下parallelStream()踩坑

    近日在开发过程中,想利用Java提供发流进行数据集合操作,数据量大约是在小几十万左右,本想采用并行流去进行操作,把...

  • java8的ParallelStream踩坑记录

    java8中的新特性stream流处理,让集合操作变得非常的简单,但是因为没有源码支持,所以里面有很多坑,只有踩过...

  • ParallelStream的那些坑

    很多同学喜欢使用lambda表达式,它允许你定义短小精悍的函数,体现你高超的编码水平。当然,这个功能在某些以代码行...

  • parallelStream遇到的坑

    Java parallelStream遇到的坑 线程安全问题 paralleStream是并行流,并行就意味着是多...

  • DataBinding 点击事件无效

    前言 刚加入MVVM阵营不久,踩了不少坑,今天说说关于DataBinding的坑 对于DataBinding如何实...

  • 20考研过来人告诉你,这些坑你绝不能踩

    已经被学姐学长踩过的坑,求你别踩 真的大坑!关于院校选择 @alllwaysalllone: 选择大于努力 @CH...

  • [ANR Warning]onMeasure time too

    ConstraintLayout 踩坑记一次封装组合控件时的坑,我才用了集成 ConstraintLayout 来...

  • D1094:踩坑的价值最大化

    是人就会踩坑,不踩坑理论上就不属于人类,踩坑是人之常情,能回头站在坑边反思,才是对踩过的的坑价值最大化的体现,要不...

  • react富文本编辑器react-quill的使用

    关于写此文的目的: 第一次接触富文本编辑器,尤其是react-quill这种,百度不到的各种坑,踩了无数的坑终于搞...

网友评论

      本文标题:关于parallelStream的一次踩坑

      本文链接:https://www.haomeiwen.com/subject/eudxyltx.html