Java中迭代、流(stream)、并行流(parallelStream)效率简单测试

2023-12-23 11:08

本文主要是介绍Java中迭代、流(stream)、并行流(parallelStream)效率简单测试,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在查阅示例代码时,看到Java流库,回故下其简洁的语法要比循环迭代优美、易读很多。

1. 测试

一时好奇想简单测试下迭代、流、并行流的运行效率。

测试环境:

计算机:DELL Inspiron 7572
处理器:Intel(R) Core(TM) i7-8550U CPU @ 1.80GHz 1.99GHz
内存:16GB
系统类型:Window10 64位 

测试代码如下:

package study;import java.io.IOException;
import java.nio.charset.StandardCharsets;
import java.nio.file.Files;
import java.nio.file.Paths;
import java.util.Arrays;
import java.util.List;public class CountLongWords {public static void main(String[] args) throws IOException {//for 效率测试long from = System.currentTimeMillis();String contents = new String(Files.readAllBytes(Paths.get("test.txt")), StandardCharsets.UTF_8);List<String> words = Arrays.asList(contents.split("\\PL+"));long count = 0;for (String w : words){if (w.length() > 5){count++;}}long to = System.currentTimeMillis();System.out.println("long word count : " + count);System.out.println("time1 : " + (to - from) + " ms");//stream 效率测试from = System.currentTimeMillis();String contents1 = new String(Files.readAllBytes(Paths.get("test1.txt")), StandardCharsets.UTF_8);List<String> words1 = Arrays.asList(contents.split("\\PL+"));count = words1.stream().filter(w -> w.length() > 5).count();to = System.currentTimeMillis();System.out.println("stream long word count : " + count);System.out.println("time2 : " + (to - from) + " ms");//parallelStream 效率测试from = System.currentTimeMillis();String contents2 = new String(Files.readAllBytes(Paths.get("test2.txt")), StandardCharsets.UTF_8);List<String> words2 = Arrays.asList(contents.split("\\PL+"));count = words2.parallelStream().filter(w -> w.length() > 5).count();to = System.currentTimeMillis();System.out.println("parallelStream long word count : " + count);System.out.println("time3 : " + (to - from) + " ms");}
}

其中:test.txt / test1.txt / test2.txt 是一样的英文内容文本,大小86.2MB。

2. 结果

测试1测试2测试3测试4测试5
迭代2601 ms2633 ms2529 ms2602 ms2707 ms
串行流1931 ms1932 ms1923 ms1993 ms1939 ms
并行流1941 ms2134 ms2136 ms2256 ms2151 ms

3. 总结

使用流(Stream)或并行流(parallelStream)效率比循环迭代的效率高

4. 拓展

按理说并行效率应该要比串行效率要高,但仔细看测试结果,可以注意到串行流的效率却比并行流的效率要高一些。

经查阅资料,使用并行流(parallelStream)时需要注意其特性,并不是所有情景下并行流(parallelStream)都可以发挥其优势。

从java8开始,并行编程变得很容易,通过并行流(parallelStream),可以很轻松的实现多线程并行处理。但是,这里面有个性能“陷阱”,如果不注意,使用并行流的效果反而更差,这个陷阱是什么呢?

这个陷阱就是,并行流默认都是用同一个默认的ForkJoinPool,这个ForkJoinPool的线程数和CPU的核心数相同。如果是计算密集型的操作,直接使用是没有问题的,因为这个ForkJoinPool会将所有的CPU打满,系统资源是没有浪费的,但是,如果其中还有IO操作或等待操作,这个默认的ForkJoinPool只能消耗一部分CPU,而另外的并行流因为获取不到该ForkJoinPool的使用权,性能将大大降低。可见,默认的ForkJoinPool必须只能处理计算密集型的任务。

那么,对应非计算密集型的任务,改怎么处理呢? 这就需要我们使用自己创建的ForkJoinPool来执行任务,下面给出实例代码:

    ForkJoinPool forkJoinPool = new ForkJoinPool(8); forkJoinPool.submit(()->{tasks.parallelStream().forEach(t->{try {String gdsstatus=transactionService.GetTransInfo(url, t.getTask_id());checkStatus(t.getTask_id(),t.getTask_status(),gdsstatus);} catch (Exception e) {System.out.println("EXCEPTION OCCOR IN TASK:"+t.getTask_id());e.printStackTrace();}System.out.println("NO:"+count.getAndIncrement()+" is done");});});

参考:java并行流的性能“陷阱”

这篇关于Java中迭代、流(stream)、并行流(parallelStream)效率简单测试的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/527813

相关文章

Java中流式并行操作parallelStream的原理和使用方法

《Java中流式并行操作parallelStream的原理和使用方法》本文详细介绍了Java中的并行流(parallelStream)的原理、正确使用方法以及在实际业务中的应用案例,并指出在使用并行流... 目录Java中流式并行操作parallelStream0. 问题的产生1. 什么是parallelS

Java中Redisson 的原理深度解析

《Java中Redisson的原理深度解析》Redisson是一个高性能的Redis客户端,它通过将Redis数据结构映射为Java对象和分布式对象,实现了在Java应用中方便地使用Redis,本文... 目录前言一、核心设计理念二、核心架构与通信层1. 基于 Netty 的异步非阻塞通信2. 编解码器三、

SpringBoot基于注解实现数据库字段回填的完整方案

《SpringBoot基于注解实现数据库字段回填的完整方案》这篇文章主要为大家详细介绍了SpringBoot如何基于注解实现数据库字段回填的相关方法,文中的示例代码讲解详细,感兴趣的小伙伴可以了解... 目录数据库表pom.XMLRelationFieldRelationFieldMapping基础的一些代

一篇文章彻底搞懂macOS如何决定java环境

《一篇文章彻底搞懂macOS如何决定java环境》MacOS作为一个功能强大的操作系统,为开发者提供了丰富的开发工具和框架,下面:本文主要介绍macOS如何决定java环境的相关资料,文中通过代码... 目录方法一:使用 which命令方法二:使用 Java_home工具(Apple 官方推荐)那问题来了,

Java HashMap的底层实现原理深度解析

《JavaHashMap的底层实现原理深度解析》HashMap基于数组+链表+红黑树结构,通过哈希算法和扩容机制优化性能,负载因子与树化阈值平衡效率,是Java开发必备的高效数据结构,本文给大家介绍... 目录一、概述:HashMap的宏观结构二、核心数据结构解析1. 数组(桶数组)2. 链表节点(Node

Java AOP面向切面编程的概念和实现方式

《JavaAOP面向切面编程的概念和实现方式》AOP是面向切面编程,通过动态代理将横切关注点(如日志、事务)与核心业务逻辑分离,提升代码复用性和可维护性,本文给大家介绍JavaAOP面向切面编程的概... 目录一、AOP 是什么?二、AOP 的核心概念与实现方式核心概念实现方式三、Spring AOP 的关

详解SpringBoot+Ehcache使用示例

《详解SpringBoot+Ehcache使用示例》本文介绍了SpringBoot中配置Ehcache、自定义get/set方式,并实际使用缓存的过程,文中通过示例代码介绍的非常详细,对大家的学习或者... 目录摘要概念内存与磁盘持久化存储:配置灵活性:编码示例引入依赖:配置ehcache.XML文件:配置

Java 虚拟线程的创建与使用深度解析

《Java虚拟线程的创建与使用深度解析》虚拟线程是Java19中以预览特性形式引入,Java21起正式发布的轻量级线程,本文给大家介绍Java虚拟线程的创建与使用,感兴趣的朋友一起看看吧... 目录一、虚拟线程简介1.1 什么是虚拟线程?1.2 为什么需要虚拟线程?二、虚拟线程与平台线程对比代码对比示例:三

Java中的.close()举例详解

《Java中的.close()举例详解》.close()方法只适用于通过window.open()打开的弹出窗口,对于浏览器的主窗口,如果没有得到用户允许是不能关闭的,:本文主要介绍Java中的.... 目录当你遇到以下三种情况时,一定要记得使用 .close():用法作用举例如何判断代码中的 input

Spring Gateway动态路由实现方案

《SpringGateway动态路由实现方案》本文主要介绍了SpringGateway动态路由实现方案,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随... 目录前沿何为路由RouteDefinitionRouteLocator工作流程动态路由实现尾巴前沿S