Java中迭代、流(stream)、并行流(parallelStream)效率简单测试

2023-12-23 11:08

本文主要是介绍Java中迭代、流(stream)、并行流(parallelStream)效率简单测试,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在查阅示例代码时,看到Java流库,回故下其简洁的语法要比循环迭代优美、易读很多。

1. 测试

一时好奇想简单测试下迭代、流、并行流的运行效率。

测试环境:

计算机:DELL Inspiron 7572
处理器:Intel(R) Core(TM) i7-8550U CPU @ 1.80GHz 1.99GHz
内存:16GB
系统类型:Window10 64位 

测试代码如下:

package study;import java.io.IOException;
import java.nio.charset.StandardCharsets;
import java.nio.file.Files;
import java.nio.file.Paths;
import java.util.Arrays;
import java.util.List;public class CountLongWords {public static void main(String[] args) throws IOException {//for 效率测试long from = System.currentTimeMillis();String contents = new String(Files.readAllBytes(Paths.get("test.txt")), StandardCharsets.UTF_8);List<String> words = Arrays.asList(contents.split("\\PL+"));long count = 0;for (String w : words){if (w.length() > 5){count++;}}long to = System.currentTimeMillis();System.out.println("long word count : " + count);System.out.println("time1 : " + (to - from) + " ms");//stream 效率测试from = System.currentTimeMillis();String contents1 = new String(Files.readAllBytes(Paths.get("test1.txt")), StandardCharsets.UTF_8);List<String> words1 = Arrays.asList(contents.split("\\PL+"));count = words1.stream().filter(w -> w.length() > 5).count();to = System.currentTimeMillis();System.out.println("stream long word count : " + count);System.out.println("time2 : " + (to - from) + " ms");//parallelStream 效率测试from = System.currentTimeMillis();String contents2 = new String(Files.readAllBytes(Paths.get("test2.txt")), StandardCharsets.UTF_8);List<String> words2 = Arrays.asList(contents.split("\\PL+"));count = words2.parallelStream().filter(w -> w.length() > 5).count();to = System.currentTimeMillis();System.out.println("parallelStream long word count : " + count);System.out.println("time3 : " + (to - from) + " ms");}
}

其中:test.txt / test1.txt / test2.txt 是一样的英文内容文本,大小86.2MB。

2. 结果

测试1测试2测试3测试4测试5
迭代2601 ms2633 ms2529 ms2602 ms2707 ms
串行流1931 ms1932 ms1923 ms1993 ms1939 ms
并行流1941 ms2134 ms2136 ms2256 ms2151 ms

3. 总结

使用流(Stream)或并行流(parallelStream)效率比循环迭代的效率高

4. 拓展

按理说并行效率应该要比串行效率要高,但仔细看测试结果,可以注意到串行流的效率却比并行流的效率要高一些。

经查阅资料,使用并行流(parallelStream)时需要注意其特性,并不是所有情景下并行流(parallelStream)都可以发挥其优势。

从java8开始,并行编程变得很容易,通过并行流(parallelStream),可以很轻松的实现多线程并行处理。但是,这里面有个性能“陷阱”,如果不注意,使用并行流的效果反而更差,这个陷阱是什么呢?

这个陷阱就是,并行流默认都是用同一个默认的ForkJoinPool,这个ForkJoinPool的线程数和CPU的核心数相同。如果是计算密集型的操作,直接使用是没有问题的,因为这个ForkJoinPool会将所有的CPU打满,系统资源是没有浪费的,但是,如果其中还有IO操作或等待操作,这个默认的ForkJoinPool只能消耗一部分CPU,而另外的并行流因为获取不到该ForkJoinPool的使用权,性能将大大降低。可见,默认的ForkJoinPool必须只能处理计算密集型的任务。

那么,对应非计算密集型的任务,改怎么处理呢? 这就需要我们使用自己创建的ForkJoinPool来执行任务,下面给出实例代码:

    ForkJoinPool forkJoinPool = new ForkJoinPool(8); forkJoinPool.submit(()->{tasks.parallelStream().forEach(t->{try {String gdsstatus=transactionService.GetTransInfo(url, t.getTask_id());checkStatus(t.getTask_id(),t.getTask_status(),gdsstatus);} catch (Exception e) {System.out.println("EXCEPTION OCCOR IN TASK:"+t.getTask_id());e.printStackTrace();}System.out.println("NO:"+count.getAndIncrement()+" is done");});});

参考:java并行流的性能“陷阱”

这篇关于Java中迭代、流(stream)、并行流(parallelStream)效率简单测试的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/527813

相关文章

一文详解如何在idea中快速搭建一个Spring Boot项目

《一文详解如何在idea中快速搭建一个SpringBoot项目》IntelliJIDEA作为Java开发者的‌首选IDE‌,深度集成SpringBoot支持,可一键生成项目骨架、智能配置依赖,这篇文... 目录前言1、创建项目名称2、勾选需要的依赖3、在setting中检查maven4、编写数据源5、开启热

Java对异常的认识与异常的处理小结

《Java对异常的认识与异常的处理小结》Java程序在运行时可能出现的错误或非正常情况称为异常,下面给大家介绍Java对异常的认识与异常的处理,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参... 目录一、认识异常与异常类型。二、异常的处理三、总结 一、认识异常与异常类型。(1)简单定义-什么是

SpringBoot项目配置logback-spring.xml屏蔽特定路径的日志

《SpringBoot项目配置logback-spring.xml屏蔽特定路径的日志》在SpringBoot项目中,使用logback-spring.xml配置屏蔽特定路径的日志有两种常用方式,文中的... 目录方案一:基础配置(直接关闭目标路径日志)方案二:结合 Spring Profile 按环境屏蔽关

Java使用HttpClient实现图片下载与本地保存功能

《Java使用HttpClient实现图片下载与本地保存功能》在当今数字化时代,网络资源的获取与处理已成为软件开发中的常见需求,其中,图片作为网络上最常见的资源之一,其下载与保存功能在许多应用场景中都... 目录引言一、Apache HttpClient简介二、技术栈与环境准备三、实现图片下载与保存功能1.

SpringBoot排查和解决JSON解析错误(400 Bad Request)的方法

《SpringBoot排查和解决JSON解析错误(400BadRequest)的方法》在开发SpringBootRESTfulAPI时,客户端与服务端的数据交互通常使用JSON格式,然而,JSON... 目录问题背景1. 问题描述2. 错误分析解决方案1. 手动重新输入jsON2. 使用工具清理JSON3.

java中long的一些常见用法

《java中long的一些常见用法》在Java中,long是一种基本数据类型,用于表示长整型数值,接下来通过本文给大家介绍java中long的一些常见用法,感兴趣的朋友一起看看吧... 在Java中,long是一种基本数据类型,用于表示长整型数值。它的取值范围比int更大,从-922337203685477

java Long 与long之间的转换流程

《javaLong与long之间的转换流程》Long类提供了一些方法,用于在long和其他数据类型(如String)之间进行转换,本文将详细介绍如何在Java中实现Long和long之间的转换,感... 目录概述流程步骤1:将long转换为Long对象步骤2:将Longhttp://www.cppcns.c

SpringBoot集成LiteFlow实现轻量级工作流引擎的详细过程

《SpringBoot集成LiteFlow实现轻量级工作流引擎的详细过程》LiteFlow是一款专注于逻辑驱动流程编排的轻量级框架,它以组件化方式快速构建和执行业务流程,有效解耦复杂业务逻辑,下面给大... 目录一、基础概念1.1 组件(Component)1.2 规则(Rule)1.3 上下文(Conte

SpringBoot服务获取Pod当前IP的两种方案

《SpringBoot服务获取Pod当前IP的两种方案》在Kubernetes集群中,SpringBoot服务获取Pod当前IP的方案主要有两种,通过环境变量注入或通过Java代码动态获取网络接口IP... 目录方案一:通过 Kubernetes Downward API 注入环境变量原理步骤方案二:通过

Springboot整合Redis主从实践

《Springboot整合Redis主从实践》:本文主要介绍Springboot整合Redis主从的实例,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言原配置现配置测试LettuceConnectionFactory.setShareNativeConnect