Java中迭代、流(stream)、并行流(parallelStream)效率简单测试

2023-12-23 11:08

本文主要是介绍Java中迭代、流(stream)、并行流(parallelStream)效率简单测试,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在查阅示例代码时,看到Java流库,回故下其简洁的语法要比循环迭代优美、易读很多。

1. 测试

一时好奇想简单测试下迭代、流、并行流的运行效率。

测试环境:

计算机:DELL Inspiron 7572
处理器:Intel(R) Core(TM) i7-8550U CPU @ 1.80GHz 1.99GHz
内存:16GB
系统类型:Window10 64位 

测试代码如下:

package study;import java.io.IOException;
import java.nio.charset.StandardCharsets;
import java.nio.file.Files;
import java.nio.file.Paths;
import java.util.Arrays;
import java.util.List;public class CountLongWords {public static void main(String[] args) throws IOException {//for 效率测试long from = System.currentTimeMillis();String contents = new String(Files.readAllBytes(Paths.get("test.txt")), StandardCharsets.UTF_8);List<String> words = Arrays.asList(contents.split("\\PL+"));long count = 0;for (String w : words){if (w.length() > 5){count++;}}long to = System.currentTimeMillis();System.out.println("long word count : " + count);System.out.println("time1 : " + (to - from) + " ms");//stream 效率测试from = System.currentTimeMillis();String contents1 = new String(Files.readAllBytes(Paths.get("test1.txt")), StandardCharsets.UTF_8);List<String> words1 = Arrays.asList(contents.split("\\PL+"));count = words1.stream().filter(w -> w.length() > 5).count();to = System.currentTimeMillis();System.out.println("stream long word count : " + count);System.out.println("time2 : " + (to - from) + " ms");//parallelStream 效率测试from = System.currentTimeMillis();String contents2 = new String(Files.readAllBytes(Paths.get("test2.txt")), StandardCharsets.UTF_8);List<String> words2 = Arrays.asList(contents.split("\\PL+"));count = words2.parallelStream().filter(w -> w.length() > 5).count();to = System.currentTimeMillis();System.out.println("parallelStream long word count : " + count);System.out.println("time3 : " + (to - from) + " ms");}
}

其中:test.txt / test1.txt / test2.txt 是一样的英文内容文本,大小86.2MB。

2. 结果

测试1测试2测试3测试4测试5
迭代2601 ms2633 ms2529 ms2602 ms2707 ms
串行流1931 ms1932 ms1923 ms1993 ms1939 ms
并行流1941 ms2134 ms2136 ms2256 ms2151 ms

3. 总结

使用流(Stream)或并行流(parallelStream)效率比循环迭代的效率高

4. 拓展

按理说并行效率应该要比串行效率要高,但仔细看测试结果,可以注意到串行流的效率却比并行流的效率要高一些。

经查阅资料,使用并行流(parallelStream)时需要注意其特性,并不是所有情景下并行流(parallelStream)都可以发挥其优势。

从java8开始,并行编程变得很容易,通过并行流(parallelStream),可以很轻松的实现多线程并行处理。但是,这里面有个性能“陷阱”,如果不注意,使用并行流的效果反而更差,这个陷阱是什么呢?

这个陷阱就是,并行流默认都是用同一个默认的ForkJoinPool,这个ForkJoinPool的线程数和CPU的核心数相同。如果是计算密集型的操作,直接使用是没有问题的,因为这个ForkJoinPool会将所有的CPU打满,系统资源是没有浪费的,但是,如果其中还有IO操作或等待操作,这个默认的ForkJoinPool只能消耗一部分CPU,而另外的并行流因为获取不到该ForkJoinPool的使用权,性能将大大降低。可见,默认的ForkJoinPool必须只能处理计算密集型的任务。

那么,对应非计算密集型的任务,改怎么处理呢? 这就需要我们使用自己创建的ForkJoinPool来执行任务,下面给出实例代码:

    ForkJoinPool forkJoinPool = new ForkJoinPool(8); forkJoinPool.submit(()->{tasks.parallelStream().forEach(t->{try {String gdsstatus=transactionService.GetTransInfo(url, t.getTask_id());checkStatus(t.getTask_id(),t.getTask_status(),gdsstatus);} catch (Exception e) {System.out.println("EXCEPTION OCCOR IN TASK:"+t.getTask_id());e.printStackTrace();}System.out.println("NO:"+count.getAndIncrement()+" is done");});});

参考:java并行流的性能“陷阱”

这篇关于Java中迭代、流(stream)、并行流(parallelStream)效率简单测试的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!


原文地址:
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.chinasem.cn/article/527813

相关文章

Java利用@SneakyThrows注解提升异常处理效率详解

《Java利用@SneakyThrows注解提升异常处理效率详解》这篇文章将深度剖析@SneakyThrows的原理,用法,适用场景以及隐藏的陷阱,看看它如何让Java异常处理效率飙升50%,感兴趣的... 目录前言一、检查型异常的“诅咒”:为什么Java开发者讨厌它1.1 检查型异常的痛点1.2 为什么说

基于Java开发一个极简版敏感词检测工具

《基于Java开发一个极简版敏感词检测工具》这篇文章主要为大家详细介绍了如何基于Java开发一个极简版敏感词检测工具,文中的示例代码简洁易懂,感兴趣的小伙伴可以跟随小编一起学习一下... 目录你是否还在为敏感词检测头疼一、极简版Java敏感词检测工具的3大核心优势1.1 优势1:DFA算法驱动,效率提升10

Java使用正则提取字符串中的内容的详细步骤

《Java使用正则提取字符串中的内容的详细步骤》:本文主要介绍Java中使用正则表达式提取字符串内容的方法,通过Pattern和Matcher类实现,涵盖编译正则、查找匹配、分组捕获、数字与邮箱提... 目录1. 基础流程2. 关键方法说明3. 常见场景示例场景1:提取所有数字场景2:提取邮箱地址4. 高级

使用SpringBoot+InfluxDB实现高效数据存储与查询

《使用SpringBoot+InfluxDB实现高效数据存储与查询》InfluxDB是一个开源的时间序列数据库,特别适合处理带有时间戳的监控数据、指标数据等,下面详细介绍如何在SpringBoot项目... 目录1、项目介绍2、 InfluxDB 介绍3、Spring Boot 配置 InfluxDB4、I

基于Java和FFmpeg实现视频压缩和剪辑功能

《基于Java和FFmpeg实现视频压缩和剪辑功能》在视频处理开发中,压缩和剪辑是常见的需求,本文将介绍如何使用Java结合FFmpeg实现视频压缩和剪辑功能,同时去除数据库操作,仅专注于视频处理,需... 目录引言1. 环境准备1.1 项目依赖1.2 安装 FFmpeg2. 视频压缩功能实现2.1 主要功

使用Java读取本地文件并转换为MultipartFile对象的方法

《使用Java读取本地文件并转换为MultipartFile对象的方法》在许多JavaWeb应用中,我们经常会遇到将本地文件上传至服务器或其他系统的需求,在这种场景下,MultipartFile对象非... 目录1. 基本需求2. 自定义 MultipartFile 类3. 实现代码4. 代码解析5. 自定

Spring-DI依赖注入全过程

《Spring-DI依赖注入全过程》SpringDI是核心特性,通过容器管理依赖注入,降低耦合度,实现方式包括组件扫描、构造器/设值/字段注入、自动装配及作用域配置,支持灵活的依赖管理与生命周期控制,... 目录1. 什么是Spring DI?2.Spring如何做的DI3.总结1. 什么是Spring D

spring AMQP代码生成rabbitmq的exchange and queue教程

《springAMQP代码生成rabbitmq的exchangeandqueue教程》使用SpringAMQP代码直接创建RabbitMQexchange和queue,并确保绑定关系自动成立,简... 目录spring AMQP代码生成rabbitmq的exchange and 编程queue执行结果总结s

Java调用Python脚本实现HelloWorld的示例详解

《Java调用Python脚本实现HelloWorld的示例详解》作为程序员,我们经常会遇到需要在Java项目中调用Python脚本的场景,下面我们来看看如何从基础到进阶,一步步实现Java与Pyth... 目录一、环境准备二、基础调用:使用 Runtime.exec()2.1 实现步骤2.2 代码解析三、

聊聊springboot中如何自定义消息转换器

《聊聊springboot中如何自定义消息转换器》SpringBoot通过HttpMessageConverter处理HTTP数据转换,支持多种媒体类型,接下来通过本文给大家介绍springboot中... 目录核心接口springboot默认提供的转换器如何自定义消息转换器Spring Boot 中的消息