用ForkJoin框架为归并排序提速

2024-05-15 02:04

本文主要是介绍用ForkJoin框架为归并排序提速,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

归并排序典型的分治思想的算法。每层递归有三个步骤

  1. 分解(Divide):将n个元素分成个含n/2个元素的子序列。
  2. 解决(Conquer):用合并排序法对两个子序列递归的排序。
  3. 合并(Combine):合并两个已排序的子序列已得到排序结果。

使用递归算法的代码demo

public class SortArray {int[] tmp;public int[] sortArray(int[] nums) {tmp = new int[nums.length];mergeSort(nums, 0, nums.length - 1);return nums;}private void mergeSort(int[] nums, int left, int right) {if (left >= right) {return;}int middle = (left + right) / 2;mergeSort(nums, left, middle);int newLeft = middle + 1;mergeSort(nums, newLeft, right);int i = left, j = newLeft;int k = 0;while (i <= middle && j <= right) {if (nums[i] < nums[j]) {tmp[k++] = nums[i++];} else {tmp[k++] = nums[j++];}}while (i <= middle) {tmp[k++] = nums[i++];}while (j <= right) {tmp[k++] = nums[j++];}for (i = 0; i < k; i++) {nums[left + i] = tmp[i];}}public static void main(String[] args) {SortArray test  = new SortArray();int[]     array = test.sortArray(new int[]{5, 2, 3, 1});System.out.println(Arrays.toString(array));array = test.sortArray(new int[]{5, 1, 1, 2, 0, 0});System.out.println(Arrays.toString(array));}
}

写完之后,想到这个程序仅仅利用到了一个cpu核心,如果数据量很大的情况下,会造成计算资源的浪费。这个需要计算多个子任务的分治算法,明显可以用Fork/Join框架提速。于是改写了一版。当数据量小于1024个的时候不再进行切割,否则任务太多,提速效果十分差。当小于1024个的时候,偷懒用了工具库的快排。源码地址:https://github.com/bruce256/LeetCodeOJ/blob/master/src/main/java/divideAndConquer/SortArrayTask.java

public class SortArrayTask extends RecursiveTask<int[]> {public static final int THRESHOLD = 1024;int[] nums;int   left;int   right;int[] tmp;public SortArrayTask(int[] nums, int[] tmp, int left, int right) {this.nums  = nums;this.left  = left;this.right = right;this.tmp   = tmp;}@Overrideprotected int[] compute() {if (right - left + 1 <= THRESHOLD) {Arrays.sort(nums, left, right + 1);return null;}int middle = (left + right) / 2;// 当前任务纳入计算队列SortArrayTask leftSortArrayTask = new SortArrayTask(nums, tmp, left, middle);leftSortArrayTask.fork();int           newLeft            = middle + 1;SortArrayTask rightSortArrayTask = new SortArrayTask(nums, tmp, newLeft, right);rightSortArrayTask.fork();// 等待任务计算结束,再做这个语句后的事情leftSortArrayTask.join();rightSortArrayTask.join();int i = left, j = newLeft;int k = 0;while (i <= middle && j <= right) {if (nums[i] < nums[j]) {tmp[k++] = nums[i++];} else {tmp[k++] = nums[j++];}}while (i <= middle) {tmp[k++] = nums[i++];}while (j <= right) {tmp[k++] = nums[j++];}for (i = 0; i < k; i++) {nums[left + i] = tmp[i];}return nums;}public static void main(String[] args) {int[] array = {10000, 100000, 1000000, 10000000, 100000000};for (int num : array) {compare(num);}}private static void compare(int num) {int[]  nums   = new int[num];int[]  tmp    = new int[num];Random random = new Random();for (int i = 0; i < nums.length; i++) {nums[i] = random.nextInt();}System.out.println(nums.length + " numbers \t" + Runtime.getRuntime().availableProcessors() + " cpus");ForkJoinPool  forkJoinPool = new ForkJoinPool();SortArrayTask task         = new SortArrayTask(nums, tmp, 0, nums.length - 1);long          start        = System.currentTimeMillis();Future<int[]> result       = forkJoinPool.submit(task);try {int[] r = result.get();long duration = System.currentTimeMillis() - start;System.out.println("fork/join time cost: \t" + duration + " ms");} catch (InterruptedException e) {e.printStackTrace();} catch (ExecutionException e) {e.printStackTrace();}SortArray test = new SortArray();for (int i = 0; i < nums.length; i++) {nums[i] = random.nextInt();}start = System.currentTimeMillis();int[] array    = test.sortArray(nums);long  duration = System.currentTimeMillis() - start;System.out.println("single thread time cost: \t" + duration + " ms");}
}

我的电脑是i7 4核心8线程,跑了10000, 100000, 1000000, 10000000, 100000000个数据对别单线程和多线程版本,运行结果

10000 numbers 	8 cpus
fork/join time cost: 	5 ms
single thread time cost: 	4 ms100000 numbers 	8 cpus
fork/join time cost: 	29 ms
single thread time cost: 	29 ms1000000 numbers 	8 cpus
fork/join time cost: 	80 ms
single thread time cost: 	142 ms10000000 numbers 	8 cpus
fork/join time cost: 	235 ms
single thread time cost: 	1725 ms100000000 numbers 	8 cpus
fork/join time cost: 	2284 ms
single thread time cost: 	17275 ms

当数据量较小时,由于CPU上下文切换,导致并行还不如串行快。当数据量较大时,提速明显。

这篇关于用ForkJoin框架为归并排序提速的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/990493

相关文章

Python Web框架Flask、Streamlit、FastAPI示例详解

《PythonWeb框架Flask、Streamlit、FastAPI示例详解》本文对比分析了Flask、Streamlit和FastAPI三大PythonWeb框架:Flask轻量灵活适合传统应用... 目录概述Flask详解Flask简介安装和基础配置核心概念路由和视图模板系统数据库集成实际示例Stre

Olingo分析和实践之OData框架核心组件初始化(关键步骤)

《Olingo分析和实践之OData框架核心组件初始化(关键步骤)》ODataSpringBootService通过初始化OData实例和服务元数据,构建框架核心能力与数据模型结构,实现序列化、URI... 目录概述第一步:OData实例创建1.1 OData.newInstance() 详细分析1.1.1

Spring 框架之Springfox使用详解

《Spring框架之Springfox使用详解》Springfox是Spring框架的API文档工具,集成Swagger规范,自动生成文档并支持多语言/版本,模块化设计便于扩展,但存在版本兼容性、性... 目录核心功能工作原理模块化设计使用示例注意事项优缺点优点缺点总结适用场景建议总结Springfox 是

一文详解Java Stream的sorted自定义排序

《一文详解JavaStream的sorted自定义排序》Javastream中的sorted方法是用于对流中的元素进行排序的方法,它可以接受一个comparator参数,用于指定排序规则,sorte... 目录一、sorted 操作的基础原理二、自定义排序的实现方式1. Comparator 接口的 Lam

Python的端到端测试框架SeleniumBase使用解读

《Python的端到端测试框架SeleniumBase使用解读》:本文主要介绍Python的端到端测试框架SeleniumBase使用,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全... 目录SeleniumBase详细介绍及用法指南什么是 SeleniumBase?SeleniumBase

C++ HTTP框架推荐(特点及优势)

《C++HTTP框架推荐(特点及优势)》:本文主要介绍C++HTTP框架推荐的相关资料,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录1. Crow2. Drogon3. Pistache4. cpp-httplib5. Beast (Boos

Java List排序实例代码详解

《JavaList排序实例代码详解》:本文主要介绍JavaList排序的相关资料,Java排序方法包括自然排序、自定义排序、Lambda简化及多条件排序,实现灵活且代码简洁,文中通过代码介绍的... 目录一、自然排序二、自定义排序规则三、使用 Lambda 表达式简化 Comparator四、多条件排序五、

JAVA数组中五种常见排序方法整理汇总

《JAVA数组中五种常见排序方法整理汇总》本文给大家分享五种常用的Java数组排序方法整理,每种方法结合示例代码给大家介绍的非常详细,感兴趣的朋友跟随小编一起看看吧... 目录前言:法一:Arrays.sort()法二:冒泡排序法三:选择排序法四:反转排序法五:直接插入排序前言:几种常用的Java数组排序

SpringBoot基础框架详解

《SpringBoot基础框架详解》SpringBoot开发目的是为了简化Spring应用的创建、运行、调试和部署等,使用SpringBoot可以不用或者只需要很少的Spring配置就可以让企业项目快... 目录SpringBoot基础 – 框架介绍1.SpringBoot介绍1.1 概述1.2 核心功能2

Spring框架中@Lazy延迟加载原理和使用详解

《Spring框架中@Lazy延迟加载原理和使用详解》:本文主要介绍Spring框架中@Lazy延迟加载原理和使用方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐... 目录一、@Lazy延迟加载原理1.延迟加载原理1.1 @Lazy三种配置方法1.2 @Component