Java多线程+分治求和,太牛了

shigen坚持更新文章的博客写手,擅长Java、python、vue、shell等编程语言和各种应用程序、脚本的开发。记录成长,分享认知,留住感动。
个人IP:shigen

最近的一个面试,shigen简直被吊打,简历上写了熟悉高并发。完了面试官不按照套路出牌,我说了我用了countdownLanch,他问forkjoin了解吗?LRU怎么设计……一脸懵,尴尬的直接抠脚。

赶紧花时间研究了,顺便看了一下线程池,看到了这样一个经典的案例:

求1-10000_0000的和。

没错,别眼花,是1-1个亿个数字的和。别告诉我,直接循环相加,那就回家等通知吧。

好的,前提就聊到这。看看我这一段炫酷的代码:

代码案例

天啊,task+递归,和着在线程池不断的玩呗。


一看这种分而治之,像极了传说中的二分法,经典的分治思想。等等,我咋这么熟悉!

没错,经典的归并排序,就是这样子的!花了一小时,把这个算法用Java写出来了。shigen之前可是用的python写算法。

java版归并排序

public class MergeSortDemo {// 归并排序static void mergeSort(int[] arr, int left, int right) {if (left < right) {int mid = (left + right) / 2;// 简直直接midmergeSort(arr, left, mid);mergeSort(arr, mid + 1, right);merge(arr, left, mid, right);}}private static void print(int[] arr) {for (int i = 0; i < arr.length; i++) {System.out.print(arr[i] + " ");}System.out.println();}private static void merge(int[] arr, int left, int mid, int right) {// 构建一个临时数组暂存arr[left, right]之间有序的元素int[] temp = new int[right - left + 1];int i = left, j = mid + 1, k = 0;// while的临界条件需注意,此时分段有序数组合并// [1,2,3] + [1,3,4,5,6] mid = 4while (i <= mid && j <= right) {if (arr[i] < arr[j]) {temp[k++] = arr[i++];} else {temp[k++] = arr[j++];}}// 剩下的元素直接追加即可,两个while只会走一个while (i <= mid) {temp[k++] = arr[i++];}while (j <= right) {temp[k++] = arr[j++];}// 将temp[] => arr[left, right]for (i = 0; i < temp.length; i++) {arr[left + i] = temp[i];}}public static void main(String[] args) {int[] arr = {1, 432, 1, 3243, 54, 32, -10, 43, 90};mergeSort(arr, 0, arr.length - 1);print(arr);}}

看似很复杂,其实一点也不简单。注意点写在代码里了。只能说用Java写算法,真的头大。

python版归并排序

python版本归并排序

没错,就短短的四行。简洁多了。

接下来,就是重点,如何求1-1个亿数字的和呢?多线程+分段会是不错的选择

  • 1-1_0000
  • 1_0001-2_0000
  • 2_0001-3_0000
  • ……
  • 9999_0000-10000_0000

原理就是这个原理,多线程分段的求和,最后再把总体的和算出来。至少两点是确定的,线程池+Futuretask

多线程求和

public class ThreadPoolDemo {@SneakyThrowspublic static void main(String[] args) {int[] arr = new int[10_0000];for (int i = 0; i < arr.length; i++) {arr[i] = i + 1;}StopWatch stopWatch = new StopWatch();stopWatch.start();ExecutorService executor = Executors.newFixedThreadPool(10);int sum = 0;int chunkSize = arr.length / 10;for (int i = 0; i < 10; i++) {int start = i * chunkSize;int end = (i == 9) ? arr.length : (start + chunkSize);sum += executor.submit(new SumTask(arr, start, end)).get();}executor.shutdown();stopWatch.stop();System.out.println("Sum of 1 to 100000 is: " + sum);System.out.println("代码执行时间:" + stopWatch.getLastTaskTimeMillis() + "毫秒");}
}class SumTask implements Callable<Integer> {private final int[] arr;private final int start;private final int end;public SumTask(int[] arr, int start, int end) {this.arr = arr;this.start = start;this.end = end;}@Overridepublic Integer call() {int sum = 0;for (int i = start; i < end; i++) {sum += arr[i];}return sum;}
}

看着很多,核心的一段就是这个:

for (int i = 0; i < 10; i++) {int start = i * chunkSize;int end = (i == 9) ? arr.length : (start + chunkSize);sum += executor.submit(new SumTask(arr, start, end)).get();
}

创建任务->装进线程池->获得结果->关闭线程池。

但是,在这种情况下,还能继续的优化吗?其实也是可以的,因为现在数组还是太长了,而且计算的线程不是足够的多,性能上肯定不是最优的。

多线程+分治求和

这就是今天的主角:多线程+分治实现求和。还是先看代码:

public class SumRecursive {public static class RecursiveSumTask implements Callable<Long> {// 拆分粒度public static final int THRESHOLD = 10_0000;int low;int high;int[] arr;ExecutorService executorService;RecursiveSumTask(ExecutorService executorService, int[] arr, int low, int high) {this.executorService = executorService;this.arr = arr;this.low = low;this.high = high;}@Overridepublic Long call() throws Exception {long result = 0;if (high - low < THRESHOLD) {for (int i = low; i < high; i++) {result += arr[i];}} else {int mid = (low + high) / 2;RecursiveSumTask leftTask = new RecursiveSumTask(executorService, arr, low, mid);RecursiveSumTask rightTask = new RecursiveSumTask(executorService, arr, mid, high);Future<Long> lr = executorService.submit(leftTask);Future<Long> rr = executorService.submit(rightTask);result = lr.get() + rr.get();}return result;}}@SneakyThrowspublic static void main(String[] args) {int[] arr = new int[10000_0000];for (int i = 0; i < arr.length; i++) {arr[i] = i + 1;}StopWatch stopWatch = new StopWatch();stopWatch.start();ExecutorService executorService = Executors.newCachedThreadPool();RecursiveSumTask recursiveSumTask = new RecursiveSumTask(executorService, arr, 0, arr.length);Long result = executorService.submit(recursiveSumTask).get();executorService.shutdown();stopWatch.stop();System.out.println("Sum of 1 to 100000 is: " + result);System.out.println("代码执行时间:" + stopWatch.getLastTaskTimeMillis() + "毫秒");}}

说实话,代码在显示器上显示真的太好看了,忍不住的截图分享了。

代码截图

那这里的不同点在于使用了分治思想,当我们的数组的长度小于阈值的时候,就直接计算和;但是大于阈值的之后,就会继续的拆分。

总之总体的设计和逻辑真的像极了上文提到的MergeSort,先分的足够小,然后合并,获得最终的结果。

当然,这种设计也并不是最好的,因为我们的线程池设计,或者说线程池等待队列的大小是不好把控的,所以我们线程池的等待队列是2147483647长度的同步队列。完了,又要考虑到OOM!

接下来会分享forkjoin,期待继续关注!文章代码点击这里。

与shigen一起,每天不一样!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/600923.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

机械类外文翻译,中译英如何翻译比较好?

在全球化日益加剧的今天&#xff0c;我们的机械制造业纷纷跨越国界&#xff0c;与海外企业携手合作。机构类外文翻译的需求也日益凸显。那么&#xff0c;针对机械类外文翻译&#xff0c;中译英如何翻译比较好&#xff1f; 首先&#xff0c;我们需要明确一点&#xff0c;高质量的…

弹幕功能1

今天看pure-admin的时候发现有个弹幕功能 GitHub - hellodigua/vue-danmaku: 基于 Vue 的弹幕交互组件 | A danmaku component for Vue

内容多样化的秘密:Kompas.ai如何拓展你的内容形式

在这个信息爆炸的时代&#xff0c;内容多样化已成为品牌吸引和维系广泛受众的关键策略。多样化的内容形式不仅能够迎合不同用户的偏好&#xff0c;还能够提高内容的覆盖面和参与度&#xff0c;从而增强品牌的市场竞争力。本文将深入探讨内容形式多样化的重要性&#xff0c;展示…

ctfshow web入门 php特性 web108--web115

web108 ereg函数相当于而preg_match()函数 ereg函数的漏洞&#xff1a;00截断。%00截断及遇到%00则默认为字符串的结束 strrev函数就是把字符串倒过来 就是说intval处理倒过来的传参c0x36d&#xff08;877&#xff09;?ca%00778 web109 异常处理类 通过异常处理类Excepti…

weight-tying探索

在一些领域&#xff0c;将嵌入层和输出层的权重绑定&#xff0c;以达到减少参数量并使得相同token保持统一的embedding空间的作用。 下面的nn.Linear(3, 10)的权重矩阵的尺寸是10*3&#xff0c;即y W x b&#xff0c;因此跟nn.Embedding(10, 3)的权重矩阵大小相等。 impor…

Python MNIST 转图片

Python MNIST 转图片 1 获取数据2 显示图片3 转换图片4 全部代码 1 获取数据 import numpy as np import tensorflow as tf from tensorflow.keras import datasets # type: ignoredef save(mnist_path):# 输出TensorFlow版本print("TensorFlow: {0}".format(tf.__v…

基于SpringBoot+Vue的健身教练预约管理系统(源码+文档+部署+讲解)

一.系统概述 私人健身与教练预约管理系统&#xff0c;可以摆脱传统手写记录的管理模式。利用计算机系统&#xff0c;进行用户信息、管理员信息的管理&#xff0c;其中包含首页&#xff0c;个人中心&#xff0c;用户管理&#xff0c;教练管理&#xff0c;健身项目管理&#xff0…

C语言 03 VSCode开发

安装好 C 语言的开发环境后&#xff0c;就需要创建项目进行开发了。 使用 IDE&#xff08;集成开发环境&#xff09;进行开发了。 C 语言的开发工具很多&#xff0c;现在主流的有 Clion、Visual Studio、VSCode。 这里以 VSCode 作为演示。 创建项目 安装 VSCode。 推荐直接在…

Yii2 路由美化访问需要加s

不得不说yii真是反人类&#xff0c;怪不得现在都不维护了&#xff0c;今天解析下路由美化下的路由访问问题。 设置main.php配置文件 urlManager > [enablePrettyUrl > true, // 启用 URL美化showScriptName > false, // 隐藏入口文件index.phpenableStrictParsing…

计算机网络-TCP连接建立阶段错误应对机制

错误现象 丢包 网络问题&#xff1a;网络不稳定可能导致丢包&#xff0c;例如信号弱或干扰强。带宽限制可能导致路由器或交换机丢弃包&#xff0c;尤其是在高流量时段。网络拥塞时&#xff0c;多个数据流竞争有限的资源&#xff0c;也可能导致丢包。缓冲区溢出&#xff1a;TC…

如何搭建企业级MQ消息集成平台

企业级MQ消息集成平台的重要性在于实现不同系统之间的高效、可靠、实时的消息传递和数据交换。它可以帮助企业实现系统解耦&#xff0c;提高系统的可扩展性和灵活性&#xff0c;降低系统间的依赖性。通过消息队列中间件&#xff0c;企业可以实现异步通信、削峰填谷、流量控制等…

橘子学JDK之JMH-02(BenchmarkModes)

一、案例二代码 这次我们来搞一下官网文档的第二个案例&#xff0c;我删除了一些没用的注释&#xff0c;然后对代码做了一下注释的翻译&#xff0c;可以看一下意思。 package com.levi;import org.openjdk.jmh.annotations.*; import org.openjdk.jmh.runner.Runner; import …