Java8 中用法优雅的 Stream,性能也"优雅"吗?

Java8 Stream 数据流,大数据量下的性能效率怎么样? stream 对于终端操作,可以直接提供一个中间操作的结果,或者将结果转换为特定的 collection、array、String 等; stream 的特点 ①只能遍历一次: 数据流的从一头获取数据源,在流水线上依次对元素进行操作,当元素通过流水线,便无再对其进行操作,可以重新在数据源获取一个新的数据流进行操作; ②采用内部迭代的方式: 对Collection进行处理,一般会使用 Iterator 遍历器的遍历方式,这是一种外部迭代; 而对于处理Stream,只要申明处理方式,处理过程由流对象自行. 阅读详情

点击上方 "程序员小乐"关注, 星标或置顶一起成长

每天凌晨00点00分, 第一时间与你相约

每日英文

Don’t let anyone steal your dreams. Follow your heart, no matter what.

不论做什么事,相信你自己,别让别人的一句话将你击倒。

每日掏心

当回首人生的那些酸苦,你会回味出一种坚强;当你学会放手的时候,你会发现你已经拥有。


来自:CarpenterLee | 责编:乐乐

链接:cnblogs.com/CarpenterLee/p/6675568.html

程序员小乐(ID:study_tech)第 694 次推文   图片来自网络

往日回顾:Google 为什么把几十亿行代码放在一个库

   正文   

Java8的Stream API可以极大提高Java程序员的生产力,让程序员写出高效率、干净、简洁的代码。那么,Stream API的性能到底如何呢,代码整洁的背后是否意味着性能的损耗呢?本文对Stream API的性能一探究竟。

为保证测试结果真实可信,我们将JVM运行在-server模式下,测试数据在GB量级,测试机器采用常见的商用服务器,配置如下:

OSCentOS 6.7 x86_64
CPUIntel Xeon X5675, 12M Cache 3.06 GHz, 6 Cores 12 Threads
内存96GB
JDKjava version 1.8.0_91, Java HotSpot(TM) 64-Bit Server VM

测试方法与测试数据

性能测试并不是容易的事,Java性能测试更费劲,因为虚拟机对性能的影响很大,JVM对性能的影响有两方面:

  1. GC的影响。GC的行为是Java中很不好控制的一块,为增加确定性,我们手动指定使用CMS收集器,并使用10GB固定大小的堆内存。具体到JVM参数就是 -XX:+UseConcMarkSweepGC-Xms10G-Xmx10G

  2. JIT(Just-In-Time)即时编译技术。即时编译技术会将热点代码在JVM运行的过程中编译成本地代码,测试时我们会先对程序预热,触发对测试函数的即时编译。相关的JVM参数是 -XX:CompileThreshold=10000

Stream并行执行时用到 ForkJoinPool.commonPool()得到的线程池,为控制并行度我们使用Linux的 taskset命令指定JVM可用的核数。

测试数据由程序随机生成。为防止一次测试带来的抖动,测试4次求出平均时间作为运行时间。

基本类型迭代

测试内容:找出整型数组中的最小值。对比for循环外部迭代和Stream API内部迭代性能。

测试程序IntTest,测试结果如下图:

图中展示的是for循环外部迭代耗时为基准的时间比值。分析如下:

  1. 对于基本类型Stream串行迭代的性能开销明显高于外部迭代开销(两倍);

  2. Stream并行迭代的性能比串行迭代和外部迭代都好。

并行迭代性能跟可利用的核数有关,上图中的并行迭代使用了全部12个核,为考察使用核数对性能的影响,我们专门测试了不同核数下的Stream并行迭代效果:

分析,对于基本类型:

  1. 使用Stream并行API在单核情况下性能很差,比Stream串行API的性能还差;

  2. 随着使用核数的增加,Stream并行效果逐渐变好,比使用for循环外部迭代的性能还好。

以上两个测试说明,对于基本类型的简单迭代,Stream串行迭代性能更差,但多核情况下Stream迭代时性能较好。

对象迭代

接下来我们再来看对象的迭代效果。

测试内容:找出字符串列表中最小的元素(自然顺序),对比for循环外部迭代和Stream API内部迭代性能。

测试程序StringTest,测试结果如下图:

结果分析如下:

  1. 对于对象类型Stream串行迭代的性能开销仍然高于外部迭代开销(1.5倍),但差距没有基本类型那么大。

  2. Stream并行迭代的性能比串行迭代和外部迭代都好。

再来单独考察Stream并行迭代效果:

分析,对于对象类型:

  1. 使用Stream并行API在单核情况下性能比for循环外部迭代差;

  2. 随着使用核数的增加,Stream并行效果逐渐变好,多核带来的效果明显。

以上两个测试说明,对于对象类型的简单迭代,Stream串行迭代性能更差,但多核情况下Stream迭代时性能较好。

复杂对象归约

从实验一、二的结果来看,Stream串行执行的效果都比外部迭代差(很多),是不是说明Stream真的不行了?先别下结论,我们再来考察一下更复杂的操作。

测试内容:给定订单列表,统计每个用户的总交易额。对比使用外部迭代手动实现和Stream API之间的性能。

我们将订单简化为 <userName,price,timeStamp>构成的元组,并用 Order对象来表示。测试程序ReductionTest,测试结果如下图:

分析,对于复杂的归约操作:

  1. Stream API的性能普遍好于外部手动迭代,并行Stream效果更佳;

再来考察并行度对并行效果的影响,测试结果如下:

分析,对于复杂的归约操作:

  1. 使用Stream并行归约在单核情况下性能比串行归约以及手动归约都要差,简单说就是最差的;

  2. 随着使用核数的增加,Stream并行效果逐渐变好,多核带来的效果明显。

以上两个实验说明,对于复杂的归约操作,Stream串行归约效果好于手动归约,在多核情况下,并行归约效果更佳。我们有理由相信,对于其他复杂的操作,Stream API也能表现出相似的性能表现。

结论

上述三个实验的结果可以总结如下:

  1. 对于简单操作,比如最简单的遍历,Stream串行API性能明显差于显示迭代,但并行的Stream API能够发挥多核特性。

  2. 对于复杂操作,Stream串行API性能可以和手动实现的效果匹敌,在并行执行时Stream API效果远超手动实现。

所以,如果出于性能考虑,

  1. 对于简单操作推荐使用外部迭代手动实现

  2. 对于复杂操作,推荐使用Stream API,

  3. 在多核情况下,推荐使用并行Stream API来发挥多核优势

  4. 单核情况下不建议使用并行Stream API

如果出于代码简洁性考虑,使用Stream API能够写出更短的代码。即使是从性能方面说,尽可能的使用Stream API也另外一个优势,那就是只要Java Stream类库做了升级优化,代码不用做任何修改就能享受到升级带来的好处。

欢迎在留言区留下你的观点,一起讨论提高。如果今天的文章让你有新的启发,学习能力的提升上有新的认识,欢迎转发分享给更多人。

欢迎各位读者加入程序员小乐技术群,在公众号后台回复“加群”或者“学习”即可。

猜你还想看

阿里、腾讯、百度、华为、京东最新面试题汇集

分库分表就能无限扩容吗?这个解释得太完美了!

Spring Boot & Restful API 构建实战

Redis的内存淘汰策略,看了都说好!

关注「程序员小乐」,收看更多精彩内容
嘿,你在看吗
ROS2 Humble + TurtleBot4仿真环境搭建与避坑实战 本文详细介绍了ROS2 Humble与TurtleBot4仿真环境的搭建与避坑实战,包括环境配置、依赖安装、仿真调试和性能优化等关键步骤。通过保姆级教程和实用技巧,帮助开发者快速搭建稳定的机器人仿真环境,提升开发效率。特别推荐使用Ubuntu 22.04原生系统以避免常见问题。 阅读详情

相关推荐

继电器管理策略(二)

介绍了电池管理系统中的继电器管理,包含控制和诊断

manjixingkong1234的专栏 389

Java Stream API性能测试

已经对Stream API的用鼓吹够多了,用起简洁直观,但性能到底怎么样呢?会不会有很高的性能损失?本节我们对Stream API的性能一探究竟。 为保证测试结果真实可信,我们将JVM运行在-server模式下,测试数据在GB量级,测试机器采用常见的商用服务器,配置如下: OSCentOS 6.7 x86_64CPUIntel Xeon X5675, 12M Cache 3.06 GHz, 6 ...

weixin_30276935的博客 659

MasterPDFEditor PDF 修改器 验证可用

MasterPDFEditor PDF 修改器 验证可用,自己整理的教程,希望对大家有帮助

Lambda 表达式带来的复杂性的破解之道

一、背景 几年前和多人会提 “Java 8 的新特性”,现在 Java 8 几乎成了标配。 曾经很多人抵触 Lambda 表达式,现在几乎也成了标配。 实际开发中最常见的是,很多人使用 Stream 来处理集合类。 二、看 对于 Lambda 表达式或者 Stream 的看不尽一致。 2.1 支持 使用 Lambda 表达式可以减少类或者方的常见。 使用 Stream 可以享受链式编程的乐趣。 有些人看别人都在用,似乎有些高端,或者担心自己被淘汰也跟着大量使用。 2.2 反对 有些人对 lambda

悟鸣的技术博客 3210

Stream流使用及性能

stream流操作是Java 8提供一个重要新特性,它允许开发人员以声明性方式处理集合,其核心类库主要改进了对集合类的 API和新增Stream操作。Stream类中每一个方都对应集合上的一种操作。将真正的函数式编程引入到Java中,能 让代码更加简洁,极大地简化了集合的处理操作,提高了开发的效率和生产力。

ZzZzZzZ2h的博客 1898

剖析Stream性能

Stream随着java 8的出现开始被广泛使用,但是在使用前,请先熟悉它,请不要滥用它。

IT三明治的专栏 2186

Java8 中用优雅Stream 性能"优雅"吗?

之前的文章中我们介绍了Java 8Stream相关的API,我们提到Stream API可以极大提高Java程序员的生产力,让程序员写出高效率、干净、简洁的代码。 那么,Stream API的性能到底如何呢,代码整洁的背后是否意味着性能的损耗呢?本文我们对Stream API的性能一探究竟。 为保证测试结果真实可信,我们将JVM运行在-server模式下,测试数据在GB量级,测试机器采用...

勇往直前的专栏 1082

Java8 中用优雅Stream性能也““优雅““吗?

本文详细介绍了Stream流水线的组织方式和执行过程,学习本文将有助于理解原理并写出正确的Stream代码,同时打消你对Stream API效率方面的顾虑。如你所见,Stream API实现如此巧妙,即使我们使用外部迭代手动编写等价代码,也未必更加高效。

m0_71777195的博客 469

Java8 中用优雅Stream性能""优雅""吗?

作者:CarpenterLeegithub.com/CarpenterLee/JavaLambdaInternals我们已经学会如何使用Stream API,用起来真的很爽,但简洁的方...

码农code之路 378

讲透JAVA Stream的collect用与原理,远比你想象的更强大

前面我们演示了很多Collectors工具类中提供的收集器的用,上一节中列出来的Collectors提供的常用收集器,也可以覆盖大部分场景的开发诉求了。但也许在项目中,我们会遇到一些定制化的场景,现有的收集器无满足我们的诉求,这个时候,我们也可以自己来实现定制化的收集器。我们知道,所谓的收集器,其实就是一个Collector接口的具体实现类。所以如果想要定制自己的收集器,首先要先了解Collector接口到底有哪些方需要我们去实现,以及各个方的作用与用途。当我们新建一个5个接口接口名称。...

是Vzn呀 4137

内存测试Stream程序分析(一)--基本参数

Stream测试是内存测试中业界公认的内存带宽性能测试基准工具。作为一个服务器工程师在衡量和评比服务器的性能时,该如何从简单的一个源码使之编译成适合自己的可用的测试工具呢?让我们一起来学习这个基本过程吧。 首先我们看一下Linux下最简单的编译过程: 点击(此处)折叠或打开 gcc -O stream.c -o stream.o 上述的编译使用了程序和编

码农崛起 1万+

Java8Stream API 的确牛X,但性能究竟如何呢?

互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取!

2401_84046677的博客 654

Java Stream流使用及性能分析

Java Stream流 一、Stream简介 1、什么是Stream? Java8 中,Collection 新增了两个流方,分别是 Stream() 和 parallelStream() Java8 中添加了一个新的接口类 Stream相当于高级版的 Iterator,它可以通过 Lambda 表达式对集合进行大批量数据操作,或 者各种非常便利、高效的聚合数据操作。 2、为什么要使用Stream?Java8 之前,我们通常是通过 for 循环或者 Iterator 迭代来重新排序合并

weixin_46822367的博客 8835

JDK8 Stream 数据流效率分析

至此,文章终于到了尾声。技术能力:先写岗位所需能力,再写加分能力,不要写无关能力;项目经历:只写明星项目,描述遵循 STAR 则;简历印象:简历遵循三大原则:清晰,简短,必要,要有的放矢,不要海投;以及最后为大家准备的福利时间:简历模板+Java面试题+热门技术系列教程视频《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》点击传送门即可获取!R 则;3. 简历印象:简历遵循三大原则:清晰,简短,必要,要有的放矢,不要海投;

2401_84009929的博客 802
上一篇: 滴滴程序员年薪80万却被亲戚鄙视:钱多有啥用,我儿子二本大学教师
下一篇: 5个小技巧让你写出更好的 JavaScript 条件语句
吧主
博客等级 码龄12年 1242粉丝 116原创
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值