IT数码 购物 网址 头条 软件 日历 阅读 图书馆
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
图片批量下载器
↓批量下载图片,美女图库↓
图片自动播放器
↓图片自动播放器↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁
 
   -> 数据结构与算法 -> 使用JProfile进行优化笛卡尔乘积运算,提高性能 -> 正文阅读

[数据结构与算法]使用JProfile进行优化笛卡尔乘积运算,提高性能

利用JProfile优化笛卡尔乘积运算,提高性能

项目场景

项目需要对嵌套的集合进行笛卡尔乘积运算,具体要求为:给定一个嵌套的集合 S 1 = [ S 1 1 , S 1 2 , . . . , S 1 k ] S1=[S1_1,S1_2,...,S1_k] S1=[S11?,S12?,...,S1k?],其中 S 1 i S1_i S1i?是由单元素构成的集合,另一个集合 S 2 S2 S2也是由单元素构成的,需要实现集合 S 1 S1 S1 S 2 S2 S2的笛卡尔乘积。代码实现原本为:

请添加图片描述

大致思路是使用双层循环,这里cur代表上述的 S 1 S1 S1,next代表上述 S 2 S2 S2temp代表 S 1 i S1_i S1i?,内层循环每次取next中一个元素,加到外层循环下的temp中,由于需要保证内层每次循环操作中拿到的temp都需要保持一致,因此需要通过对lcs进行深拷贝获取temp,这里采用的是new HashSet<>(lcs)的方式,更新temp后需要根据业务对结果做一个过滤,最后将结果保存到res集合中。

问题描述

实际运行过程中,结果没有问题,但是运行速度十分慢,一次运行过程的时间记录如下:

请添加图片描述

可以看到,在迭代收敛前有若干次运行时间都在几十秒甚至100多秒,更大的数据集下,观测到的一次运行结果里,第10次迭代更是达到了2000+s,且出现了内存不足,最后被强制终止。

问题分析

由于整个代码比较复杂,在解决bug之前,并没有意识到是上述代码出问题,最后是借助Java程序性能分析工具JProfile,检查运行时各函数调用的时间、空间开销,得到如下结果:

请添加图片描述

可以看到上述函数过程是程序运行的性能瓶颈所在,开销占比高达74.3%,因此需要对上述程序进行分析重构。分析可知,上述嵌套集合的笛卡尔乘积操作,由两个集合最终生成 K ? ∣ S 2 ∣ K*|S2| K?S2个的新集合,会有大量的集合创建和更新操作,分别对应由lcs深拷贝生成temp和往temp里添加一个元素,最后过滤,将满足条件的结果添加到res

由于HashSet的底层数据结构是哈希表,需要为添加的元素计算哈希索引以保证唯一性,而此处其实只需要复制一份lcs里的元素,防止后续修改影响到lcs的内容,不需要额外的唯一性约束,完全可以用更简单的集合来拷贝,比如ArrayList,在添加新元素时,ArrayList的复杂度虽然大于HashSet,但是此处只有一次操作,影响较小。但此处用list来保存更新的结果可能违反集合元素唯一性的要求,需要对结果再次去重,考虑到后续有过滤操作,完全可以把去重操作延迟,对满足过滤条件的结果再去重,尽量减少不必要的操作。最后得到的代码如下:

请添加图片描述

运行结果

代码优化后,再次运行上述例子,运行时间减少了近90%,实现了性能优化!

请添加图片描述

  数据结构与算法 最新文章
【力扣106】 从中序与后续遍历序列构造二叉
leetcode 322 零钱兑换
哈希的应用:海量数据处理
动态规划|最短Hamilton路径
华为机试_HJ41 称砝码【中等】【menset】【
【C与数据结构】——寒假提高每日练习Day1
基础算法——堆排序
2023王道数据结构线性表--单链表课后习题部
LeetCode 之 反转链表的一部分
【题解】lintcode必刷50题<有效的括号序列
上一篇文章      下一篇文章      查看所有文章
加:2021-11-27 10:09:33  更:2021-11-27 10:10:51 
 
开发: C++知识库 Java知识库 JavaScript Python PHP知识库 人工智能 区块链 大数据 移动开发 嵌入式 开发工具 数据结构与算法 开发测试 游戏开发 网络协议 系统运维
教程: HTML教程 CSS教程 JavaScript教程 Go语言教程 JQuery教程 VUE教程 VUE3教程 Bootstrap教程 SQL数据库教程 C语言教程 C++教程 Java教程 Python教程 Python3教程 C#教程
数码: 电脑 笔记本 显卡 显示器 固态硬盘 硬盘 耳机 手机 iphone vivo oppo 小米 华为 单反 装机 图拉丁

360图书馆 购物 三丰科技 阅读网 日历 万年历 2024年11日历 -2024/11/27 16:40:09-

图片自动播放器
↓图片自动播放器↓
TxT小说阅读器
↓语音阅读,小说下载,古典文学↓
一键清除垃圾
↓轻轻一点,清除系统垃圾↓
图片批量下载器
↓批量下载图片,美女图库↓
  网站联系: qq:121756557 email:121756557@qq.com  IT数码