java 线程池 资源回收_JAVA线程池资源回收的问题

最近项目中为了提高用户体验度,前台创建任务后台任务,用多线程来跑。

现在的场景:后台定时任务管理这两个线程池,一个最大线程数10个,一个最大线程数15。应用部署之后,不超过5个小时,服务器负载高,内存使用过多。

分析原因:因为这个功能是excel导入功能,如果前台有大量的导入任务时,那么后台的负载就会很高。

我的实现原理:定时任务读取任务,放到任务队列表中,然后使用线程池消费任务队列中的任务,每个线程时一直循环取任务。

我的定时任务周期是 1 分钟,线程池从初始化时,空闲线程存活的时间为 1 分钟,任务队列没有设定最大数量值。

优化:

1.任务队列没有上限

定时任务每次启动都回去数据库中读取任务,放入对列表中,如果一直往任务队列中放,那么任务队列占用的内存会越来越大,导致服务器内存不足。

解决办法:定时任务在读取任务时,先判断任务队列的大小,比如我这设置的100个,那么我就不再读取新的任务了。这个参数需要通过观察机器的负载,然后来调整。

2.线程池中的线程,无限循环处理任务,当任务数量过多的时候,线程会一直执行,停不下来。

线程池中的线程,无限循环处理任务,当任务数量过多的时候,线程会一直执行,停不下来。

解决办法:在线程内部设置计数器,当一个线程累计到一定数量,退出循环,然后清空资源,回收,间歇性,周期的执行任务,相当于定期回收资源

3.定时任务 1 分钟,那么空闲线程存活的时间为1分钟

由于空闲线程存活时间是 1 分钟,那么我的定时任务也是 1 分钟,这个时候,线程就基本就不会被线程池回收,那么资源就一直没有释放,被回收。

解决办法:调整线程空闲的线程存活时间为定时任务周期的一半,也就是30秒。

4.在线程池中,有核心线程,对于核心线程超时也回收,所以,需要执行下边这个方法,确保核心线程超时之后也被回收。

解决办法:threadPoolExecutor.allowCoreThreadTimeOut(true);

优化之后的流程:

任务定期读取任务,往任务队列中放一定量(不能超过最大值)的任务,之后线程池中的线程超时时间设置短一点,线程通过计数器,当执行了一定数量的线程之后,推出循环,这个时候线程就空闲了,后边就会被线程池回收,资源被回收,如此反复进行下去,资源回收,重新分配,不会大量消耗服务资源。

通过以上几个点的优化,程序消耗服务器资源好很多,可能还有优化的地方,后边再补充。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/500236.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

java 常量表达式_JavaSwitch语句:常量表达式是必需的,但它是常量

万千封印我知道编译器需要在编译时知道表达式才能编译一个开关,但是为什么foo.ba_常数不是呢?虽然从字段初始化后执行的任何代码的角度来看,它们都是常量,但它们不是编译时间常数在JLS所要求的意义上;见15.28常量表达式…

java post请求返回500错误信息_Retrofit API Post call 返回错误 500,适用于 Postman

我正在尝试使用改进 2 使用其他 API,我已经能够使用一些端点,但注册端点不断返回 http 500 错误代码,但在使用邮递员测试时工作正常。 POST("auth/signup/") Call addUser(Body SignUpCreds signUpCreds);这是注册凭据public class…

java 抽样_beta分布的采样或抽样(java程序)

beta分布的采样或抽样(java程序)标签:#beta分布采样#时间:2017/05/12 15:47:04作者:十七岁的雨季关于beta分布的介绍,请看我的另外一篇博客:http://blog.csdn.net/qy20115549/article/details/53307535本篇文章的另外地址为&#…

DP读书:《openEuler操作系统》(六)文件系统

10min速通文件系统 文件系统概述硬件基础磁盘和磁盘驱动器磁盘读写操作数据传输控制 文件系统中的基本概念文件目录文件系统 尽管内存的访问速度很快,但因其容量十分的有限,而且一旦断电,保存其中的数据就会丢失。用户希望数据保存的更大并且…

java web 开发技术大全 代码_Java Web开发技术大全

资深程序员全力打造,深入剖析SSH框架整合开发的精髓 全方位解读Java Web开发的基础知识、高级技术及应用案例 内容全面,讲解详细,全面覆盖JSP、Se rvlet、AJAX及SSH框架整合开发 避免冗长的理论讲解,而是直击主题,通过…

java nio doug_深入的聊聊 Java NIO

趁着三天假期,把Java NIO和Reactor模式整理总结了下,文章特别细节的知识点没有写,如一些API的具体实现。类似数据读到Buffer后再写出时,为什么需要复位操作,这些都属于NIO基础知识,是学习Reactor模式的前置…

java clone原理_详解Java中的clone方法 -- 原型模式

Java中对象的创建clone顾名思义就是复制, 在Java语言中, clone方法被对象调用,所以会复制对象。所谓的复制对象,首先要分配一个和源对象同样大小的空间,在这个空间中创建一个新的对象。那么在java语言中,有…

portal认证 java_华为5700交换机通过外部开源protal和本地aaa用户认证的一些问题

各位:您好,我通过一台华为5700交换机和一台portal服务器,想利用交换机本地的aaa认证,完成用户的上网认证。配置好后,用户可以重地向到portal页面,但是认证不能通过,具体配置如下:一、…

java复制一个对象_Java中对象的复制

假如说你想复制一个简单变量。很简单:1 int n 5;2 int m n;不仅仅是int类型,其它七种原始数据类型(boolean,char,byte,short,float,double.long)同样适用于该类情况。但是如果你复制的是一个对象,情况就有些复杂了。假设说我是一个beginner&#xff0c…

python判断是不是整数1002python判断是不是整数_Python判断一个数是不是为整数的方法...

Python判断一个数是不是为整数的方法发布时间:2020-07-08 15:44:30来源:亿速云阅读:84作者:清晨不懂Python判断一个数是不是为整数的方法?其实想解决这个问题也不难,下面让小编带着大家一起学习怎么去解决&…

spriteatlas 白屏的问题_Discuz白屏问题解决思

说到白屏,大家可能最先想到的就是dedecms了。Dedecms的白屏问题确实多,但是今天学习部小编要给大家介绍的是另一个大家耳熟能详的程序:discuz。说到discuz白屏,不少朋友感到非常头疼。为什么呢?Dz白屏的原因千奇百怪&a…

aix 超过一天的文件_Aix 6.1下 /dev/null 21 文件过大导致根目录爆满

原因:这是Aix6107系统下cas_agent软件的一个bug,原因是脚本写错了排查过程:1. 查看是哪个文件夹或哪个文件过大du -axg /|sort -rn|headls -ltr /dev/null*发现是 /dev/null 2>&1 过大,/dev只是存设备用的文件夹,文件都很…

HA集群实现原理 切换 JAVA_HA(一)高可用集群原理

高可用集群原理LVS集群DR模式简单的架构图如下所示:在上图的架构中,当Director服务器因软件、硬件、人为原因造成故障时,整个集群服务不可用,因此,需要再添加一台服务器实现Director服务高可用。整个系统的架构图如下所…

c语言指针没学可以学java_这是一篇来自刚脱离C语言的菜鸟所写下来的关于C语言之后转JAVA入门前期学习的感想...

/***My First writing*Name Li Tai Yue*Date 2018.12.14*/这是一篇来自刚脱离C语言的菜鸟所写下来的关于C语言之后转JAVA入门前期学习的感想。并且我也觉得这是一篇所有在校学习程序的小伙伴值得一看的文章。我想很多小伙帮都觉得敲代码是一件非常枯燥的事情,每天敲…

java outofmemory 处理_java.lang.OutOfMemoryError处理错误

原因: 常见的有以下几种:1.内存中加载的数据量过于庞大,如一次从数据库取出过多数据;2.集合类中有对对象的引用,使用完后未清空,使得JVM不能回收;3.代码中存在死循环或循环产生过多重复的对象实…

java queue 实现类 区别_Java集合11 (Queue)

java.util.Queue接口是java.util.Collection子接口。它代表一个有序的对象列表,就像List一样,但是它的使用有略微的区别。Queue被设计成从末端插入并且从头部删除的形式。Queue的实现类java.util.LinkedListjava.util.PriorityQueueLinkedList是一个非常…

实验四Java_《Java实验四》

实验4--附录三代码/*问题如下:编译如下代码,分析结果;将“注释这行”所在的行注释,再将注释的call2方法和main方法中的“StaticTest.call2(obj);”方去掉注释,再次编译,观察结果分析其原因。回答如下&#…

java是值调用_Java 只有值调用

在计算机科学中,参数传递的形式主要有以下2种: 值调用和引用调用,为了说明Java在传参过程中的参数传递方式,我们首先需要对上述中2种调用形式的定义做清晰的介绍定义现给出两者的定义:值调用(Call by Value): 指函数接收的是调用者提供的实参变量的值引用…

java 如何将数字倒置_每日一个小算法之整数中每位上的数字进行反转 20190810

题目要求:给出一个32位的有符号整数,你需要将这个整数中每位上的数字进行反转。示例 1:输入: 123输出: 321示例 2:输入: -123输出: -321示例 3:输入: 120输出: 21示例 4:输入:9646324351输出: 0注意:假设我们的环境只能存储得下 3…

mysql 投票总排行_MySQL投票表,查找每个用户对条目的最新投票,并根据值进行计数...

[编辑:]我添加了值(1052,10,3,1290839091,1)以更好地解决问题,并且必须将“item_id”添加到提取最新投票的子查询中.好极了!最后一个stackoverflow问题,我实际上可以回答!我已经浏览了一个星期寻找短暂的东西;甜蜜的我的胡同.感谢有趣的SQL问…