异步线程池的实现(一)-------具体实现方法

摘要:
还有一个关于线程池的摘要。所以我开始使用异步线程池来解决这个问题。下面是使用线程池的方法。此函数的主要功能是启动线程池。然后,让我们开始第二步,用队列建立线程池。对于线程池,实际代码如何将请求放入其中并等待执行。因此,有两类。一个负责调用业务代码并将请求插入队列,另一个负责单个线程的实现类。

本篇是这个内容的第一篇,主要是写:遇到的问题,和自己摸索实现的方法。后面还会有一篇是总结性地写线程池的相关内容(偏理论的)。

一、背景介绍

    朋友的项目开发到一定程度之后,又遇到了一些问题:在某些流程中的一些节点,由于是串联执行的。上一步要等下一步执行完毕;或者提交数据之后要等待后台其他系统处理完成之后,才能返回结果。这样就会导致,请求发起方不得不一直等待结果,用户体验很不好;从项目优化来说,模块与模块之间构成了强耦合,这也是不利于以后扩展的,更不用说访问量上来之后,肯定会抓瞎的问题。所以,我就着手开始,利用异步线程池来解决这个问题。

    刚开始的时候,我准备只是在节点处另外起线程去执行异步操作。但是,考虑到以后的扩展,同时利用“池化”技术,更加高效地重复利用线程,节省资源。在这里就选定了,使用线程池的方法。

二、实现步骤

     实现总共分为四步:

第一步,在启动服务的时候初始化线程池;

第二步,建立有队列的线程池;

第三步,将业务逻辑方法与线程池联系起来;

第四步,调整原有代码逻辑结构,将可以异步的操作放入第三步的业务逻辑方法,并将请求放入线程池的队列中,等待执行。

三、具体实现

首先,第一步我们在web项目的起源之处web.xml中加入这么一行

1 <listener>
2 
3                    <listener-class>com.jptec.kevin.thread.listener.InitThreadPoolListener</listener-class>
4 
5 </listener>

这里的路径实际上就是,在启动项目之后,会加载的初始化函数。这个函数主要的作用就是:将线程池启动起来。实现代码如下:

异步线程池的实现(一)-------具体实现方法第1张

 1 public class InitThreadPoolListener implements ServletContextListener {
 2 
 3     @Override
 4     public void contextInitialized(ServletContextEvent sce) {
 5 
 6         new TestThreadPool().runThread();
 7     }
 8 
 9     @Override
10     public void contextDestroyed(ServletContextEvent sce) {
11     }
12 
13 }

好了,第一步就算完工了。

    然后,我们开始第二步,建立有队列的线程池(这里有很多,理论上的内容,会放在第二篇中详细说)。在这里主要是,定义了一个ArrayBlockingQueue队列(先进先出,有限阻塞),使用Executor定义了一个线程池。具体代码如下:

 1 public class TestThreadPool {
 2 
 3     protected final static Logger log = LoggerFactory.getLogger(TestThreadPool.class);
 4 
 5     // 线程休眠时间(秒)
 6     // 存放需要发送的信息
 7     public static BlockingQueue<Runnable> addressBqueue = new ArrayBlockingQueue<Runnable>(
 8                 10000);
 9         
10     public static final ThreadPoolExecutor executor = new ThreadPoolExecutor(10, 200, 25, TimeUnit.SECONDS,
11             addressBqueue);
12 
13     public TestThreadPool() {
14     }
15     
16 
17     public void runThread() {
18 
19         try {
20             executor.prestartCoreThread();
21             log.info("队列大小:" + executor.getQueue().size());
22 
23         } catch (Exception e) {
24             log.error("启动子线程异常", e);
25         }
26 
27     }
28 
29 }

    完成第二步之后,我们继续第三步。我们有了线程池,那么实际代码如何将请求放入其中,并等待执行呢。于是,这里分为两个类,一个是负责业务代码中调用的,负责向队列中插入请求,一个是单个线程的实现类。具体实现如下:

插入请求实现:

 1 /**
 2  * 线程队列
 3  */
 4 public class TestQueue {
 5     protected final static Logger log = LoggerFactory.getLogger(TestQueue.class);
 6 
 7     public static boolean put(String userId,String tradeId, String amount, String flag, String term) {
 8             log.debug("添加入队列开始... 额度申请用户tradeId=[{}]", tradeId);
 9             try {
10                 TestThreadPool.executor.execute(new TestThread( tradeId, amount,  flag, term, userId));
11             log.debug("添加入队列结束...");
12         } catch (Exception e) {
13             log.error("添加入队列异常...", e);
14             return false;
15         }
16         return true;
17     }
18 
19 }

单个线程实现(第八行的引用在下文细说):

 1 /**
 2  * 发送信息线程处理类
 3  */
 4 public class TestThread implements Runnable {
 5 
 6     protected final static Logger log = LoggerFactory.getLogger(TestThread.class);
 7 
 8     private TradeService tradeService = (TradeService) SpringHandle.getBean("tradeService");
 9 
10     String tradeId;
11     String amount;
12     String flag;
13     String term;
14     String userId;
18     /** 
19      * <p>Title: </p>
20      * <p>Description: </p>
21      * @param tradeId
22      * @param amount
23      * @param flag
24      * @param term
25      * @param userId 
26      */ 
28     public TestThread(String tradeId, String amount, String flag, String term,
29             String userId) {
30         super();
31         this.tradeId = tradeId;
32         this.amount = amount;
33         this.flag = flag;
34         this.term = term;
35         this.userId = userId;
36     }
38     @Override
39     public void run() {
40         log.info("线程开始tradeId={}", tradeId);
41         log.info("线程名:={}", Thread.currentThread().getId());
42         log.info("队列大小:" + TestThreadPool.executor.getPoolSize() + ","
43                 + TestThreadPool.executor.getCompletedTaskCount());
44         putTradeConfirm(userId,tradeId, amount, flag, term);
45         try {
46             Thread.sleep(1000L);
47         } catch (InterruptedException e) {
48             e.printStackTrace();
49         }
50     }
52     private void putTradeConfirm(String userId,String tradeId, String amount, String flag, String term) {
53 
54         tradeService.getMatchFundInfo(userId,amount, tradeId, flag, term);
56     }
58 }

这里需要注意的是,我需要获得一个Service的实例来调用具体的方法。但是,注释的方法不起作用,于是在朋友的帮助下,使用了辅助类。具体实现如下:

 1 @Component
 2 public final class SpringHandle implements BeanFactoryPostProcessor {
 3 
 4     private static ConfigurableListableBeanFactory beanFactory; // Spring应用上下文环境
 5 
 6     public void postProcessBeanFactory(ConfigurableListableBeanFactory beanFactory) throws BeansException {
 7         SpringHandle.beanFactory = beanFactory;
 8     }
 9 
10     /**
11      * 获取对象
12      * 
13      * @param name
14      * @return Object 一个以所给名字注册的bean的实例
15      * @throws org.springframework.beans.BeansException
16      * 
17      */
18     @SuppressWarnings("unchecked")
19     public static <T> T getBean(String name) throws BeansException {
20         return (T) beanFactory.getBean(name);
21     }
22 
23     /**
24      * 获取类型为requiredType的对象
25      * 
26      * @param clz
27      * @return
28      * @throws org.springframework.beans.BeansException
29      * 
30      */
31     public static <T> T getBean(Class<T> clz) throws BeansException {
32         T result = (T) beanFactory.getBean(clz);
33         return result;
34     }
35 
36     /**
37      * 如果BeanFactory包含一个与所给名称匹配的bean定义,则返回true
38      * 
39      * @param name
40      * @return boolean
41      */
42     public static boolean containsBean(String name) {
43         return beanFactory.containsBean(name);
44     }
45 
46     /**
47      * 判断以给定名字注册的bean定义是一个singleton还是一个prototype。
48      * 如果与给定名字相应的bean定义没有被找到,将会抛出一个异常(NoSuchBeanDefinitionException)
49      * 
50      * @param name
51      * @return boolean
52      * @throws org.springframework.beans.factory.NoSuchBeanDefinitionException
53      * 
54      */
55     public static boolean isSingleton(String name) throws NoSuchBeanDefinitionException {
56         return beanFactory.isSingleton(name);
57     }
58 
59     /**
60      * @param name
61      * @return Class 注册对象的类型
62      * @throws org.springframework.beans.factory.NoSuchBeanDefinitionException
63      * 
64      */
65     public static Class<?> getType(String name) throws NoSuchBeanDefinitionException {
66         return beanFactory.getType(name);
67     }
68 
69     /**
70      * 如果给定的bean名字在bean定义中有别名,则返回这些别名
71      * 
72      * @param name
73      * @return
74      * @throws org.springframework.beans.factory.NoSuchBeanDefinitionException
75      * 
76      */
77     public static String[] getAliases(String name) throws NoSuchBeanDefinitionException {
78         return beanFactory.getAliases(name);
79     }
80 
81 }

  最后,在具体业务逻辑中,调用插入请求的方法,即可。

TradeGetFundInfoQueue.put(userId, tradeId, quota, repaymentType, timeLimit);

四、测试函数

由于在项目中,所以我写了另外一个测试函数(这个测试函数,会在下一篇文章中再次遇到),放在这里。供大家参考:

 1 public class TestThreadPool {
 2 
 3     public static BlockingQueue<Runnable> queue = new  ArrayBlockingQueue<Runnable>(
 4             10000);
 5  
 6     public static void main(String[] args) {
 7         for (int i = 0; i < 2; i++) {
 8             queue.add(new TestThread("初始化"));
 9         }
10  
11         final ThreadPoolExecutor executor = new ThreadPoolExecutor(1, 3, 15, TimeUnit.SECONDS, queue);
12 
13         executor.prestartCoreThread();
14 
15  
16         new Thread(new Runnable() {
17             @Override
18             public void run() {
19                 while (true) {
20                     System.out.println("getActiveCount=" + executor.getActiveCount()
21                                     + ";getKeepAliveTime=" + executor.getKeepAliveTime(TimeUnit.SECONDS)
22                                     + ";getCompletedTaskCount=" + executor.getCompletedTaskCount()
23                                     + ";getCorePoolSize=" + executor.getCorePoolSize()
24                                     + ";getLargestPoolSize=" + executor.getLargestPoolSize()
25                                     + ";getMaximumPoolSize=" + executor.getMaximumPoolSize()
26                                     + ";getPoolSize=" + executor.getPoolSize()
27                                     + ";getTaskCount=" + executor.getTaskCount()
28                                     + ";getQueue().size()=" + executor.getQueue().size()
29                     );
30                     try {
31                         Thread.currentThread().sleep(200L);
32                     } catch (InterruptedException e) {
33                         e.printStackTrace();
34                     }
35                 }
36             }
37         }).start();
38  
39         new Thread(new Runnable() {
40             @Override
41             public void run() {
42                 int i = 0;
43                 while (true) {
44                     queue.add(new TestThread("生产者"));
45                     try {
46                         Thread.currentThread().sleep(100L);
47                     } catch (InterruptedException e) {
48                         e.printStackTrace();
49                     }
50                     i++;
51                     if (i > 100) break;
52                 }
53             }
54         }).start();
55     }
56 }
57  
58 class TestThread implements Runnable {
59     public static SimpleDateFormat sdf = new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");
60     private String name;        //创建者
61     private Date addDate;       //添加到队列的日期
62  
63     TestThread(String name) {
64         this.name = name;
65         this.addDate = new Date();
66     }
67  
68     @Override
69     public void run() {
70         System.out.println(Thread.currentThread().getName() +
71                 ":创建者=" + name + ",创建时间=" + sdf.format(addDate) + ",执行时间=" + sdf.format(new Date()) + ",当前队列大小=" + TestThreadPool.queue.size());
72  
73         System.out.println(TestThreadPool.queue.peek());
74         try {
75             Thread.currentThread().sleep(1000L);
76         } catch (InterruptedException e) {
77             e.printStackTrace();
78         }
79     }
80 }

测试的结果大致是这个样子的:

异步线程池的实现(一)-------具体实现方法第2张

最后,希望这篇文章对你有帮助,感谢朋友的帮助!

 

免责声明:文章转载自《异步线程池的实现(一)-------具体实现方法》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇Hyperledger Fabric 安装Cordova Android源代码分析系列一(项目总览和CordovaActivity分析)下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

史上最全 Java 中各种锁的介绍

什么是锁 在计算机科学中,锁(lock)或互斥(mutex)是一种同步机制,用于在有许多执行线程的环境中强制对资源的访问限制。锁旨在强制实施互斥排他、并发控制策略。      锁通常需要硬件支持才能有效实施。这种支持通常采取一个或多个原子指令的形式,如"test-and-set", "fetch-and-add" or "compare-and-swap...

多线程之旅七——GUI线程模型,消息的投递(post)与处理

基于消息的GUI构架 在过去的日子中,大部分编程语言平台的GUI构架几乎没有发生变化。虽然在细节上存在一些差异,比如在功能和编程风格上,但大部分都是采用了相同的构架来响应用户输入以及重新绘制屏幕。这种构架可以被总结为“单线程且基于消息”。   Message msg; While(GetMessage(msg)) { TranslateMess...

android入门 — 多线程(一)

  android中的一些耗时操作,例如网络请求,如果不能及时响应,就会导致主线程被阻塞,出现ANR,非常影响用户体验,所以一些耗时的操作,我们会想办法放在子线程中去完成。   android的UI操作并不是线程安全的,所以多个线程并发操作UI组件的时候,则可能导致线程安全问题。为了解决这个问题,android只允许UI线程修改UI组件。    publ...

【原创】从4个9到5个9可用性调优-总章

适用场景&适读对象场景关键词:互联网 分布式 业务集群 qps高 扛量 高可用 涉及内容:缓存调优 GC调优 隔离 上下游防护 运维优化 适读对象:资深业务开发同学,团队leader Part1.背景 之前年底线上用户端工程出了一次可用性故障,导致用户进app首页白屏,系统不可用。 具体原因是:【redis单点大热key叠加pipeline导致...

C# 多线程(lock,Monitor,Mutex,同步事件和等待句柄)

本篇从 Monitor,Mutex,ManualResetEvent,AutoResetEvent,WaitHandler 的类关系图开始,希望通过本篇的介绍能对常见的线程同步方法有一个整体的认识,而对每种方式的使用细节,适用场合不会过多解释。 让我们来看看这几个类的关系图: 1. lock 关键字 lock 是 C# 关键词,它将语句块标记为临界区,...

为什么要用Volley中的RequestFuture封装RxJava来用异步请求处理同步请求?

前几天健哥喊我研究一下RvJava,在网络请求用,更简洁更有条理,然后就会抽空研究研究,现在项目里网络库是Volley,就结合项目和网上的demo看,突然脑袋蹦出这个问题,现在看起来这个问题有一点蠢蠢的。 firstly,名词解释一下。 Volley是谷歌爸爸给咱们封装好了的网络请求库,帮我们封装了具体的请求,线程切换以及数据转换,适合短小多并发的网络请求...