900字范文,内容丰富有趣,生活中的好帮手!
900字范文 > 多线程查询数据库 – java – 前端

多线程查询数据库 – java – 前端

时间:2018-12-05 01:39:37

相关推荐

多线程查询数据库 – java – 前端

Excel文件中的记录比较多的话,要考虑使用多线程。可以考虑使用多线程设计模式中的Producer-Consumer模式。首先,专门开辟一个线程(一个够用,多了无益,以下称之为Reader线程),该线程负责读取Excel文件中的记录。比如使用第三方工具POI,此时读取到的Excel记录是一个Java对象。该线程每次读取到记录都将其存入队列(如ArrayBlockingQueue)。它仅负责读取记录并将其存入队列,其它的事情它不做。其次,再设置若干个线程(如果一个够用,就一个。数量最好不要超过系统的CPU个数,以下称为Processor线程),这些线程负责从上述队列中取出记录(对象),然后对记录中的数据进行校验,写入数据库(这里偶假设导入的目标是数据库,你的问题中并没有说明导入目标是什么)。最后,Reader线程读取完所以记录之后,要“通知”Processor线程:等你处理完所有记录后,你可以停止了。这点,可以借助多线程设计模式中的Two-phase Termination模式来实现。其主要思想是为要停止的线程(目标线程,这里就是Processor线程)设置一个停止标志,并设置一个表示目标线程的工作任务数(这里值有多少条记录需要它处理)的变量。当目标线程侦测到其待处理的任务数为0,且线程停止标志已置为true的情况下,该线程就可以停止了。Two-phase Termination模式参考这里:Java多线程编程模式实战指南(三):Two-phase Termination模式。更详细的,可以参考偶的新书。最后,相应注意“产品”的粒度。即Reader线程往队列(传输通道)中存入的“产品”是个什么对象,是一条Excel记录,还是多条Excel记录?一般为了减少“产品”在队列中的移动次数(以减少相应开销)要适当将“产品”的粒度设置粗一些。例如,创建一个“容器型”对象用来存储多条记录。

本内容不代表本网观点和政治立场,如有侵犯你的权益请联系我们处理。
网友评论
网友评论仅供其表达个人看法,并不表明网站立场。