1. 任务需求
很多情况下我们处理数据时,因为数据比较多,所以需要浪费很多时间,而如果我们用的是服务器的话,那么cpu的线程数一般比较高,所以我们可以开启多个线程同时工作,可以加快我们的处理速度。
2. 简单例子
现在我们来看一个简单例子,看看怎么使用python的进程池。
首先就是导入进程池的包:
from multiprocessing import Pool
然后我们需要将我们需要处理的事情封装成一个函数,这里处理一个简单的任务:
def multi_pool_test(i):
return (i+1)*10
然后就可以直接程序化:
pool = Pool(processes=3) # processes为开启的线程数
results = []
for i in range(100):
print (i)
result = pool.apply_async(multi_pool_test,(i,))
results.append(result)
pool.close()
pool.join()
results = [result.get() for result in results] #.get读取结果
print (results)


2184

被折叠的 条评论
为什么被折叠?



