python线程池的实现实例

来源：懂视网责编：小采时间：2020-11-27 14:29:47

python线程池的实现实例

python线程池的实现实例:直接上代码：代码如下:# -*- coding: utf-8 -*- import Queue import threadingimport urllibimport urllib2import os def down(url,n): print 'item '+str(n)+' start ' filename=urllib2.unquote(

推荐度：

点击下载本文 文档为doc格式

导读python线程池的实现实例:直接上代码：代码如下:# -*- coding: utf-8 -*- import Queue import threadingimport urllibimport urllib2import os def down(url,n): print 'item '+str(n)+' start ' filename=urllib2.unquote(

直接上代码：
代码如下:

# -*- coding: utf-8 -*-
import Queue
import threading
import urllib
import urllib2
import os

def down(url,n):
print 'item '+str(n)+' start '
filename=urllib2.unquote(url).decode('utf8').split('/')[-1]
urllib.urlretrieve(url, filename)
print 'item '+str(n)+' finish '

def worker():
while True:
i = q.get()
url=i[0]
n=i[1]
down(url,n)
q.task_done()

if __name__=="__main__":

num_worker_threads=100

f=open('url.txt')
l=f.readlines()
q = Queue.Queue()
for i in range(num_worker_threads):
t = threading.Thread(target=worker)
t.daemon = True
t.start()

for i in range(0,len(l)):
q.put((l[i],i))

q.join()