使用urllib2.urlopen（）加载一个URL而不等待回复

Question

我只是想发送请求，但不想浪费时间等待响应。因为这些回复对我来说毫无用处。 我抬头看python文档，但没有找到解决方案。 感谢您的任何建议。 我试图使用 urllib2.urlopen(url, timeout=0.02) 但我不能确定请求是否实际发出。

Answer 1

这被称为异步加载，这里是一个blog post explaining how to do it with urllib2。示例代码：

#!/usr/bin/env python 

import urllib2 
import threading 

class MyHandler(urllib2.HTTPHandler): 
    def http_response(self, req, response): 
     print "url: %s" % (response.geturl(),) 
     print "info: %s" % (response.info(),) 
     for l in response: 
      print l 
     return response 

o = urllib2.build_opener(MyHandler()) 
t = threading.Thread(target=o.open, args=('http://www.google.com/',)) 
t.start() 
print "I'm asynchronous!" 

这将加载URL而不等待响应。

Answer 2

实现异步函数调用的最简单方法是在其自己的线程或子进程中使用可调用函数。

http://docs.python.org/library/threading.html#threading.Thread
http://docs.python.org/library/multiprocessing.html#multiprocessing.Process

似乎有HTTP库用于Python已经实现然而这样的功能，如grequests或requests-futures（二者均基于所述requests库，在超过urllib2的改进API术语）。