获取url的内容:

try: # Try importing requests first.
    import requests
except ImportError: 
    try: # Try importing Python3 urllib
        import urllib.request
    except AttributeError: # Now importing Python2 urllib
        import urllib


def get_content(url):
    try:  # Using requests.
        return requests.get(url).content # Returns requests.models.Response.
    except NameError:  
        try: # Using Python3 urllib.
            with urllib.request.urlopen(index_url) as response:
                return response.read() # Returns http.client.HTTPResponse.
        except AttributeError: # Using Python3 urllib.
            return urllib.urlopen(url).read() # Returns an instance.

很难为响应编写Python2和Python3和请求依赖代码，因为它们的urlopen()函数和requests.get()函数返回不同的类型:

Python2 urllib.request.urlopen()返回一个http.client.HTTPResponse Python3 urllib.urlopen(url)返回一个实例 Request Request .get(url)返回一个requests.models.Response

只是为了补充现有的答案，我没有看到任何人提到python requests不是一个原生库。如果您可以添加依赖项，那么请求就可以了。然而，如果你试图避免添加依赖项，urllib是一个已经可用的原生python库。

我喜欢urllib。urllib2中似乎不存在urllib2。

>>> urllib.urlencode({'abc':'d f', 'def': '-!2'})
'abc=d+f&def=-%212'

在Python 2标准库中，有两个HTTP库是并排存在的。尽管名字相似，但它们并不相关:它们有不同的设计和不同的实现。

urllib是最初的Python HTTP客户端，在Python 1.2中添加到标准库中。urllib的早期文档可以在Python 1.4中找到。 urllib2是一个更强大的HTTP客户端，在Python 1.6中添加，旨在取代urllib: Urllib2——新的和改进的但不兼容的urllib版本(仍处于实验阶段)。 urllib2的早期文档可以在Python 2.1中找到。

Python 3标准库有一个新的urllib，它是旧模块的合并/重构/重写版本。

urllib3是一个第三方包(即不在CPython的标准库中)。尽管有这个名字，但它与标准库包无关，将来也不打算将它包括在标准库中。

最后，请求在内部使用urllib3，但它的目标是更易于使用的API。

Urllib2提供了一些额外的功能，即urlopen()函数可以允许您指定标头(通常在过去您必须使用httplib，这要冗长得多)。更重要的是，urllib2提供了Request类，它允许一种更声明性的方法来执行请求:

r = Request(url='http://www.mysite.com')
r.add_header('User-Agent', 'awesome fetcher')
r.add_data(urllib.urlencode({'foo': 'bar'})
response = urlopen(r)

注意urlencode()只在urllib中，而不是urllib2中。

在urllib2中还有用于实现更高级URL支持的处理程序。简短的回答是，除非您使用的是遗留代码，否则您可能希望使用urllib2中的URL打开器，但仍然需要将一些实用程序函数导入urllib。

奖金的答案 与谷歌应用程序引擎，你可以使用任何的httplib, urllib或urllib2，但他们都只是包装谷歌的URL获取API。也就是说，您仍然受到相同的限制，如端口、协议和允许的响应长度。不过，您可以使用库的核心来检索HTTP url，正如您所期望的那样。

urllib和urllib2都是做URL请求相关工作的Python模块，但提供不同的功能。

1) urllib2可以接受一个Request对象来设置URL请求的头信息，urllib只接受一个URL。

2) urllib提供了用于生成GET查询字符串的urlencode方法，urllib2没有这样的函数。这就是urllib经常与urllib2一起使用的原因之一。

Requests - Requests '是一个用Python编写的简单易用的HTTP库。

1) Python请求会自动对参数进行编码，因此您只需将它们作为简单的参数传递，这与urllib不同，在urllib中，您需要在传递参数之前使用urllib.encode()方法对参数进行编码。

2)自动将应答解码为Unicode。

3)请求也有更方便的错误处理。如果身份验证失败，urllib2将引发urllib2。URLError，而请求将返回一个正常的响应对象，正如预期的那样。你所要做的就是通过布尔响应来判断请求是否成功