Python 2与Python 3 - urllib格式

Question

我真的很想弄清楚为什么这段代码在Python 2中工作，而不是在Python 3中工作。我只是想抓住一个json页面，然后解析它。下面是在Python 2代码：

import urllib, json 
response = urllib.urlopen("http://reddit.com/.json") 
content = response.read() 
data = json.loads(content) 

我认为在Python 3的等效代码会是这样：

import urllib.request, json 
response = urllib.request.urlopen("http://reddit.com/.json") 
content = response.read() 
data = json.loads(content) 

但它在我的脸上吹了起来，因为读返回的数据（ ）是一个“字节”类型。然而，我无法将它转化为json能够解析的东西。我从reddit的试图发送UTF-8回我的头知道，但我似乎无法得到的字节解码成UTF-8：

import urllib.request, json 
response = urllib.request.urlopen("http://reddit.com/.json") 
content = response.read() 
data = json.loads(content.decode("utf8")) 

我在做什么错？

编辑：问题是我无法将数据转换为可用状态;即使json加载数据，但它的一部分是不可显示的，我希望能够将数据打印到屏幕上。

第二次编辑：这个问题似乎与分析有关，而不是解析。 Alex的答案通过将IO设置为utf8为脚本提供了一种在Python 3中工作的方式。但问题仍然存在：为什么代码在Python 2中运行，而不是在Python 3中运行？

Answer 1

您发布的代码大概是由于错误的剪切和粘贴操作，因为它在两个版本中都显然是错误的（f.read()失败，因为没有定义f裸号）。

在Py3中，ur = response.decode('utf8')对我来说非常适合，下面的json.loads(ur)也是如此。也许错误的复制和粘贴会影响您的2到3次转换尝试。

Answer 2

请参阅that在另一个Unicode相关问题的答案。

现在：Python 3 str（它是Python 2 unicode）类型是一个理想化的对象，它处理的是“字符”而不是“字节”。为了用于/从磁盘/网络数据使用，这些字符需要通过“转换表”（也就是a.k.a编码a.k.a代码页）从字节进行编码/解码。由于操作系统的多样性，Python在历史上避免猜测编码应该是什么;这种情况多年来一直在发生变化，但仍然存在“面对模棱两可，拒绝猜测的诱惑”的原则。

谢天谢地，Web服务器使您的工作更轻松。以上你response应该给你所需要的所有额外信息：

>>> response.headers['content-type'] 
'application/json; charset=UTF-8' 

所以，每次发出对Web服务器的请求，检查一个字符集值的Content-Type头，并请求的数据进行解码转换成Unicode（ Python 3：bytes.decode(charset)→str）通过使用该字符集。

Answer 3

取决于您的Python版本，您必须选择正确的库。

为Python 3.5

import urllib.request 
data = urllib.request.urlopen(url).read().decode('utf8') 

为Python 2。7

import urllib 
url = serviceurl + urllib.urlencode({'sensor':'false', 'address': address}) 
uh = urllib.urlopen(url)