2017-10-09 110 views
0

我尝试使用python读取RSS提要。我用feedparser,和它运作良好,为每个供稿,除了一个:https://www.frenchweb.fr/feedFeedparser返回一个SAXParseException

import feedparser 
feed = feedparser.parse("https://www.frenchweb.fr/feed") 
print(feed) 

输出:

{ 
    'feed': {}, 
    'entries': [], 
    'bozo': 1, 
    'headers': { 
    'Date': 'Mon, 09 Oct 2017 08:04:31 GMT', 
    'Server': 'Apache', 
    'Vary': 'Cookie,Accept-Encoding', 
    'Expires': 'Thu, 19 Nov 1981 08:52:00 GMT', 
    'Cache-Control': 'no-store, no-cache, must-revalidate, post-check=0, pre-check=0', 
    'Pragma': 'no-cache', 
    'ETag': '"2be89b4a462dd6d1652745b6e69cfdac"', 
    'X-UA-Compatible': 'IE=edge', 
    'Link': '<https://www.frenchweb.fr/wp-json/>; rel="https://api.w.org/"', 
    'Content-Encoding': 'gzip', 
    'Content-Length': '13440', 
    'Connection': 'close', 
    'Content-Type': 'application/rss+xml; charset="UTF-8"' 
    }, 
    'etag': '"2be89b4a462dd6d1652745b6e69cfdac"', 
    'href': 'https://www.frenchweb.fr/feed', 
    'status': 200, 
    'encoding': 'UTF-8', 
    'version': '', 
    'bozo_exception': SAXParseException('XML or text declaration not at start of entity',), 
    'namespaces': {} 
} 

如果在相同的代码,我只是做了简单的GET,它的作品,我看内容:

web_page = requests.get(url, headers=headers, allow_redirects=True) 
soup = BeautifulSoup(web_page.content, "html.parser") 
print(soup) 

输出:

<?xml version="1.0" encoding="UTF-8"?><rss version="2.0" 
    xmlns:atom="http://www.w3.org/2005/Atom" 
    xmlns:content="http://purl.org/rss/1.0/modules/content/" 
    xmlns:dc="http://purl.org/dc/elements/1.1/" 
    xmlns:media="http://search.yahoo.com/mrss/" 
    xmlns:slash="http://purl.org/rss/1.0/modules/slash/" 
    xmlns:sy="http://purl.org/rss/1.0/modules/syndication/" 
    xmlns:wfw="http://wellformedweb.org/CommentAPI/"> 
<channel> 
<title>FrenchWeb.fr</title> 
... 

任何线索?

回答

1

该提要无效:在文件的开头有一个换行符。如果您在文本编辑器下载它,你可以看到它:

1 
2 <?xml version="1.0" encoding="UTF-8"?><rss version="2.0" 
3  xmlns:content="http://purl.org/rss/1.0/modules/content/" 
4  xmlns:wfw="http://wellformedweb.org/CommentAPI/" 
5 [...] 

这是因为XML declaration must be on the first line一个问题。

如果你删除第一个换行符,它的工作原理!

{'bozo': 0, 
'encoding': 'utf-8', 
'entries': [{'author': 'FrenchWeb', 
       'author_detail': {'name': 'FrenchWeb'}, 
       'authors': [{'name': 'FrenchWeb'}], 
       'comments': 'https://www.frenchweb.fr/barometre-annuel-de-lexperience-utilisateur-par-kameleoon/305311#respond', 
       'guidislink': False, 
[...] 

编辑溶液

可以删除第一个换行符这样的:

import feedparser 
import requests 

url = "https://www.frenchweb.fr/feed" 
headers = [] 
web_page = requests.get(url, headers=headers, allow_redirects=True) 
content = web_page.content.strip() # drop the first newline (if any) 
feed = feedparser.parse(content) 
+0

大,它的工作!感谢您的帮助日志! – iero