2017-01-22 56 views
0

我是python的新手。写了一个小程序来获取页面中的所有链接。我使用的是Python 2.7,它是Ubuntu的一个。我使用不同的源代码将代码放在一起,但似乎我要么丢失了一个库,要么为错误版本的python使用正确的库。在python中安装urlib和beautifulsoup 2.7

import sys 
from bs4 import * 
import urllib2 
import re 

if len(sys.argv) != 2: 
    print "USAGE:" 
    print "Python test.py Your_URL" 
else: 
     url = sys.argv[1] 

html_page = urllib2.urlopen(url) 
soup = BeautifulSoup(html_page) 
for link in soup.findAll('a'): 
    print link.get('href') 

我收到此错误:

Traceback (most recent call last): 
    File "test.py", line 12, in <module> 
    html_page = urllib2.urlopen(url) 
    File "/usr/lib/python2.7/urllib2.py", line 154, in urlopen 
    return opener.open(url, data, timeout) 
    File "/usr/lib/python2.7/urllib2.py", line 421, in open 
    protocol = req.get_type() 
    File "/usr/lib/python2.7/urllib2.py", line 283, in get_type 
    raise ValueError, "unknown url type: %s" % self.__original 
ValueError: unknown url type: www.cs.odu.edu 

我已经安装了BS4,urlib蟒蛇后。还是一样的错误。

sudo易于安装python

sudo易于安装python-PIP

须藤PIP安装BS4

回答

2

试试你的URL,然后指定HTTP或HTTPS,它肯定会工作。