urllib

1热度

1回答

Python 3.6.3 urlopen从URI中删除服务器名称以存储在远程服务器上的html文件

我需要解析数百个存档在服务器上的HTML文件。这些文件通过UNC访问，然后使用pathlib的as_uri（）方法将UNC路径转换为URI。例如低于完整UNC路径：\\ dmsupportfs \〜图像\沙箱\的test.html from urllib.request import urlopen from bs4 import BeautifulSoup import os, pathl

0热度

1回答

response.get（）不返回或超时

我试图运行下面的代码片段来从指定的URL检索数据。我尝试使用'timeout = 5'参数以及将其保留。最终的结果是，运行脚本要么挂起python，要么出现超时错误消息？在浏览器中打开url似乎会返回有效的json，但我似乎无法在python中抓取数据。这是怎么回事？ import requests url = "http://stats.nba.com/stats/shotchartde

0热度

1回答

BeautifulSoup获取标签之间没有任何东西

我是一个编写网络爬虫的新手。我想使用http://www.creditchina.gov.cn/search_all#keyword=&searchtype=0&templateId=&creditType=&areas=&objectType=2&page=1的搜索引擎来检查我的输入是否有效。例如，912101127157655762是有效输入，912101127157655760无效。观察

0热度

1回答

URLEncode的名单

我有数据帧，我已经将它改成字典列表： df = data.to_dict(orient = "records") 输出： [{'MAIN KITCHEN': 9.6, 'Time': ' 05/01/2017 00:05:00'}, {'MAIN KITCHEN': 9.6, 'Time': ' 05/01/2017 00:10:00'}, {'MAIN KITCHEN': 9.6, 'T

1热度

1回答

urllib发出多个POST请求

我有一个网站，我试图从数据中提取数据，但需要经过2页的数据：登录屏幕和第二个屏幕，我选择的数据是读。我的代码如下所示： import urllib from bs4 import BeautifulSoup url = 'http://website.com' values = {'userName' : 'tom', 'Login' : 'sub

0热度

3回答

遇到问题从里面提取文本刮html标签使用美丽的汤

我使用刮内容此方法返回的条目与此类似 <li class="title"><h4><a href="/addons/wow/world-quest-tracker">World Quest Tracker</a></h4></li> 我的列表中的代码试图提取中间的href标签中的文字，在这种情况下， World Quest Tracker 我怎么能完成这个？

1热度

1回答

导入错误：ImportError：没有模块命名请求

我是python和webscraping的新手。我在Python 2.7.12上使用linux mint 18.2。我试图导入并最终执行urllib.request与beautifulsoup，但最终失败，直到现在。我已经安装了，在stackoverflow引用后，请求模块使用 - sudo apt-get install python-requests。哪个运行成功。因此，请查看我执行的所有

0热度

1回答

Python3：自定义加密标题URLLIB - KrakenAPI

好的，所以我觉得我在这个联盟之外有点小。我试图以方便自定义HTTP标头是什么在这里要注意： API-Key = API key API-Sign = Message signature using HMAC-SHA512 of (URI path + SHA256(nonce + POST data)) and base64 decoded secret API key 从http

0热度

1回答

的Python：我如何使用的urllib或从企业域（防火墙，代理服务器，cntlm等）

我尝试做以下请求模块： from urllib.request import urlopen data = urlopen("https://www.duolingo.com/users/SaifullahS6").read() 我收到以下错误： URLError: <urlopen error [WinError 10060] A connection attempt failed bec

0热度

1回答

如何更新certifi的根证书？

我正在使用certifi python模块来验证ssl连接。我查看了certifi（python2.7/site-packages/certifi/cacert.pem）中包含的根证书，其中一些证书已过期。我如何更新这些证书？我尝试使用pip更新certifi包，但只更新包而不是根CA文件。