如何抓住这在Python这样的动态SRC ID

Question

它不是一个静态的URL，但像xxx.xxx.com/xxx/run

图像是基于每日状态动态地建立了一个地址的网络形象，所以我不能抓住它使用它的URL

是否有可能刺激浏览器并获得整个页面包含图像？如果那么如何？

谢谢〜

Answer 1

有两种方法可以做到这一点。

1. 使用类似Requests抢你的图片是在页面的HTML，然后使用类似pyquery解析HTML，找到你的图像的URL。这应该在大多数情况下工作，除非URL实际上不在页面的HTML中（即因为它被Javascript放在那里）。

2. 使用诸如Splinter之类的东西，它可让您以编程方式控制实际的浏览器以获取URL。这是一个重量级的解决方案，但它像一个普通的浏览器（因为它）运行JavaScript。

第一个选项可能是这样的：从pyquery进口PyQuery

html = requests.get('http://example.com/').text 
html_q = PyQuery(html) 
image_url = html_q('img.my_image_class').attr('src') 

而第二个可能是这样的 导入请求 ：

from splinter import Browser 

with Browser() as b: 
    b.visit('http://example.com/') 
    image_url = b.find_by_css('img.my_image_class')['src'] 

然后，只需下载网址就像您通常那样。

---

编辑：这是另一个请求示例，这次使用会话来存储由登录表单设置的cookie。您必须从登录表单中的<form>和<input>元素获取数据字典的URL和密钥;他们并不总是username和password。

import requests 
s = requests.session() 
s.post('https://example.com/dologin', data={'username': 'adam', 'password': 'hunter2'}) 
html = s.get('https://example.com/other_page').text 
# and continue as in the first example