爬虫学习中的一些小工具
1.Xpathchrome插件商店中安装xpath helper2.proxychrome插件商店中安装proxy3. selenium中使用的driver各个浏览器需要下载对应的,这里只说明chrome的浏览器中下载与chrome版本对应的driver,链接,淘宝镜像下载完放入Python/script下就可以直接用了,无64位,只有32
1.Xpathchrome插件商店中安装xpath helper2.proxychrome插件商店中安装proxy3. selenium中使用的driver各个浏览器需要下载对应的,这里只说明chrome的浏览器中下载与chrome版本对应的driver,链接,淘宝镜像下载完放入Python/script下就可以直接用了,无64位,只有32
解析网站并获取数据# 彩票数据所在的url url = 'http://datachart.500.com/ssq/' # 提取数据 response = requests.get(url, headers={"User-Agent": UserAgent().chrome}) # 通过xpath去解析 e = etree.HTML(response.text) date_ti