爬千里顺风,用于检测是否能正常发言

DONGGUOLIANGNEW\edy 872060e707 千里顺风发消息 1 рік тому
.gitignore 5632f4452b Merge branch 'master' of http://10.8.230.114:3000/dongguoliang/spider_qlsf 2 роки тому
auth.py b4e5bfc570 初始化 2 роки тому
config.ini 872060e707 千里顺风发消息 1 рік тому
config_sample.ini 872060e707 千里顺风发消息 1 рік тому
data - 副本.json b4e5bfc570 初始化 2 роки тому
data-.json b4e5bfc570 初始化 2 роки тому
data.json 38a2c0ff00 千里顺风提交 2 роки тому
detail.py 872060e707 千里顺风发消息 1 рік тому
geckodriver.log b4e5bfc570 初始化 2 роки тому
main.py 872060e707 千里顺风发消息 1 рік тому
readme.md 872060e707 千里顺风发消息 1 рік тому
setup.py 38a2c0ff00 千里顺风提交 2 роки тому

readme.md

准备

*** 将待抓取的商品导入到 数据库表 spider_data

程序入口文件 main.py

*** 用户登录: auth.login(url_login) *** 开始抓取: detail.get_detail(url_detail)

driver下载地址

*** https://googlechromelabs.github.io/chrome-for-testing/