- 使用 scrapy + selenium 获取亚马逊的数据
- 在 middlewares 中创建 middleawre，download 动作的请求会调用 selenium 进行访问；
- 本文同时基于 twisted + mysql 实现了获取数据的异步写入；
-
Notifications
You must be signed in to change notification settings - Fork 3
dex0423/scrapy_selneium_amazon
Folders and files
| Name | Name | Last commit message | Last commit date | |
|---|---|---|---|---|
Repository files navigation
About
使用 scrapy + selenium 获取亚马逊的数据
Resources
Stars
Watchers
Forks
Releases
No releases published
Packages 0
No packages published