python+appium+chromedriver 模拟人类行为采集爬虫
|
vor 11 Monaten | |
---|---|---|
app | vor 1 Jahr | |
application | vor 11 Monaten | |
scheduler | vor 1 Jahr | |
spider | vor 11 Monaten | |
.gitignore | vor 1 Jahr | |
LICENSE | vor 1 Jahr | |
README.md | vor 1 Jahr | |
docker-compose.yml | vor 1 Jahr | |
requirements.txt | vor 1 Jahr |
通用功能
配置文件
特殊功能方法
规范化item,保证送往ETL的消息格式正确
管道,所有视频信息在发送之前需要过管道的规则判断
爬虫代码
调度中心
##