|
vor 3 Monaten | |
---|---|---|
application | vor 3 Monaten | |
configs | vor 3 Monaten | |
crawler_worker | vor 3 Monaten | |
pipelines | vor 3 Monaten | |
scheduler | vor 3 Monaten | |
utils | vor 3 Monaten | |
.gitignore | vor 3 Monaten | |
README.md | vor 3 Monaten | |
main.py | vor 3 Monaten |
整体流程: MQ 消息推送 ↓ main.py 消费并生成线程 ↓ handle_message() → 解析消息体(platform + mode) ↓ 加载 user_list / rule_dict(数据库) ↓ 执行 UniversalCrawler.run() ↓