|
|
il y a 5 mois | |
|---|---|---|
| application | il y a 5 mois | |
| configs | il y a 5 mois | |
| crawler_worker | il y a 5 mois | |
| pipelines | il y a 5 mois | |
| scheduler | il y a 5 mois | |
| utils | il y a 5 mois | |
| .gitignore | il y a 5 mois | |
| README.md | il y a 5 mois | |
| main.py | il y a 5 mois |
整体流程: MQ 消息推送 ↓ main.py 消费并生成线程 ↓ handle_message() → 解析消息体(platform + mode) ↓ 加载 user_list / rule_dict(数据库) ↓ 执行 UniversalCrawler.run() ↓