zhangliang/AutoScraperX @ 42e9e11fbda95750cf128b66ca7caca0cfa958be

بدون توضیح

zhangliang 42e9e11fbd first commit		3 ماه پیش
application	42e9e11fbd first commit	3 ماه پیش
configs	42e9e11fbd first commit	3 ماه پیش
crawler_worker	42e9e11fbd first commit	3 ماه پیش
pipelines	42e9e11fbd first commit	3 ماه پیش
scheduler	42e9e11fbd first commit	3 ماه پیش
utils	42e9e11fbd first commit	3 ماه پیش
.gitignore	42e9e11fbd first commit	3 ماه پیش
README.md	42e9e11fbd first commit	3 ماه پیش
main.py	42e9e11fbd first commit	3 ماه پیش

整体流程： MQ 消息推送 ↓ main.py 消费并生成线程 ↓ handle_message() → 解析消息体（platform + mode） ↓ 加载 user_list / rule_dict（数据库） ↓ 执行 UniversalCrawler.run() ↓