浏览代码

增加flowpool 排序

luojunhui 5 月之前
父节点
当前提交
82311e341a
共有 1 个文件被更改,包括 1 次插入0 次删除
  1. 1 0
      tasks/newContentIdTask.py

+ 1 - 0
tasks/newContentIdTask.py

@@ -97,6 +97,7 @@ class NewContentIdTask(object):
             WHERE
                     content_status = {self.TASK_INIT_STATUS}
                 and process_times <= {self.TASK_MAX_PROCESS_TIMES}
+            ORDER BY flow_pool_level, request_timestamp
             LIMIT {self.spider_coroutines};
         """
         tasks = await self.mysql_client.async_select(select_sql)