소스 검색

增加flowpool 排序

luojunhui 7 달 전
부모
커밋
82311e341a
1개의 변경된 파일1개의 추가작업 그리고 0개의 파일을 삭제
  1. 1 0
      tasks/newContentIdTask.py

+ 1 - 0
tasks/newContentIdTask.py

@@ -97,6 +97,7 @@ class NewContentIdTask(object):
             WHERE
                     content_status = {self.TASK_INIT_STATUS}
                 and process_times <= {self.TASK_MAX_PROCESS_TIMES}
+            ORDER BY flow_pool_level, request_timestamp
             LIMIT {self.spider_coroutines};
         """
         tasks = await self.mysql_client.async_select(select_sql)