Browse Source

增加flowpool 排序

luojunhui 6 tháng trước cách đây
mục cha
commit
82311e341a
1 tập tin đã thay đổi với 1 bổ sung0 xóa
  1. 1 0
      tasks/newContentIdTask.py

+ 1 - 0
tasks/newContentIdTask.py

@@ -97,6 +97,7 @@ class NewContentIdTask(object):
             WHERE
                     content_status = {self.TASK_INIT_STATUS}
                 and process_times <= {self.TASK_MAX_PROCESS_TIMES}
+            ORDER BY flow_pool_level, request_timestamp
             LIMIT {self.spider_coroutines};
         """
         tasks = await self.mysql_client.async_select(select_sql)