소스 검색

fix spider task

luojunhui 5 달 전
부모
커밋
06db213b31
1개의 변경된 파일1개의 추가작업 그리고 1개의 파일을 삭제
  1. 1 1
      tasks/newContentIdTask.py

+ 1 - 1
tasks/newContentIdTask.py

@@ -760,7 +760,6 @@ class NewContentIdTask(object):
         :return:
         :return:
         """
         """
         task_list = await self.get_tasks()
         task_list = await self.get_tasks()
-        print(task_list)
         task_dict = {}
         task_dict = {}
         # 对 content_id去重
         # 对 content_id去重
         for task in task_list:
         for task in task_list:
@@ -776,6 +775,7 @@ class NewContentIdTask(object):
         )
         )
         if task_list:
         if task_list:
             total_task = len(process_list)
             total_task = len(process_list)
+            print(process_list)
             a = time.time()
             a = time.time()
             print("开始处理,一共{}个任务".format(total_task))
             print("开始处理,一共{}个任务".format(total_task))
             tasks = [self.process_task(params) for params in process_list]
             tasks = [self.process_task(params) for params in process_list]