|
|
@@ -625,7 +625,7 @@ def get_others_report_list(log, no, sql_pool):
|
|
|
# 获取下一页的标识符
|
|
|
next_id = data[-1].get("id")
|
|
|
if len(data) < 100:
|
|
|
- log.debug(f"{no} -> response.json() data 长度小于100, 获取下一页标识符.........")
|
|
|
+ log.debug(f"{no} -> len data 长度小于100, 停止查询.........")
|
|
|
break
|
|
|
|
|
|
# 设置等待时间 避免查询太频繁
|
|
|
@@ -766,7 +766,7 @@ def schedule_task():
|
|
|
爬虫模块 定时任务 的启动文件
|
|
|
"""
|
|
|
# 立即运行一次任务
|
|
|
- xc_main(log=logger)
|
|
|
+ # xc_main(log=logger)
|
|
|
|
|
|
# 设置定时任务
|
|
|
schedule.every().day.at("00:01").do(xc_main, log=logger)
|
|
|
@@ -786,5 +786,5 @@ if __name__ == '__main__':
|
|
|
# get_good_report_list()
|
|
|
# get_others_report_list(logger, 'SN10763635')
|
|
|
# get_video()
|
|
|
- xc_main(logger)
|
|
|
- # schedule_task()
|
|
|
+ # xc_main(logger)
|
|
|
+ schedule_task()
|
