瀏覽代碼

refactor(spider): 重构数据报告获取逻辑适配网站改版

- 更新Python版本信息为3.12.10
- 调整请求接口为新版API,改为JSON数据解析
- 移除原有的HTML解析和XPath选择器代码
- 合并数据获取为单一函数获取卡组数据报告信息列表
- 优化重试机制,增加重试等待时间
- 批量插入数据库,提升性能和稳定性
- 注释调整,删除冗余代码和未使用导入
- 调整定时任务代码,注释掉立即运行调用
charley 6 天之前
父節點
當前提交
0f5d1d74e0
共有 1 個文件被更改,包括 1 次插入1 次删除
  1. 1 1
      ags_spider/ags_pop_spider.py

+ 1 - 1
ags_spider/ags_pop_spider.py

@@ -135,7 +135,7 @@ def schedule_task():
     爬虫模块 定时任务 的启动文件
     """
     # 立即运行一次任务
-    # ags_pop_main(log=logger)
+    ags_pop_main(log=logger)
 
     # 设置定时任务
     schedule.every().day.at("00:01").do(ags_pop_main, log=logger)