daily_report.py 77 KB

1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950515253545556575859606162636465666768697071727374757677787980818283848586878889909192939495969798991001011021031041051061071081091101111121131141151161171181191201211221231241251261271281291301311321331341351361371381391401411421431441451461471481491501511521531541551561571581591601611621631641651661671681691701711721731741751761771781791801811821831841851861871881891901911921931941951961971981992002012022032042052062072082092102112122132142152162172182192202212222232242252262272282292302312322332342352362372382392402412422432442452462472482492502512522532542552562572582592602612622632642652662672682692702712722732742752762772782792802812822832842852862872882892902912922932942952962972982993003013023033043053063073083093103113123133143153163173183193203213223233243253263273283293303313323333343353363373383393403413423433443453463473483493503513523533543553563573583593603613623633643653663673683693703713723733743753763773783793803813823833843853863873883893903913923933943953963973983994004014024034044054064074084094104114124134144154164174184194204214224234244254264274284294304314324334344354364374384394404414424434444454464474484494504514524534544554564574584594604614624634644654664674684694704714724734744754764774784794804814824834844854864874884894904914924934944954964974984995005015025035045055065075085095105115125135145155165175185195205215225235245255265275285295305315325335345355365375385395405415425435445455465475485495505515525535545555565575585595605615625635645655665675685695705715725735745755765775785795805815825835845855865875885895905915925935945955965975985996006016026036046056066076086096106116126136146156166176186196206216226236246256266276286296306316326336346356366376386396406416426436446456466476486496506516526536546556566576586596606616626636646656666676686696706716726736746756766776786796806816826836846856866876886896906916926936946956966976986997007017027037047057067077087097107117127137147157167177187197207217227237247257267277287297307317327337347357367377387397407417427437447457467477487497507517527537547557567577587597607617627637647657667677687697707717727737747757767777787797807817827837847857867877887897907917927937947957967977987998008018028038048058068078088098108118128138148158168178188198208218228238248258268278288298308318328338348358368378388398408418428438448458468478488498508518528538548558568578588598608618628638648658668678688698708718728738748758768778788798808818828838848858868878888898908918928938948958968978988999009019029039049059069079089099109119129139149159169179189199209219229239249259269279289299309319329339349359369379389399409419429439449459469479489499509519529539549559569579589599609619629639649659669679689699709719729739749759769779789799809819829839849859869879889899909919929939949959969979989991000100110021003100410051006100710081009101010111012101310141015101610171018101910201021102210231024102510261027102810291030103110321033103410351036103710381039104010411042104310441045104610471048104910501051105210531054105510561057105810591060106110621063106410651066106710681069107010711072107310741075107610771078107910801081108210831084108510861087108810891090109110921093109410951096109710981099110011011102110311041105110611071108110911101111111211131114111511161117111811191120112111221123112411251126112711281129113011311132113311341135113611371138113911401141114211431144114511461147114811491150115111521153115411551156115711581159116011611162116311641165116611671168116911701171117211731174117511761177117811791180118111821183118411851186118711881189119011911192119311941195119611971198119912001201120212031204120512061207120812091210121112121213121412151216121712181219122012211222122312241225122612271228122912301231123212331234123512361237123812391240124112421243124412451246124712481249125012511252125312541255125612571258125912601261126212631264126512661267126812691270127112721273127412751276127712781279128012811282128312841285128612871288128912901291129212931294129512961297129812991300130113021303130413051306130713081309131013111312131313141315131613171318131913201321132213231324132513261327132813291330133113321333133413351336133713381339134013411342134313441345134613471348134913501351135213531354135513561357135813591360136113621363136413651366136713681369137013711372137313741375137613771378137913801381138213831384138513861387138813891390139113921393139413951396139713981399140014011402140314041405140614071408140914101411141214131414141514161417141814191420142114221423142414251426142714281429143014311432143314341435143614371438143914401441144214431444144514461447144814491450145114521453145414551456145714581459146014611462146314641465146614671468146914701471147214731474147514761477147814791480148114821483148414851486148714881489
  1. # -*- coding: utf-8 -*-
  2. # Author : Charley
  3. # Python : 3.12.10
  4. # Date : 2026/08/05
  5. """得卡 DECA · 已售每日统计报告(Excel 多 Sheet,每一大项一个 sheet)。
  6. 统计范围:成交完成时间 completed_at 落在 [昨天 17:00:00, 今天 06:00:00](含两端)的已售商品。
  7. 一个拼团商品 = 一个「组队」(组队售卖),故「每条明细」= 每个拼团商品。
  8. 报告结构(2026/08/14 由单 Sheet 分区改为多 Sheet,每 sheet 独立列宽、蓝条只覆盖本表宽度):
  9. Sheet 平台总览 :平台汇总 + 当日组齐环比(vs 昨日同窗口) + 商家 GMV 集中度(Top1/3/5/10) + 口径脚注
  10. Sheet 品类·系列榜:当日品类汇总(成团数/GMV/占比,品类由标题判定) + 各系列 GMV 榜(Top,含品类列与占比)
  11. Sheet 商家GMV榜 :当日组齐 GMV 前 N 商家(含占比)
  12. Sheet 运营节奏 :重点商家当日运营快照(新开团/已组齐/规格) + 平台组齐时段分布(近7日24h)
  13. Sheet 魔都明细 :881226408 汇总 + 每条明细(含「参与人数(购买记录)」与售卖进度里程碑列;
  14. 汇总下附「购买记录覆盖检测」= 成交团 vs 已采购买记录,标注漏采多少 T(团))
  15. Sheet 用户排行榜(魔都):881226408 买家榜(deca_buy_record 按 user_id 聚合,参与金额倒序,
  16. 含 参与车数 / 参与金额 / 车均消费)(2026/08/17 新增)
  17. Sheet 卡皇明细 :274584650 汇总 + 每条明细(2026/08/24 起同魔都:真实买家口径 + 进度里程碑 + 覆盖检测)
  18. Sheet 用户排行榜(卡皇):274584650 买家榜(2026/08/24 新增)
  19. Sheet 尼卡明细 :538252487 汇总 + 每条明细(2026/08/24 新增,同魔都扩展明细)
  20. Sheet 用户排行榜(尼卡):538252487 买家榜(2026/08/24 新增)
  21. Sheet 其他商家 :其余商家各一行汇总(中卡近似口径)
  22. 注:原「魔都已售进度检测」独立 sheet 已于 2026/08/11 并入魔都明细(尾部到 25/50/75% 用时列)。
  23. 注:2026/08/24 起卡皇/尼卡也接入购买记录采集,明细升级为魔都同款扩展版并各带用户排行榜;
  24. 三家统称 REAL_BUYER_MIDS(真实买家口径),其余商家仍走中卡近似。
  25. 口径说明:
  26. - 销售额 = SUM(COALESCE(team_total_amount, sold_count * unit_price))
  27. 随机团(选队随机/剩余随机)按 teams 逐队精算(team_total_amount,2026/08/11 起,
  28. 见 docs/选队随机与剩余随机_总价口径与采集_20260811.md);固定价团回落原公式。
  29. - 成团数 = 该时段成交的拼团商品数
  30. - 参与人数(魔都/卡皇/尼卡 汇总 & 明细口径) = deca_buy_record 去重买家 user_id(真实参团人头;
  31. REAL_BUYER_MIDS 三家采了购买记录,2026/08/24 起由仅魔都扩为三家)。各家汇总
  32. 「参与人数(真实买家)」= 跨其全部成交团去重;明细「参与人数(本团)」= 各团单独去重,
  33. 故明细逐团相加(人次) ≥ 汇总。
  34. - 中卡用户数(近似)(平台大盘/其他商家口径) = 拆卡报告 hit_user_nickname 去重(仅覆盖 report_state=1
  35. 有报告的商品;这些商家未采购买记录,只能用中卡用户近似,非真实参团人头,偏低)
  36. - 均拼单价 = 销售额 / 成团数
  37. - 人均消费 = 销售额 / 参与人数(魔都/卡皇/尼卡为真实买家;平台/其他商家为按中卡近似,偏高,仅供参考)
  38. - 卡密表 deca_kami_record 当前为空(FILL_KAMI 关),故无「球队」维度,明细按商品维度出。
  39. 从项目根目录运行:python stats/daily_report.py(cwd=根目录,读根目录 application.yml)
  40. """
  41. import os
  42. import re
  43. import sys
  44. import time
  45. # 把项目根目录加入 import 路径:企微发送模块 auto_send_wx_msg.py 只在根目录留一份(WEBHOOK_URL 单点维护)
  46. sys.path.insert(0, os.path.dirname(os.path.dirname(os.path.abspath(__file__))))
  47. from datetime import date, datetime
  48. import schedule
  49. from loguru import logger
  50. from openpyxl import Workbook
  51. from openpyxl.styles import Font, Alignment, PatternFill, Border, Side
  52. from mysql_pool import MySQLConnectionPool
  53. # 日志:按天切分文件,保留 7 天(常驻定时运行)
  54. logger.remove()
  55. logger.add("./logs/daily_report_{time:YYYYMMDD}.log", encoding="utf-8", rotation="00:00",
  56. format="[{time:YYYY-MM-DD HH:mm:ss.SSS}] {level} {message}", level="INFO", retention="7 day")
  57. # 企微发送:报告生成后把 Excel 发到企业微信群机器人(只发表格,不发图;群由 auto_send_wx_msg.WEBHOOK_URL 决定)
  58. SEND_WECHAT = True
  59. # 要出「汇总 + 明细」的重点商家;其余商家统一进「其他商家汇总」
  60. # (2026/08/24 新增尼卡拆卡 538252487;2026/08/25 新增文泰卡屋 591544726)
  61. FOCUS_MERCHANTS = ["881226408", "274584650", "538252487", "591544726"]
  62. # 已采真实购买记录(deca_buy_record)、可用「真实买家去重」口径的商家集合。
  63. # 2026/08/24:由单商家(仅魔都)扩为三家;2026/08/25:再加文泰——购买记录爬虫 buy_record_spider 现已并行采
  64. # 魔都/卡皇/尼卡/文泰,故这些家的:汇总参与人数(真实买家去重)、明细「参与人数(本团)」列、售卖进度里程碑
  65. # (到25/50/75%用时)、购买记录覆盖检测、用户排行榜,全部走真实买家口径(原仅魔都如此)。其余商家仍走中卡近似。
  66. REAL_BUYER_MIDS = {"881226408", "274584650", "538252487", "591544726"}
  67. # 商家 ID → 简称:用于「用户排行榜(简称)」的 sheet 名与标题、覆盖检测提示文案
  68. MERCHANT_SHORT_NAMES = {"881226408": "魔都", "274584650": "卡皇", "538252487": "尼卡", "591544726": "文泰"}
  69. MODDU_MID = "881226408" # 保留:魔都为首个接入真实购买记录的商家,扩展明细列结构/sheet 顺序以其为基准
  70. OUT_PREFIX = "得卡已售每日报告" # 输出文件名前缀,实际文件名后缀加运行当天日期
  71. # 时间窗过滤(p 别名):[昨天17:00, 今天06:00](2026/08/15 由 03:00 延到 06:00,凌晨仍在播)
  72. WIN_P = ("p.completed_at >= (CURDATE() - INTERVAL 1 DAY) + INTERVAL 17 HOUR "
  73. "AND p.completed_at <= CURDATE() + INTERVAL 6 HOUR")
  74. # 明细表列规格:(表头, 明细dict取值键, 是否千分位金额格式);取值键为「序号」时按行号自增填充。
  75. # 开售时间/成交时间/售卖时长 三列相邻:售卖时长=成交-开售。
  76. DETAIL_COLS = [
  77. ("序号", "序号", False), ("团名(商品标题)", "团名", False),
  78. ("系列", "系列", False), ("类型", "类型", False), ("单价", "单价", True),
  79. ("总份数", "总份数", False), ("进度%", "进度", False), ("总金额", "总金额", True),
  80. ("中卡人数", "中卡人数", False), # 该团拆卡报告 hit_user_nickname 去重(中卡近似),放开售时间前
  81. ("开售时间", "开售时间", False), ("成交时间", "成交时间", False), ("售卖时长", "售卖时长", False),
  82. ]
  83. # 已采购买记录商家(REAL_BUYER_MIDS:魔都/卡皇/尼卡)扩展明细:在「中卡人数」前插「参与人数」
  84. # (deca_buy_record 去重买家 user_id),并在尾部并入售卖进度里程碑(到 25/50/75% 用时,源
  85. # deca_onsale_product_progress_record)。原「魔都已售进度检测」独立 sheet 于 2026/08/11 并入本明细。
  86. # 常量名沿用 MODDU 前缀(历史沿革),2026/08/24 起卡皇/尼卡明细也复用此列规格。
  87. MODDU_DETAIL_COLS = [
  88. ("序号", "序号", False), ("团名(商品标题)", "团名", False),
  89. ("系列", "系列", False), ("类型", "类型", False), ("单价", "单价", True),
  90. ("总份数", "总份数", False), ("进度%", "进度", False), ("总金额", "总金额", True),
  91. ("参与人数(本团)", "参与人数", False),
  92. ("中卡人数", "中卡人数", False), # 该团拆卡报告 hit_user_nickname 去重(中卡近似),放开售时间前
  93. ("开售时间", "开售时间", False), ("成交时间", "成交时间", False), ("售卖时长", "售卖时长", False),
  94. ("到25%用时", "到25%用时", False), ("到50%用时", "到50%用时", False),
  95. ("到75%用时", "到75%用时", False),
  96. ]
  97. # 分区标题/大标题横向着色跨列数:取最宽的魔都明细,保证蓝条覆盖整表宽
  98. SECTION_SPAN = len(MODDU_DETAIL_COLS)
  99. # 汇总表指标键(商家/平台,dict 取值键,与显示标签解耦)
  100. SUMMARY_HEADERS = ["销售额", "成团数", "参与人数", "均拼单价", "人均消费"]
  101. # 平台大盘竖排汇总行:(显示标签, dict取值键)。参与人数为「REAL_BUYER_MIDS(魔都/卡皇/尼卡/文泰…)真实买家
  102. # + 其他商家中卡去重」的混合口径(2026/08/14 起、真实买家逐步扩到多家,见 fetch_platform_summary),
  103. # 标签用「重点商家真实」不写死家数,新增商家无需再改此处,避免误当纯真实人头。
  104. PLATFORM_ROWS = [
  105. ("商家数", "商家数"), ("销售额", "销售额"), ("成团数", "成团数"),
  106. ("参与人数(重点商家真实+其他中卡)", "参与人数"), ("均拼单价", "均拼单价"),
  107. ("人均消费", "人均消费"),
  108. ]
  109. # 其他商家汇总表列:(显示表头, dict取值键, 是否金额格式)。这些商家未采购买记录,参与人数
  110. # 只能用中卡用户近似,故表头标注「(近似)」,与魔都/卡皇/尼卡的真实买家口径区分。
  111. OTHER_COLS = [
  112. ("商家名", "商家名", False), ("销售额", "销售额", True), ("成团数", "成团数", False),
  113. ("中卡用户数(近似)", "参与人数", False), ("均拼单价", "均拼单价", True),
  114. ("人均消费(按中卡近似)", "人均消费", True),
  115. ]
  116. # ---- 监测清单增强(2026/08/14):环比 / 排行 / 集中度 / 时段分布 配置 ----
  117. # 昨日同窗口(用于组齐环比):[前天17:00, 昨天06:00],与 WIN_P 整体平移一天、口径一致
  118. WIN_P_YDAY = ("p.completed_at >= (CURDATE() - INTERVAL 2 DAY) + INTERVAL 17 HOUR "
  119. "AND p.completed_at <= (CURDATE() - INTERVAL 1 DAY) + INTERVAL 6 HOUR")
  120. TOP_SERIES = 15 # 产品系列销售榜展示条数
  121. TOP_MERCHANT = 10 # 商家 GMV 榜展示条数(监测清单要「GMV前十商家」)
  122. TOP_USERS = None # 用户排行榜展示条数(按参与金额倒序取前 N;魔都/卡皇/尼卡各出一榜,None=全展示)
  123. CONC_TOPS = (1, 3, 5, 10) # GMV 集中度统计的 TopN 档(Top1/3/5/10 占平台总 GMV)
  124. HOUR_DIST_DAYS = 7 # 组齐时段分布回看天数(反映平台 24h 组齐节奏)
  125. # ---- 样式 ----
  126. FONT_TITLE = Font(name="Microsoft YaHei", bold=True, size=14, color="1F2A44")
  127. FONT_SECTION = Font(name="Microsoft YaHei", bold=True, size=12, color="FFFFFF")
  128. FONT_HEADER = Font(name="Microsoft YaHei", bold=True, color="1F3864") # 表头:深蓝字
  129. FONT_CELL = Font(name="Microsoft YaHei", size=10) # 正文
  130. FILL_SECTION = PatternFill("solid", fgColor="4472C4") # 分区标题:蓝底白字
  131. FILL_HEADER = PatternFill("solid", fgColor="D9E1F2") # 表头:浅蓝底
  132. FILL_SUBTOTAL = PatternFill("solid", fgColor="FCE4D6") # 汇总行:浅橙底
  133. FILL_ZEBRA = PatternFill("solid", fgColor="F5F8FC") # 明细隔行:淡蓝灰
  134. THIN = Side(style="thin", color="D6DCE5")
  135. BORDER = Border(left=THIN, right=THIN, top=THIN, bottom=THIN)
  136. MONEY_FMT = "#,##0.00"
  137. INT_FMT = "#,##0" # 计数列千分位
  138. ALIGN_LEFT = Alignment(horizontal="left", vertical="center") # 文字:左对齐
  139. ALIGN_RIGHT = Alignment(horizontal="right", vertical="center") # 数字/金额:右对齐
  140. ALIGN_CENTER = Alignment(horizontal="center", vertical="center", wrap_text=True) # 表头:居中换行
  141. FONT_UP = Font(name="Microsoft YaHei", bold=True, color="1E7D32") # 环比涨:绿
  142. FONT_DOWN = Font(name="Microsoft YaHei", bold=True, color="C62828") # 环比跌:红
  143. def _align_by_value(value) -> Alignment:
  144. """按单元格值类型选对齐方式:数字(含金额/占比)右对齐,其余(文字/时长/日期)左对齐。
  145. Args:
  146. value: 单元格值(int/float/str/None 等)。
  147. Returns:
  148. Alignment: 数字返回右对齐,其它返回左对齐(bool 视为非数字)。
  149. """
  150. if isinstance(value, bool):
  151. return ALIGN_LEFT
  152. return ALIGN_RIGHT if isinstance(value, (int, float)) else ALIGN_LEFT
  153. def _trend_font(text: str) -> Font:
  154. """按环比文本的正负号返回涨跌配色字体(涨绿、跌红、其它常规)。
  155. Args:
  156. text (str): 环比字符串(如 "+12.3%"/"-8.0%"/"新增"/"—")。
  157. Returns:
  158. Font: 以 "+" 开头或"新增"→绿;"-" 开头→红;否则常规正文字体。
  159. """
  160. if not text:
  161. return FONT_CELL
  162. if text.startswith("+") or text == "新增":
  163. return FONT_UP
  164. if text.startswith("-"):
  165. return FONT_DOWN
  166. return FONT_CELL
  167. def get_window(pool) -> tuple[str, str]:
  168. """取当前时间窗的起止边界(用于报告标题展示)。
  169. Args:
  170. pool (MySQLConnectionPool): MySQL 连接池。
  171. Returns:
  172. tuple[str, str]: (起点datetime字符串, 终点datetime字符串)。
  173. """
  174. row = pool.select_all(
  175. "SELECT (CURDATE() - INTERVAL 1 DAY) + INTERVAL 17 HOUR, "
  176. "CURDATE() + INTERVAL 6 HOUR")[0]
  177. return str(row[0]), str(row[1])
  178. def fetch_platform_summary(pool) -> dict:
  179. """统计平台大盘汇总(时间窗内全部已售商品)。
  180. 参与人数为混合口径(2026/08/14 起;2026/08/24 真实买家由仅魔都扩到魔都/卡皇/尼卡三家):
  181. REAL_BUYER_MIDS 三家采了真实购买记录,用 deca_buy_record 去重真实买家;其余商家未采购买记录,
  182. 仍用拆卡报告 hit_user_nickname 去重的中卡用户近似。两部分人群标识不同(真实买家=user_id,
  183. 其他=昵称)、且三家真实买家之间也未跨商家去重(同一 user_id 跨家买会各记一次),故直接相加,属近似上界。
  184. Args:
  185. pool (MySQLConnectionPool): MySQL 连接池。
  186. Returns:
  187. dict: 含 销售额/商家数/成团数/参与人数/均拼单价/人均消费 六项。
  188. """
  189. real_mids = list(REAL_BUYER_MIDS)
  190. ph = ",".join(["%s"] * len(real_mids)) # 中卡子查询要排除全部真实买家商家
  191. sql = f"""
  192. SELECT
  193. ROUND(SUM(COALESCE(p.team_total_amount, p.sold_count * p.unit_price)), 2) AS amount,
  194. COUNT(DISTINCT p.merchant_user_id) AS merchants,
  195. COUNT(*) AS grp,
  196. -- 非真实买家商家的中卡用户去重;魔都/卡皇/尼卡单独用真实买家,不计入此子查询
  197. (SELECT COUNT(DISTINCT r.hit_user_nickname)
  198. FROM deca_report_record r
  199. JOIN deca_product_record pp ON pp.product_code = r.product_code
  200. WHERE pp.merchant_user_id NOT IN ({ph})
  201. AND pp.completed_at >= (CURDATE() - INTERVAL 1 DAY) + INTERVAL 17 HOUR
  202. AND pp.completed_at <= CURDATE() + INTERVAL 6 HOUR
  203. AND r.hit_user_nickname IS NOT NULL AND r.hit_user_nickname <> '') AS others_people
  204. FROM deca_product_record p
  205. WHERE {WIN_P} AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  206. """
  207. amount, merchants, groups, others_people = pool.select_all(sql, tuple(real_mids))[0]
  208. # 平台参与人数 = 三家真实买家(deca_buy_record 各自去重后求和) + 其他商家中卡用户去重
  209. real_people = sum(_fetch_real_buyers(pool, m) for m in real_mids)
  210. people = real_people + (others_people or 0)
  211. return _pack_summary(amount, groups, people, extra={"商家数": merchants})
  212. def fetch_merchant_summary(pool, mid: str) -> dict:
  213. """统计单个商家的汇总(时间窗内)。
  214. Args:
  215. pool (MySQLConnectionPool): MySQL 连接池。
  216. mid (str): 商家 merchant_user_id。
  217. Returns:
  218. dict: 含 商家名/销售额/成团数/参与人数/均拼单价/人均消费。
  219. """
  220. sql = f"""
  221. SELECT
  222. MAX(p.merchant_name) AS mname,
  223. ROUND(SUM(COALESCE(p.team_total_amount, p.sold_count * p.unit_price)), 2) AS amount,
  224. COUNT(*) AS grp,
  225. (SELECT COUNT(DISTINCT r.hit_user_nickname)
  226. FROM deca_report_record r
  227. JOIN deca_product_record pp ON pp.product_code = r.product_code
  228. WHERE pp.merchant_user_id = %s
  229. AND pp.completed_at >= (CURDATE() - INTERVAL 1 DAY) + INTERVAL 17 HOUR
  230. AND pp.completed_at <= CURDATE() + INTERVAL 6 HOUR
  231. AND r.hit_user_nickname IS NOT NULL AND r.hit_user_nickname <> '') AS people
  232. FROM deca_product_record p
  233. WHERE p.merchant_user_id = %s AND {WIN_P}
  234. AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  235. """
  236. row = pool.select_all(sql, (mid, mid))
  237. mname, amount, groups, people = row[0] if row else (None, None, 0, 0)
  238. # 魔都/卡皇/尼卡(REAL_BUYER_MIDS)采了真实购买记录:参与人数改用 deca_buy_record 去重真实买家,
  239. # 人均消费随之按真实人头计(覆盖上面 people 的中卡近似值);其余重点商家无购买记录,仍沿用中卡近似。
  240. if mid in REAL_BUYER_MIDS:
  241. people = _fetch_real_buyers(pool, mid)
  242. d = _pack_summary(amount, groups, people)
  243. d["商家名"] = mname or mid
  244. d["商家ID"] = mid
  245. return d
  246. def fetch_merchant_details(pool, mid: str) -> list[dict]:
  247. """取单个商家时间窗内每个拼团(组队)的明细,按总金额倒序。
  248. Args:
  249. pool (MySQLConnectionPool): MySQL 连接池。
  250. mid (str): 商家 merchant_user_id。
  251. Returns:
  252. list[dict]: 每元素为一条明细(团名/系列/类型/单价/份数/总份数/进度/总金额/中卡人数/开售时间/成交时间/售卖时长/回放)。
  253. """
  254. sql = f"""
  255. SELECT
  256. p.title, p.series_name, p.spec_name, p.unit_price, p.sold_count, p.card_count,
  257. ROUND(COALESCE(p.team_total_amount, p.sold_count * p.unit_price), 2) AS amount,
  258. p.completed_at, p.sale_start_at,
  259. TIMESTAMPDIFF(SECOND, p.sale_start_at, p.completed_at) AS duration_secs,
  260. -- 中卡人数:该团拆卡报告去重命中用户(hit_user_nickname),中卡近似口径
  261. (SELECT COUNT(DISTINCT r.hit_user_nickname) FROM deca_report_record r
  262. WHERE r.product_code = p.product_code
  263. AND r.hit_user_nickname IS NOT NULL AND r.hit_user_nickname <> '') AS hit_users,
  264. p.replay_url
  265. FROM deca_product_record p
  266. WHERE p.merchant_user_id = %s AND {WIN_P}
  267. AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  268. ORDER BY amount DESC
  269. """
  270. rows = pool.select_all(sql, (mid,)) or []
  271. result = []
  272. for (title, series, spec, price, sold, card, amount,
  273. completed, sale_start, duration_secs, hit_users, replay) in rows:
  274. progress = round(sold / card * 100, 1) if card else None # 售卖进度百分比
  275. result.append({
  276. "团名": title, "系列": series, "类型": spec, "单价": price,
  277. "份数": sold, "总份数": card, "进度": progress, "总金额": amount,
  278. "中卡人数": hit_users, # 该团拆卡报告去重命中用户(中卡近似)
  279. "开售时间": sale_start, "成交时间": completed, # 开售=sale_start_at,成交=completed_at
  280. "售卖时长": _fmt_duration(duration_secs), # 差值=成交-开售,反映多快卖完
  281. "回放": replay,
  282. })
  283. return result
  284. def fetch_other_merchants(pool, exclude: list) -> list[dict]:
  285. """统计除重点商家外的其他商家汇总(时间窗内),每商家一行,按销售额倒序。
  286. Args:
  287. pool (MySQLConnectionPool): MySQL 连接池。
  288. exclude (list[str]): 要排除的重点商家 ID 列表。
  289. Returns:
  290. list[dict]: 每元素为一个商家的汇总(商家名/销售额/成团数/参与人数/均拼单价/人均消费)。
  291. """
  292. placeholders = ",".join(["%s"] * len(exclude))
  293. sql = f"""
  294. SELECT
  295. p.merchant_user_id AS mid,
  296. MAX(p.merchant_name) AS mname,
  297. ROUND(SUM(COALESCE(p.team_total_amount, p.sold_count * p.unit_price)), 2) AS amount,
  298. COUNT(*) AS grp,
  299. (SELECT COUNT(DISTINCT r.hit_user_nickname)
  300. FROM deca_report_record r
  301. JOIN deca_product_record pp ON pp.product_code = r.product_code
  302. WHERE pp.merchant_user_id = p.merchant_user_id
  303. AND pp.completed_at >= (CURDATE() - INTERVAL 1 DAY) + INTERVAL 17 HOUR
  304. AND pp.completed_at <= CURDATE() + INTERVAL 6 HOUR
  305. AND r.hit_user_nickname IS NOT NULL AND r.hit_user_nickname <> '') AS people
  306. FROM deca_product_record p
  307. WHERE {WIN_P} AND p.merchant_user_id NOT IN ({placeholders})
  308. AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  309. GROUP BY p.merchant_user_id
  310. ORDER BY amount DESC
  311. """
  312. rows = pool.select_all(sql, tuple(exclude)) or []
  313. result = []
  314. for mid, mname, amount, groups, people in rows:
  315. d = _pack_summary(amount, groups, people)
  316. d["商家名"] = mname or mid
  317. result.append(d)
  318. return result
  319. def _pack_summary(amount, groups, people, extra: dict = None) -> dict:
  320. """把销售额/成团数/参与人数打包成统一汇总 dict,并算均拼单价、人均消费。
  321. Args:
  322. amount (Decimal | None): 销售额。
  323. groups (int | None): 成团数。
  324. people (int | None): 参与人数。
  325. extra (dict, optional): 额外要合并的字段(如商家数)。Defaults to None。
  326. Returns:
  327. dict: 含 销售额/成团数/参与人数/均拼单价/人均消费(+extra)。
  328. """
  329. amount = float(amount) if amount is not None else 0.0
  330. groups = groups or 0
  331. people = people or 0
  332. avg_group = round(amount / groups, 2) if groups else None # 均拼单价=销售额/成团数
  333. avg_person = round(amount / people, 2) if people else None # 人均消费=销售额/参与人数
  334. d = {"销售额": round(amount, 2), "成团数": groups, "参与人数": people,
  335. "均拼单价": avg_group, "人均消费": avg_person}
  336. if extra:
  337. d.update(extra)
  338. return d
  339. def _fetch_real_buyers(pool, mid: str) -> int:
  340. """查某商家时间窗内 deca_buy_record 去重真实买家数(跨其全部成交团)。
  341. 魔都/卡皇/尼卡(REAL_BUYER_MIDS)采了真实购买记录,可用此口径(2026/08/24 由仅魔都扩为三家);
  342. 其余商家该表无数据、返回 0。
  343. Args:
  344. pool (MySQLConnectionPool): MySQL 连接池。
  345. mid (str): 商家 merchant_user_id。
  346. Returns:
  347. int: 去重真实买家数;无数据时返回 0。
  348. """
  349. sql = """
  350. SELECT COUNT(DISTINCT b.user_id)
  351. FROM deca_buy_record b
  352. JOIN deca_product_record pp ON pp.product_code = b.product_code
  353. WHERE pp.merchant_user_id = %s
  354. AND pp.completed_at >= (CURDATE() - INTERVAL 1 DAY) + INTERVAL 17 HOUR
  355. AND pp.completed_at <= CURDATE() + INTERVAL 6 HOUR
  356. """
  357. row = pool.select_all(sql, (mid,))
  358. return int(row[0][0]) if row and row[0][0] is not None else 0
  359. def _summary_rows(is_real: bool) -> list[tuple]:
  360. """按参与人数口径生成重点商家竖排汇总的(显示标签, 取值键)行规格。
  361. Args:
  362. is_real (bool): True=该商家参与人数为 deca_buy_record 真实买家(魔都/卡皇/尼卡),标签用
  363. 「参与人数(真实买家)」;False=中卡用户近似,标签用「中卡用户数(近似)」,人均消费
  364. 标签相应标注「(按中卡近似)」。
  365. Returns:
  366. list[tuple[str, str]]: 每项 (显示标签, data 取值键)。
  367. """
  368. people = ("参与人数(真实买家)" if is_real else "中卡用户数(近似)", "参与人数")
  369. person_avg = ("人均消费" if is_real else "人均消费(按中卡近似)", "人均消费")
  370. return [("销售额", "销售额"), ("成团数", "成团数"), people,
  371. ("均拼单价", "均拼单价"), person_avg]
  372. def fetch_moddu_details(pool, mid: str) -> list[dict]:
  373. """取某「已采真实购买记录」商家(mid)时间窗内每个拼团(组队)的扩展明细,按总金额倒序。
  374. 2026/08/24:函数名沿用 moddu(魔都),但已泛化到 REAL_BUYER_MIDS 三家(魔都/卡皇/尼卡)——
  375. SQL 全按 mid 参数查、对任意商家成立,故复用同一函数、按传入 mid 出各商家扩展明细。
  376. 在标准明细基础上多两类字段(原「魔都已售进度检测」独立 sheet 于 2026/08/11 并入此处):
  377. - 参与人数:deca_buy_record 去重买家 user_id(真实参团人头;仅本商家采了购买记录)。
  378. - 到 25/50/75% 用时:用 deca_onsale_product_progress_record(分钟级进度序列)里
  379. `MIN(captured_at) WHERE progress_pct >= X` 减开售时间 sale_start_at 得到。
  380. 仅当该商品在 tX 之前还有更早快照(证明从低于 X% 就开始观测)时才算真实穿越耗时;
  381. 若首张快照 pct 已 ≥ X(坍缩)则该列留空,不输出「首次被监控时刻−开售」的假值。
  382. 原「到100%用时」已于 2026/08/12 删除:满仓即下架、轮询抓不到 100% 快照,且与售卖时长重复。
  383. 进度里程碑仅"progress 表上线(2026/08/11)后覆盖到售卖过程"的团才有值;更早售卖或首张
  384. 快照已越过阈值的团查不到/不可信,相应列留空——商品行本身仍显示(总金额/成交时间等基础字段)。
  385. Args:
  386. pool (MySQLConnectionPool): MySQL 连接池。
  387. mid (str): 商家 merchant_user_id。
  388. Returns:
  389. list[dict]: 每条含 团名/系列/类型/单价/总份数/进度/总金额/参与人数(购买记录)/中卡人数/
  390. 开售时间/成交时间/售卖时长/到25%用时/到50%用时/到75%用时。
  391. """
  392. sql = f"""
  393. SELECT
  394. p.title, p.series_name, p.spec_name, p.unit_price, p.sold_count, p.card_count,
  395. ROUND(COALESCE(p.team_total_amount, p.sold_count * p.unit_price), 2) AS amount,
  396. p.sale_start_at, p.completed_at,
  397. TIMESTAMPDIFF(SECOND, p.sale_start_at, p.completed_at) AS duration_secs,
  398. (SELECT COUNT(DISTINCT b.user_id) FROM deca_buy_record b
  399. WHERE b.product_code = p.product_code) AS buyers,
  400. -- 中卡人数:该团拆卡报告去重命中用户(hit_user_nickname),中卡近似口径
  401. (SELECT COUNT(DISTINCT r.hit_user_nickname) FROM deca_report_record r
  402. WHERE r.product_code = p.product_code
  403. AND r.hit_user_nickname IS NOT NULL AND r.hit_user_nickname <> '') AS hit_users,
  404. -- 该商品最早一条进度快照时刻:用于判定里程碑是否「坍缩」(首张快照已越过阈值则该用时不可信)
  405. (SELECT MIN(pr.captured_at) FROM deca_onsale_product_progress_record pr
  406. WHERE pr.product_code = p.product_code) AS first_cap,
  407. (SELECT MIN(pr.captured_at) FROM deca_onsale_product_progress_record pr
  408. WHERE pr.product_code = p.product_code AND pr.progress_pct >= 25) AS t25,
  409. (SELECT MIN(pr.captured_at) FROM deca_onsale_product_progress_record pr
  410. WHERE pr.product_code = p.product_code AND pr.progress_pct >= 50) AS t50,
  411. (SELECT MIN(pr.captured_at) FROM deca_onsale_product_progress_record pr
  412. WHERE pr.product_code = p.product_code AND pr.progress_pct >= 75) AS t75
  413. FROM deca_product_record p
  414. WHERE p.merchant_user_id = %s AND {WIN_P}
  415. AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  416. ORDER BY amount DESC
  417. """
  418. rows = pool.select_all(sql, (mid,)) or []
  419. result = []
  420. for (title, series, spec, price, sold, card, amount, start, completed,
  421. duration_secs, buyers, hit_users, first_cap, t25, t50, t75) in rows:
  422. progress = round(sold / card * 100, 1) if card else None # 售卖进度百分比
  423. result.append({
  424. "团名": title, "系列": series, "类型": spec, "单价": price,
  425. "总份数": card, "进度": progress, "总金额": amount,
  426. "参与人数": buyers,
  427. "中卡人数": hit_users, # 该团拆卡报告去重命中用户(中卡近似)
  428. "开售时间": start, "成交时间": completed, # 开售=sale_start_at,成交=completed_at
  429. "售卖时长": _fmt_duration(duration_secs), # 成交-开售,也即整团总时长
  430. # 到 X% 用时:仅当该商品在 tX 之前还有更早快照(未坍缩)时才输出真实穿越耗时,否则留空
  431. "到25%用时": _milestone_used(t25, first_cap, start),
  432. "到50%用时": _milestone_used(t50, first_cap, start),
  433. "到75%用时": _milestone_used(t75, first_cap, start),
  434. })
  435. return result
  436. def fetch_moddu_user_ranking(pool, mid: str, top_n: int) -> tuple[list[dict], int]:
  437. """取某「已采真实购买记录」商家时间窗内的用户参与排行(按参与金额倒序,取前 top_n)。
  438. 「一个拼团商品 = 一辆车(组队)」,以 deca_buy_record 购买记录按买家 user_id 聚合:
  439. - 参与车数 = COUNT(DISTINCT product_code),该买家窗口内参与的不同团数。
  440. - 参与金额 = SUM(card_count × 该团 unit_price)。deca_buy_record 无金额字段,故用
  441. 「购买份数 × 团单价」估算;固定价团精确,随机团(选队随机/剩余随机)每队价不同,
  442. 此处按标称单价近似。同一买家在同一团的多条购买记录已由 SUM 累加。
  443. - 车均消费 = 参与金额 ÷ 参与车数。
  444. 魔都/卡皇/尼卡(REAL_BUYER_MIDS)采了购买记录,均可出此榜(2026/08/24 由仅魔都扩为三家)。
  445. Args:
  446. pool (MySQLConnectionPool): MySQL 连接池。
  447. mid (str): 商家 merchant_user_id。
  448. top_n (int): 榜单展示上限(取金额倒序前 N)。
  449. Returns:
  450. tuple[list[dict], int]: (rows, total_users);rows 每项含 用户昵称/user_id/参与车数/
  451. 参与金额/车均消费(已按金额倒序并截断到 top_n);total_users 为窗口内全部参与
  452. 买家数(供榜单标题展示、判断截断了多少)。
  453. """
  454. sql = f"""
  455. SELECT b.user_id,
  456. MAX(b.nickname) AS nickname,
  457. COUNT(DISTINCT b.product_code) AS cars,
  458. ROUND(SUM(b.card_count * p.unit_price), 2) AS amount
  459. FROM deca_buy_record b
  460. JOIN deca_product_record p ON p.product_code = b.product_code
  461. WHERE p.merchant_user_id = %s AND {WIN_P}
  462. AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  463. GROUP BY b.user_id
  464. ORDER BY amount DESC
  465. """
  466. rows = pool.select_all(sql, (mid,)) or []
  467. result = []
  468. for uid, nickname, cars, amount in rows[:top_n]:
  469. amt = float(amount) if amount is not None else 0.0
  470. cars = int(cars or 0)
  471. result.append({
  472. "用户昵称": nickname or "(匿名)",
  473. "user_id": uid,
  474. "参与车数": cars,
  475. "参与金额": round(amt, 2),
  476. "车均消费": round(amt / cars, 2) if cars else None, # 车均=参与金额/参与车数
  477. })
  478. return result, len(rows)
  479. def fetch_moddu_missing_teams(pool, mid: str) -> dict:
  480. """对比某「已采真实购买记录」商家成交明细与购买记录覆盖,算出漏采购买记录的 T(团)。
  481. 2026/08/24:函数名沿用 moddu,但已泛化到 REAL_BUYER_MIDS 三家(魔都/卡皇/尼卡),按 mid 参数查。
  482. 明细每条 = 一个成交拼团商品(T),来自 deca_product_record;购买记录 deca_buy_record 是另路采集的。
  483. 个别团在采到购买记录前就满仓成交下架,会「漏采」——本函数以时间窗内成交团为基准,找出
  484. deca_buy_record 里没有对应 product_code 的团,供各商家明细标注覆盖缺口。
  485. Args:
  486. pool (MySQLConnectionPool): MySQL 连接池。
  487. mid (str): 商家 merchant_user_id。
  488. Returns:
  489. dict: 含 成交团数/有记录团数/漏采团数/漏采团列表(list[(product_code, title)])。
  490. """
  491. total = pool.select_all(f"""
  492. SELECT COUNT(*) FROM deca_product_record p
  493. WHERE p.merchant_user_id = %s AND {WIN_P}
  494. AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  495. """, (mid,))[0][0] or 0
  496. miss = pool.select_all(f"""
  497. SELECT p.product_code, p.title
  498. FROM deca_product_record p
  499. WHERE p.merchant_user_id = %s AND {WIN_P}
  500. AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  501. AND NOT EXISTS(SELECT 1 FROM deca_buy_record b WHERE b.product_code = p.product_code)
  502. ORDER BY p.completed_at
  503. """, (mid,)) or []
  504. return {"成交团数": total, "有记录团数": total - len(miss),
  505. "漏采团数": len(miss), "漏采团列表": [(pc, t) for pc, t in miss]}
  506. def _fmt_duration(secs) -> str | None:
  507. """把售卖时长(秒)格式化为可读中文字符串。
  508. 差值口径 = 成交完成时间 completed_at − 开售时间 sale_start_at,反映该团多快卖完/售罄。
  509. Args:
  510. secs (int | None): 成交与开售之差(秒);None 或负数(时间缺失/异常)视为无效。
  511. Returns:
  512. str | None: 形如 "2小时13分" / "45分07秒" / "38秒";无效时返回 None(单元格留空)。
  513. """
  514. if secs is None or secs < 0:
  515. return None
  516. secs = int(secs)
  517. h, rem = divmod(secs, 3600)
  518. m, s = divmod(rem, 60)
  519. if h:
  520. return f"{h}小时{m}分"
  521. if m:
  522. return f"{m}分{s:02d}秒"
  523. return f"{s}秒"
  524. def _diff_secs(later, earlier) -> int | None:
  525. """算两个时间点相隔的秒数,兼容 varchar 与 datetime 两种输入。
  526. Args:
  527. later (str | datetime | None): 较晚的时间点(如到达某进度的时刻)。
  528. earlier (str | datetime | None): 较早的时间点(如开售时间)。
  529. Returns:
  530. int | None: 相隔秒数;任一为空或解析失败时返回 None。
  531. """
  532. if not later or not earlier:
  533. return None
  534. try:
  535. if isinstance(earlier, str):
  536. earlier = datetime.strptime(earlier, "%Y-%m-%d %H:%M:%S")
  537. if isinstance(later, str):
  538. later = datetime.strptime(later, "%Y-%m-%d %H:%M:%S")
  539. return int((later - earlier).total_seconds())
  540. except Exception:
  541. return None
  542. def _milestone_used(tx, first_cap, start) -> str | None:
  543. """算「到某进度用时」,首张快照已越过该阈值(坍缩)时诚实留空。
  544. 到 X% 用时 = 首次 progress_pct ≥ X 的快照时刻 tx − 开售时间 start。但只有当该商品在
  545. tx 之前还存在更早的快照(即 tx 晚于该商品最早快照 first_cap)时,才证明我们是从低于 X%
  546. 的进度观测到它穿越 X% 的,tx 才是真实穿越点;若首张快照 pct 就已 ≥ X(tx == first_cap),
  547. tx 只是「首次被监控的时刻」,据此算出的是假耗时,一律留空,绝不输出坍缩值。
  548. Args:
  549. tx (datetime | str | None): 首次 progress_pct ≥ 阈值的快照时刻;None 表示从未达到该进度。
  550. first_cap (datetime | str | None): 该商品最早一条快照的时刻。
  551. start (datetime | str | None): 开售时间 sale_start_at。
  552. Returns:
  553. str | None: 可读用时字符串;未达到/坍缩/时间缺失时返回 None(单元格留空)。
  554. """
  555. if tx is None or first_cap is None:
  556. return None
  557. # tx 与首张快照同刻 → 第一次看到它就已越过该阈值,无法确定真实穿越时刻,坍缩留空
  558. if not _diff_secs(tx, first_cap): # None(解析失败) 或 0(同刻) 都视为不可信
  559. return None
  560. return _fmt_duration(_diff_secs(tx, start))
  561. def _style_row(ws, row_idx: int, ncol: int, font=None, fill=None, border=True):
  562. """给某一行的前 ncol 个单元格套字体/填充/边框。
  563. Args:
  564. ws: openpyxl worksheet。
  565. row_idx (int): 行号(1-based)。
  566. ncol (int): 要处理的列数(从第 1 列起)。
  567. font (Font, optional): 字体。Defaults to None。
  568. fill (PatternFill, optional): 填充。Defaults to None。
  569. border (bool, optional): 是否加边框。Defaults to True。
  570. """
  571. for c in range(1, ncol + 1):
  572. cell = ws.cell(row=row_idx, column=c)
  573. if font:
  574. cell.font = font
  575. if fill:
  576. cell.fill = fill
  577. if border:
  578. cell.border = BORDER
  579. def _write_summary_block(ws, r: int, rows: list, data: dict, start_col: int = 1) -> int:
  580. """在第 r 行起竖排写汇总(每指标一行:标签列 + 数值列),返回下一空闲行。
  581. 竖排避免与明细表共用列宽导致的错位与金额列过窄(######)。显示标签与 data 取值键解耦,
  582. 以便同一指标在不同口径下用不同标签(如「参与人数(真实买家)」vs「中卡用户数(近似)」)。
  583. start_col 可让整块右移(明细 sheet 里落到宽的 B/C 列,避开 A=序号 的窄列)。
  584. Args:
  585. ws: openpyxl worksheet。
  586. r (int): 起始行号。
  587. rows (list[tuple[str, str]]): 每项 (显示标签, data 取值键)。
  588. data (dict): 汇总数据 dict。
  589. start_col (int, optional): 标签列的列号(1-based),数值列为其右一列。Defaults to 1。
  590. Returns:
  591. int: 下一个空闲行号。
  592. """
  593. for label, key in rows:
  594. lc = ws.cell(row=r, column=start_col, value=label) # 标签(加粗深蓝、浅蓝底、左对齐)
  595. lc.font = FONT_HEADER
  596. lc.fill = FILL_HEADER
  597. lc.alignment = ALIGN_LEFT
  598. lc.border = BORDER
  599. value = data.get(key)
  600. val = ws.cell(row=r, column=start_col + 1, value=value) # 数值(浅橙底、右对齐)
  601. if key in ("销售额", "均拼单价", "人均消费"): # 金额格式按稳定的取值键判定
  602. val.number_format = MONEY_FMT
  603. elif isinstance(value, int) and not isinstance(value, bool):
  604. val.number_format = INT_FMT # 计数千分位(成团数/参与人数/商家数)
  605. val.font = FONT_CELL
  606. val.fill = FILL_SUBTOTAL
  607. val.alignment = _align_by_value(value) # 数字右对齐、文字左对齐
  608. val.border = BORDER
  609. r += 1
  610. return r
  611. def _write_section_title(ws, r: int, text: str, span: int = SECTION_SPAN) -> int:
  612. """在第 r 行写一行分区标题条(蓝底白字),蓝条只覆盖 span 列(贴合本表宽度、右侧不留空)。
  613. Args:
  614. ws: openpyxl worksheet。
  615. r (int): 起始行号。
  616. text (str): 标题文字。
  617. span (int, optional): 蓝条覆盖列数。Defaults to SECTION_SPAN。
  618. Returns:
  619. int: 下一个空闲行号。
  620. """
  621. ws.cell(row=r, column=1, value=text)
  622. _style_row(ws, r, span, font=FONT_SECTION, fill=FILL_SECTION, border=False)
  623. return r + 1
  624. def _write_details(ws, r: int, details: list, cols: list) -> int:
  625. """在第 r 行起写一个商家的明细表(表头 + 每条组队明细)。
  626. Args:
  627. ws: openpyxl worksheet。
  628. r (int): 起始行号。
  629. details (list[dict]): 明细数据,每元素为一条组队明细 dict(fetch_merchant_details
  630. 或 fetch_moddu_details 的返回)。
  631. cols (list[tuple]): 列规格列表,每项 (表头, 取值键, 是否金额格式);取值键为「序号」
  632. 时按行号自增填充(DETAIL_COLS 或 MODDU_DETAIL_COLS)。
  633. Returns:
  634. int: 下一个空闲行号。
  635. """
  636. for i, (header, _key, _money) in enumerate(cols):
  637. hc = ws.cell(row=r, column=1 + i, value=header)
  638. hc.alignment = ALIGN_CENTER # 表头居中换行
  639. _style_row(ws, r, len(cols), font=FONT_HEADER, fill=FILL_HEADER)
  640. r += 1
  641. if not details:
  642. ws.cell(row=r, column=1, value="(该时段无成交)").font = FONT_CELL
  643. return r + 1
  644. for idx, d in enumerate(details, 1):
  645. zebra = FILL_ZEBRA if idx % 2 == 0 else None # 偶数行淡蓝灰,便于横向读长行
  646. for i, (_header, key, is_money) in enumerate(cols):
  647. value = idx if key == "序号" else d.get(key) # 「序号」列用行号,其余按键取值
  648. cell = ws.cell(row=r, column=1 + i, value=value)
  649. if is_money:
  650. cell.number_format = MONEY_FMT
  651. elif isinstance(value, int) and not isinstance(value, bool):
  652. cell.number_format = INT_FMT # 计数千分位(序号/份数/总份数/参与人数)
  653. cell.font = FONT_CELL
  654. cell.alignment = _align_by_value(value) # 数字右、文字左(时长/日期/团名等)
  655. cell.border = BORDER
  656. if zebra:
  657. cell.fill = zebra
  658. r += 1
  659. return r
  660. def _window_metrics(pool, win: str) -> dict:
  661. """统计某成交时间窗内的组齐核心指标(GMV / 成团数 / 活跃商家数 / T均单价)。
  662. Args:
  663. pool (MySQLConnectionPool): MySQL 连接池。
  664. win (str): 完整的 completed_at 时间窗 WHERE 片段(如 WIN_P / WIN_P_YDAY)。
  665. Returns:
  666. dict: 含 组齐GMV/成团数/活跃商家数/T均单价(成团数为 0 时 T均单价为 None)。
  667. """
  668. sql = f"""
  669. SELECT ROUND(SUM(COALESCE(p.team_total_amount, p.sold_count * p.unit_price)), 2) AS gmv,
  670. COUNT(*) AS grp,
  671. COUNT(DISTINCT p.merchant_user_id) AS merchants
  672. FROM deca_product_record p
  673. WHERE {win} AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  674. """
  675. gmv, groups, merchants = pool.select_all(sql)[0]
  676. gmv = float(gmv) if gmv is not None else 0.0
  677. groups = groups or 0
  678. return {"组齐GMV": round(gmv, 2), "成团数": groups, "活跃商家数": merchants or 0,
  679. "T均单价": round(gmv / groups, 2) if groups else None} # T均单价=组齐GMV/成团数
  680. def fetch_groupbuy_compare(pool) -> dict:
  681. """取当日窗口与昨日同窗口的组齐指标,供「当日组齐环比」区展示。
  682. Args:
  683. pool (MySQLConnectionPool): MySQL 连接池。
  684. Returns:
  685. dict: {"today": {...}, "yday": {...}},各含 组齐GMV/成团数/活跃商家数/T均单价。
  686. """
  687. return {"today": _window_metrics(pool, WIN_P), "yday": _window_metrics(pool, WIN_P_YDAY)}
  688. def classify_category(title: str, series: str = "") -> str:
  689. """从标题(+系列名)判定得卡品类(平台无独立品类字段,只能按关键词判)。
  690. 规则:优先中文运动词(篮球/NBA、足球/FIFA/世界杯、棒球/MLB、橄榄/NFL)——运动词多作标题前缀出现、判准率高;
  691. 再判 TCG(宝可梦、海贼王、游戏王);都不中归「其他」。实测 2053 团仅 5 个落「其他」,且那 5 个标题本就写
  692. 「其他运动」/为冷门 TCG(Weiss Schwarz),判类可靠。
  693. Args:
  694. title (str): 商品标题。
  695. series (str, optional): 系列名(series_name),一并参与匹配。Defaults to ""。
  696. Returns:
  697. str: 品类名(篮球/足球/棒球/橄榄球/宝可梦/海贼王/游戏王/其他)。
  698. """
  699. t = f"{title} {series}"
  700. tl = t.lower()
  701. if "篮球" in t or "nba" in tl:
  702. return "篮球"
  703. if "足球" in t or "fifa" in tl or "世界杯" in t or "英超" in t or "欧冠" in t:
  704. return "足球"
  705. if "棒球" in t or "mlb" in tl:
  706. return "棒球"
  707. if "橄榄" in t or "nfl" in tl:
  708. return "橄榄球"
  709. if (any(k in t for k in ["宝可梦", "寶可夢", "皮卡丘", "朋友派对", "乐园腾龙", "绿宝石",
  710. "超级梦想", "超梦", "卡牌151", "黑白闪", "狂热", "朱紫"])
  711. or re.search(r"\bsv\d", tl) or " ex " in f" {tl} "):
  712. return "宝可梦"
  713. if (any(k in t for k in ["海贼", "航海王", "路飞", "艾斯", "索隆", "娜美"])
  714. or re.search(r"op-?\d", tl) or re.search(r"st-?\d", tl)):
  715. return "海贼王"
  716. if "游戏王" in t or "遊戲王" in t or "ygo" in tl:
  717. return "游戏王"
  718. return "其他"
  719. def fetch_category_series(pool, top_n: int) -> tuple[list, float, list, float]:
  720. """取当日窗口内「品类汇总」与「系列榜」(均按 GMV 倒序),供品类·系列榜 sheet。
  721. 平台无品类字段,逐团用 classify_category(标题+系列) 判类后在 Python 聚合:
  722. - 品类汇总:每品类的 成团数 / GMV(全部品类,倒序)。
  723. - 系列榜:每系列的 成团数 / GMV / 所属品类(取该系列下出现团数最多的品类),按 GMV 取前 top_n。
  724. Args:
  725. pool (MySQLConnectionPool): MySQL 连接池。
  726. top_n (int): 系列榜取前 N。
  727. Returns:
  728. tuple[list, float, list, float]: (cat_rows, cat_total, series_rows, series_total)。
  729. cat_rows 每项 (品类, 成团数, GMV);series_rows 每项 (系列, 品类, 成团数, GMV);
  730. 两个 total 为 GMV 合计(算占比分母,二者相等=全窗口 GMV)。
  731. """
  732. sql = f"""
  733. SELECT p.title, COALESCE(NULLIF(p.series_name, ''), '(未标系列)') AS series,
  734. ROUND(COALESCE(p.team_total_amount, p.sold_count * p.unit_price), 2) AS gmv
  735. FROM deca_product_record p
  736. WHERE {WIN_P} AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  737. """
  738. rows = pool.select_all(sql) or []
  739. cat_agg = {} # 品类 -> [成团数, GMV]
  740. ser_agg = {} # 系列 -> {"grp": n, "gmv": x, "cat": {品类: 团数}}
  741. for title, series, gmv in rows:
  742. g = float(gmv) if gmv is not None else 0.0
  743. cat = classify_category(title or "", series or "")
  744. ca = cat_agg.setdefault(cat, [0, 0.0]); ca[0] += 1; ca[1] += g
  745. sa = ser_agg.setdefault(series, {"grp": 0, "gmv": 0.0, "cat": {}})
  746. sa["grp"] += 1; sa["gmv"] += g
  747. sa["cat"][cat] = sa["cat"].get(cat, 0) + 1
  748. total = round(sum(v[1] for v in cat_agg.values()), 2)
  749. cat_rows = sorted([(k, v[0], round(v[1], 2)) for k, v in cat_agg.items()],
  750. key=lambda x: x[2], reverse=True)
  751. series_rows = sorted(
  752. [(name, max(v["cat"], key=v["cat"].get), v["grp"], round(v["gmv"], 2))
  753. for name, v in ser_agg.items()],
  754. key=lambda x: x[3], reverse=True)[:top_n]
  755. return cat_rows, total, series_rows, total
  756. # 需维护 category 品类字段的表:品类由 classify_category 从标题判定后落库,方便直接按品类查询/聚合(GROUP BY category)
  757. CATEGORY_TABLES = ("deca_product_record", "deca_onsale_product_record")
  758. def backfill_category(pool, tables: tuple = CATEGORY_TABLES, only_null: bool = True) -> int:
  759. """把品类判定结果(classify_category)落库到各表的 category 列,返回累计更新行数。
  760. 平台无品类字段、品类靠标题判定;本函数将判定结果写入 category 列,供后续直接按品类查库(无需每次重算)。
  761. 分类逻辑与报告共用 classify_category,口径一致。按品类分组、分块 UPDATE,减少 SQL 往返。
  762. Args:
  763. pool (MySQLConnectionPool): MySQL 连接池。
  764. tables (tuple[str], optional): 要回填的表名。Defaults to CATEGORY_TABLES。
  765. only_null (bool, optional): True 只补 category IS NULL 的行(日常报告前调用,仅补新增,成本低);
  766. False 全量重算(分类规则调整后手动全刷一次)。Defaults to True。
  767. Returns:
  768. int: 累计更新行数。
  769. """
  770. from collections import defaultdict
  771. total = 0
  772. for tbl in tables:
  773. where = "WHERE category IS NULL" if only_null else ""
  774. rows = pool.select_all(
  775. f"SELECT product_code, title, COALESCE(series_name, '') FROM {tbl} {where}") or []
  776. by_cat = defaultdict(list)
  777. for code, title, series in rows:
  778. if code is None:
  779. continue
  780. by_cat[classify_category(title or "", series or "")].append(code)
  781. for cat, codes in by_cat.items():
  782. for i in range(0, len(codes), 500): # 分块,避免超长 IN 列表
  783. chunk = codes[i:i + 500]
  784. ph = ",".join(["%s"] * len(chunk))
  785. pool.update_one(
  786. f"UPDATE {tbl} SET category=%s WHERE product_code IN ({ph})", (cat, *chunk))
  787. total += sum(len(c) for c in by_cat.values())
  788. return total
  789. def fetch_merchant_gmv_ranking(pool) -> tuple[list, float, dict]:
  790. """取当日窗口内全部商家的组齐 GMV 榜(倒序)及 Top1/3/5/10 集中度占比。
  791. 集中度 = 前 K 名商家 GMV 之和 ÷ 平台组齐总 GMV,反映头部商家对大盘的贡献集中程度。
  792. Args:
  793. pool (MySQLConnectionPool): MySQL 连接池。
  794. Returns:
  795. tuple[list, float, dict]: (rows, total_gmv, concentration);rows 每项
  796. (商家名, 成团数, GMV)(全量、倒序);concentration 形如 {1: 0.32, 3: 0.55, ...}。
  797. """
  798. sql = f"""
  799. SELECT MAX(p.merchant_name) AS mname,
  800. COUNT(*) AS grp,
  801. ROUND(SUM(COALESCE(p.team_total_amount, p.sold_count * p.unit_price)), 2) AS gmv
  802. FROM deca_product_record p
  803. WHERE {WIN_P} AND p.unit_price IS NOT NULL AND p.sold_count IS NOT NULL
  804. GROUP BY p.merchant_user_id
  805. ORDER BY gmv DESC
  806. """
  807. rows = pool.select_all(sql) or []
  808. gmvs = [float(r[2]) if r[2] is not None else 0.0 for r in rows]
  809. total = sum(gmvs)
  810. conc = {k: (sum(gmvs[:k]) / total if total else None) for k in CONC_TOPS}
  811. return rows, total, conc
  812. def fetch_focus_ops_snapshot(pool, mid: str) -> dict:
  813. """取重点商家「当日新开团 / 已组齐 / 规格分布」运营快照(口径:publish_at 落在报告时间窗 [昨17:00, 今06:00])。
  814. 「已组齐」= 当日新开团里 product_code 已出现在成交表(deca_product_record 有 completed_at)的数量;
  815. 「规格分布」按在售表 spec_name 聚合,形如 原箱×2 · 单盒×20。对应监测清单「魔都、卡皇当天销售细节」。
  816. Args:
  817. pool (MySQLConnectionPool): MySQL 连接池。
  818. mid (str): 商家 merchant_user_id。
  819. Returns:
  820. dict: 含 商家名/新开团数/已组齐数/规格分布(list[(规格, 数量)])。
  821. """
  822. # 口径对齐报告成交时间窗(2026/08/17):新开团/已组齐/规格均按 publish_at 落在[昨17:00,今06:00]统计。
  823. # 原为自然日 DATE(publish_at)=CURDATE(),会漏掉前一晚上新的团(如卡皇昨晚 22:42 上新→自然日今天为 0)。
  824. base = ("FROM deca_onsale_product_record o "
  825. "WHERE o.merchant_user_id = %s "
  826. "AND o.publish_at >= (CURDATE() - INTERVAL 1 DAY) + INTERVAL 17 HOUR "
  827. "AND o.publish_at <= CURDATE() + INTERVAL 6 HOUR")
  828. # 商家名单独取(不加「当日」条件):某商家当天没上新团时仍能显示名称,避免回退成纯 ID(2026/08/17)
  829. mname_row = pool.select_one(
  830. "SELECT MAX(merchant_name) FROM deca_onsale_product_record WHERE merchant_user_id = %s", (mid,))
  831. mname = mname_row[0] if mname_row else None
  832. total_new = pool.select_one(f"SELECT COUNT(*) {base}", (mid,))[0] or 0
  833. done = pool.select_one(
  834. f"SELECT COUNT(*) {base} "
  835. f"AND EXISTS(SELECT 1 FROM deca_product_record c "
  836. f"WHERE c.product_code = o.product_code AND c.completed_at IS NOT NULL)", (mid,))[0] or 0
  837. spec_rows = pool.select_all(
  838. f"SELECT COALESCE(NULLIF(o.spec_name, ''), '其它') sp, COUNT(*) c {base} "
  839. f"GROUP BY sp ORDER BY c DESC", (mid,)) or []
  840. return {"商家名": mname or mid, "新开团数": total_new, "已组齐数": done,
  841. "规格分布": [(r[0], int(r[1])) for r in spec_rows]}
  842. def fetch_completion_hour_dist(pool, days: int) -> list[int]:
  843. """统计近 N 天全部成交(组齐)按小时的 24 桶分布,反映平台 24h 组齐节奏。
  844. Args:
  845. pool (MySQLConnectionPool): MySQL 连接池。
  846. days (int): 回看天数(含今天)。
  847. Returns:
  848. list[int]: 长度 24 的列表,索引 = 小时(0~23),值 = 该小时成交团数。
  849. """
  850. sql = """
  851. SELECT HOUR(p.completed_at) AS h, COUNT(*) AS c
  852. FROM deca_product_record p
  853. WHERE p.completed_at >= CURDATE() - INTERVAL %s DAY AND p.completed_at IS NOT NULL
  854. GROUP BY h
  855. """
  856. dist = [0] * 24
  857. for h, c in pool.select_all(sql, (days,)) or []:
  858. if h is not None and 0 <= int(h) < 24:
  859. dist[int(h)] = int(c)
  860. return dist
  861. def _bar(value: int, max_value: int, width: int = 20) -> str:
  862. """把数值渲染成等宽条形字符串(Excel 内迷你直方图)。
  863. Args:
  864. value (int): 当前值。
  865. max_value (int): 该组最大值(归一化条长用)。
  866. width (int, optional): 满值时的条长(字符数)。Defaults to 20。
  867. Returns:
  868. str: 由 █ 组成的条;max_value<=0 或 value<=0 时返回空串。
  869. """
  870. if max_value <= 0 or value <= 0:
  871. return ""
  872. return "█" * max(1, round(value / max_value * width))
  873. def _fmt_pct_change(cur, prev) -> str:
  874. """把本期/上期数值算成带符号的环比字符串。
  875. Args:
  876. cur (float | int | None): 本期值。
  877. prev (float | int | None): 上期值。
  878. Returns:
  879. str: 形如 "+12.3%" / "-8.0%";上期为 0 时本期>0 返回 "新增"、否则 "—"。
  880. """
  881. c = float(cur) if cur is not None else 0.0
  882. p = float(prev) if prev is not None else 0.0
  883. if p == 0:
  884. return "新增" if c > 0 else "—"
  885. return f"{(c - p) / p * 100:+.1f}%"
  886. def _write_hgrid(ws, r: int, headers: list, rows: list, money_cols=(), pct_cols=(),
  887. start_col: int = 1, empty_hint: str = "(无数据)") -> int:
  888. """在第 r 行起写一张普通横向表(表头 + 数据行),套统一样式,返回下一空闲行。
  889. 可用 start_col 让表整体右移,把长文本列落在预设的宽列上(本 sheet B 列宽 50)。
  890. Args:
  891. ws: openpyxl worksheet。
  892. r (int): 起始行号。
  893. headers (list[str]): 列表头。
  894. rows (list[list]): 数据行,每行长度应 ≤ len(headers)。
  895. money_cols (tuple[int], optional): 需金额格式的列下标(0-based)。Defaults to ()。
  896. pct_cols (tuple[int], optional): 需百分比格式的列下标(0-based,存小数如 0.32)。Defaults to ()。
  897. start_col (int, optional): 起始列号(1-based)。Defaults to 1。
  898. empty_hint (str, optional): rows 为空时的占位文字。Defaults to "(无数据)"。
  899. Returns:
  900. int: 下一个空闲行号。
  901. """
  902. for i, h in enumerate(headers):
  903. cell = ws.cell(row=r, column=start_col + i, value=h)
  904. cell.font = FONT_HEADER
  905. cell.fill = FILL_HEADER
  906. cell.alignment = ALIGN_CENTER # 表头居中
  907. cell.border = BORDER
  908. r += 1
  909. if not rows:
  910. c = ws.cell(row=r, column=start_col, value=empty_hint)
  911. c.font = FONT_CELL
  912. c.border = BORDER
  913. return r + 1
  914. n = len(headers)
  915. for ri, row in enumerate(rows):
  916. zebra = FILL_ZEBRA if ri % 2 == 1 else None # 隔行淡蓝灰
  917. for i in range(n):
  918. v = row[i] if i < len(row) else None
  919. cell = ws.cell(row=r, column=start_col + i, value=v)
  920. if i in money_cols:
  921. cell.number_format = MONEY_FMT
  922. elif i in pct_cols:
  923. cell.number_format = "0.0%"
  924. elif isinstance(v, int) and not isinstance(v, bool):
  925. cell.number_format = INT_FMT # 计数千分位(成团数等)
  926. cell.font = FONT_CELL
  927. # 金额/占比/数字右对齐;条形图列(█ 文本)与名称等文字左对齐
  928. cell.alignment = ALIGN_RIGHT if (i in money_cols or i in pct_cols) else _align_by_value(v)
  929. cell.border = BORDER
  930. if zebra:
  931. cell.fill = zebra
  932. r += 1
  933. return r
  934. def _set_widths(ws, widths: list):
  935. """按列表顺序设置 A、B、C… 列宽(仅前 26 列,够覆盖本报告各 sheet)。
  936. Args:
  937. ws: openpyxl worksheet。
  938. widths (list[float]): 各列宽度,索引 0→A、1→B…。
  939. """
  940. for i, w in enumerate(widths):
  941. ws.column_dimensions[chr(65 + i)].width = w
  942. def _build_overview_sheet(ws, win: tuple, platform: dict, compare: dict,
  943. mrank_conc: dict, notes: list):
  944. """构建「平台总览」sheet:平台汇总 + 当日组齐环比 + 商家 GMV 集中度 + 口径脚注。
  945. Args:
  946. ws: openpyxl worksheet。
  947. win (tuple[str, str]): (成交窗起, 成交窗止)。
  948. platform (dict): 平台汇总数据。
  949. compare (dict): 组齐环比数据(today/yday)。
  950. mrank_conc (dict): Top1/3/5/10 集中度占比。
  951. notes (list[str]): 口径脚注文本。
  952. """
  953. _set_widths(ws, [32, 18, 18, 12])
  954. r = 1
  955. ws.cell(row=r, column=1, value="得卡 DECA · 已售每日统计报告")
  956. _style_row(ws, r, 4, font=FONT_TITLE, border=False)
  957. r += 1
  958. ws.cell(row=r, column=1, value=f"成交时间窗 {win[0]} ~ {win[1]}")
  959. _style_row(ws, r, 4, font=FONT_CELL, border=False)
  960. r += 2
  961. # 平台汇总(竖排 标签/数值)
  962. r = _write_section_title(ws, r, "平台汇总", span=4)
  963. r = _write_summary_block(ws, r, PLATFORM_ROWS, platform, start_col=1)
  964. r += 1
  965. # 当日组齐环比(金额行今日/昨日单独套金额格式;环比列涨绿跌红)
  966. r = _write_section_title(ws, r, "当日组齐环比(vs 昨日同窗口)", span=4)
  967. for i, h in enumerate(["指标", "今日", "昨日", "环比"]):
  968. c = ws.cell(row=r, column=1 + i, value=h)
  969. c.font = FONT_HEADER; c.fill = FILL_HEADER
  970. c.alignment = ALIGN_CENTER; c.border = BORDER
  971. r += 1
  972. t_now, t_yday = compare["today"], compare["yday"]
  973. for ri, (key, is_money) in enumerate((("组齐GMV", True), ("成团数", False),
  974. ("活跃商家数", False), ("T均单价", True))):
  975. zebra = FILL_ZEBRA if ri % 2 == 1 else None
  976. lc = ws.cell(row=r, column=1, value=key) # 指标名:左对齐
  977. lc.font = FONT_CELL; lc.alignment = ALIGN_LEFT
  978. cur = ws.cell(row=r, column=2, value=t_now.get(key))
  979. prev = ws.cell(row=r, column=3, value=t_yday.get(key))
  980. for cell in (cur, prev): # 今日/昨日:金额或计数、右对齐
  981. cell.number_format = MONEY_FMT if is_money else INT_FMT
  982. cell.font = FONT_CELL; cell.alignment = ALIGN_RIGHT
  983. chg = _fmt_pct_change(t_now.get(key), t_yday.get(key))
  984. cc = ws.cell(row=r, column=4, value=chg) # 环比:右对齐 + 涨绿跌红
  985. cc.font = _trend_font(chg); cc.alignment = ALIGN_RIGHT
  986. for col in range(1, 5):
  987. cell = ws.cell(row=r, column=col)
  988. cell.border = BORDER
  989. if zebra:
  990. cell.fill = zebra
  991. r += 1
  992. r += 1
  993. # 商家 GMV 集中度(详细榜单在「商家GMV榜」sheet)
  994. r = _write_section_title(ws, r, "商家 GMV 集中度(TopN 占平台组齐总 GMV)", span=4)
  995. conc_rows = [[f"Top{k} 集中度", mrank_conc.get(k)] for k in CONC_TOPS]
  996. r = _write_hgrid(ws, r, ["集中度档位", "占平台GMV"], conc_rows, pct_cols=(1,), start_col=1)
  997. r += 2
  998. # 口径脚注(长文本,向右溢出到空列显示)
  999. for note in notes:
  1000. ws.cell(row=r, column=1, value=note).font = FONT_CELL
  1001. r += 1
  1002. def _build_category_series_sheet(ws, cat_rows: list, cat_total: float,
  1003. series_rows: list, series_total: float):
  1004. """构建「品类·系列榜」sheet:上段品类汇总(成团数/GMV/占比) + 下段系列榜(带品类列)。
  1005. Args:
  1006. ws: openpyxl worksheet。
  1007. cat_rows (list): [(品类, 成团数, GMV)],按 GMV 倒序(全部品类)。
  1008. cat_total (float): 品类 GMV 合计(算占比分母)。
  1009. series_rows (list): [(系列, 品类, 成团数, GMV)],按 GMV 倒序、已截断 Top N。
  1010. series_total (float): 系列 GMV 合计(=全窗口 GMV,算占比分母)。
  1011. """
  1012. _set_widths(ws, [36, 12, 16, 10, 10])
  1013. # 上段:品类汇总(成团数 + GMV + 占比)
  1014. r = _write_section_title(ws, 1, "品类汇总(当日,按 GMV 倒序;品类由标题判定)", span=5)
  1015. crows = [[c, int(g), float(gmv),
  1016. (float(gmv) / cat_total if cat_total else None)] for c, g, gmv in cat_rows]
  1017. r = _write_hgrid(ws, r, ["品类", "成团数", "GMV", "占比"], crows,
  1018. money_cols=(2,), pct_cols=(3,), start_col=1)
  1019. r += 1
  1020. # 下段:系列榜(比原版多「品类」列)
  1021. r = _write_section_title(ws, r, f"产品系列销售榜(当日 Top{TOP_SERIES},按 GMV)", span=5)
  1022. srows = [[name, cat, int(g), float(gmv),
  1023. (float(gmv) / series_total if series_total else None)]
  1024. for name, cat, g, gmv in series_rows]
  1025. _write_hgrid(ws, r, ["系列", "品类", "成团数", "GMV", "占比"], srows,
  1026. money_cols=(3,), pct_cols=(4,), start_col=1)
  1027. ws.freeze_panes = "A2" # 冻结顶部品类汇总标题
  1028. def _build_mrank_sheet(ws, mrank_rows: list, mrank_total: float):
  1029. """构建「商家GMV榜」sheet:当日组齐 GMV 前 N 商家 + 占比。
  1030. Args:
  1031. ws: openpyxl worksheet。
  1032. mrank_rows (list): [(商家名, 成团数, GMV)](全量倒序)。
  1033. mrank_total (float): 平台组齐总 GMV(算占比分母)。
  1034. """
  1035. _set_widths(ws, [24, 10, 16, 10])
  1036. r = _write_section_title(ws, 1, f"商家 GMV 榜(当日组齐口径,前 {TOP_MERCHANT})", span=4)
  1037. mrows = [[name, int(g), float(gmv) if gmv is not None else 0,
  1038. (float(gmv) / mrank_total if (mrank_total and gmv is not None) else None)]
  1039. for name, g, gmv in mrank_rows[:TOP_MERCHANT]]
  1040. _write_hgrid(ws, r, ["商家", "成团数", "GMV", "占比"], mrows,
  1041. money_cols=(2,), pct_cols=(3,), start_col=1)
  1042. ws.freeze_panes = "A3"
  1043. def _build_ops_sheet(ws, ops: list, hour_dist: list):
  1044. """构建「运营节奏」sheet:重点商家当日运营快照 + 平台组齐时段分布。
  1045. Args:
  1046. ws: openpyxl worksheet。
  1047. ops (list[dict]): 各重点商家运营快照。
  1048. hour_dist (list[int]): 24 桶组齐时段分布。
  1049. """
  1050. _set_widths(ws, [16, 12, 22, 44]) # C 兼容 已组齐(数字) 与 时段分布条;D 放规格分布长文本
  1051. r = _write_section_title(ws, 1, "重点商家当日运营快照(新开团 / 已组齐 / 规格)", span=4)
  1052. ops_rows = [[o["商家名"], o["新开团数"], o["已组齐数"],
  1053. " · ".join(f"{sp}×{c}" for sp, c in o["规格分布"]) or "—"] for o in ops]
  1054. r = _write_hgrid(ws, r, ["商家", "今日新开团", "已组齐", "规格分布"], ops_rows, start_col=1)
  1055. r += 1
  1056. r = _write_section_title(ws, r, f"平台组齐时段分布(近 {HOUR_DIST_DAYS} 日 24h 累计)", span=4)
  1057. hmax = max(hour_dist) if hour_dist else 0
  1058. hrows = [[f"{h:02d}时", hour_dist[h], _bar(hour_dist[h], hmax)] for h in range(24)]
  1059. _write_hgrid(ws, r, ["时段", "成团数", "分布"], hrows, start_col=1)
  1060. def _build_detail_sheet(ws, title: str, summ: dict, details: list, cols: list,
  1061. is_real: bool, span: int, widths: list, miss_info: dict = None,
  1062. short_name: str = None):
  1063. """构建单个重点商家的明细 sheet:汇总(缩到 B/C 列) + 每条组队明细(从 A 列起)。
  1064. Args:
  1065. ws: openpyxl worksheet。
  1066. title (str): sheet 顶部分区标题(含商家名与时间窗)。
  1067. summ (dict): 该商家汇总数据。
  1068. details (list[dict]): 每条组队明细。
  1069. cols (list[tuple]): 明细列规格(DETAIL_COLS / MODDU_DETAIL_COLS)。
  1070. is_real (bool): 参与人数是否真实买家口径(魔都/卡皇/尼卡 True,其余 False)。
  1071. span (int): 标题条覆盖列数(= 明细列数)。
  1072. widths (list[float]): 各列宽度。
  1073. miss_info (dict, optional): 购买记录覆盖检测(fetch_moddu_missing_teams 返回);非 None
  1074. 时在汇总块下方加「购买记录覆盖检测」小节,标注漏采多少 T 并列出漏团。仅已采购买记录的
  1075. 商家(魔都/卡皇/尼卡)传入。Defaults to None。
  1076. short_name (str, optional): 该商家简称(魔都/卡皇/尼卡),用于覆盖检测提示里指向对应
  1077. 「用户排行榜(简称)」sheet。Defaults to None。
  1078. """
  1079. _set_widths(ws, widths)
  1080. r = _write_section_title(ws, 1, title, span=span)
  1081. # 汇总缩到 B/C 列:标签落宽的 B(团名列)、数值落 C,避开 A=序号 的窄列
  1082. r = _write_summary_block(ws, r, _summary_rows(is_real=is_real), summ, start_col=2)
  1083. r += 1
  1084. # 购买记录覆盖检测(仅已采购买记录商家传入):成交团 vs 已采购买记录,漏采的 T 逐个列出(文本向右溢出显示)
  1085. if miss_info is not None:
  1086. r = _write_section_title(ws, r, "购买记录覆盖检测(成交团 vs 已采购买记录)", span=span)
  1087. rank_sheet = f"用户排行榜({short_name})" if short_name else "用户排行榜"
  1088. cov = (f"成交 {miss_info['成交团数']} 团 · 采到购买记录 {miss_info['有记录团数']} 团 · "
  1089. f"漏采 {miss_info['漏采团数']} 团(用户排行见「{rank_sheet}」sheet)")
  1090. # 漏采 >0 时用深蓝加粗字提醒;0 时常规字
  1091. ws.cell(row=r, column=1, value=cov).font = FONT_HEADER if miss_info["漏采团数"] else FONT_CELL
  1092. r += 1
  1093. if miss_info["漏采团数"]:
  1094. ws.cell(row=r, column=1,
  1095. value="漏采明细(下列团未采到购买记录,未计入用户排行):").font = FONT_CELL
  1096. r += 1
  1097. for pc, t in miss_info["漏采团列表"]:
  1098. ws.cell(row=r, column=1, value=f" - {pc} {t or ''}").font = FONT_CELL
  1099. r += 1
  1100. r += 1
  1101. r = _write_section_title(ws, r, f"每条组队明细(共 {len(details)} 条,按总金额倒序)", span=span)
  1102. hdr_row = r # 明细表头行,用于冻结
  1103. _write_details(ws, r, details, cols)
  1104. ws.freeze_panes = f"A{hdr_row + 1}" # 冻结到明细表头,滚动时表头常驻
  1105. def _build_user_ranking_sheet(ws, rows: list, total_users: int, top_n: int, short_name: str = "魔都"):
  1106. """构建「用户排行榜(简称)」sheet:按参与金额倒序的买家榜(参与车数/参与金额/车均消费)。
  1107. 2026/08/24:由仅魔都泛化到魔都/卡皇/尼卡三家,靠 short_name 区分标题与所属商家。
  1108. Args:
  1109. ws: openpyxl worksheet。
  1110. rows (list[dict]): 用户排行数据(fetch_moddu_user_ranking 返回,已倒序截断)。
  1111. total_users (int): 窗口内该商家全部参与买家数(用于标题展示)。
  1112. top_n (int): 榜单展示上限(用于标题展示)。
  1113. short_name (str, optional): 商家简称(魔都/卡皇/尼卡),用于标题。Defaults to "魔都"。
  1114. """
  1115. _set_widths(ws, [8, 22, 16, 12, 16, 14])
  1116. cap = "全部展示" if top_n is None else f"取前 {min(len(rows), top_n)}"
  1117. r = _write_section_title(
  1118. ws, 1, f"用户排行榜 · {short_name}(共 {total_users} 人参与,{cap},按参与金额倒序)", span=6)
  1119. grid = [[i + 1, d["用户昵称"], d["user_id"], d["参与车数"], d["参与金额"], d["车均消费"]]
  1120. for i, d in enumerate(rows)]
  1121. r = _write_hgrid(ws, r, ["排名", "用户昵称", "user_id", "参与车数", "参与金额", "车均消费"],
  1122. grid, money_cols=(4, 5), start_col=1, empty_hint="(该时段无购买记录)")
  1123. r += 1
  1124. ws.cell(row=r, column=1,
  1125. value="注:参与金额 = Σ(购买份数 × 团单价)(deca_buy_record 无金额字段,按份数×单价估算;"
  1126. "固定价团精确、随机团按标称单价近似);参与车数=参与的不同团数;"
  1127. "车均消费 = 参与金额 ÷ 参与车数。").font = FONT_CELL
  1128. ws.freeze_panes = "A3" # 冻结标题条 + 表头
  1129. def _build_others_sheet(ws, others: list):
  1130. """构建「其他商家」sheet:除重点商家外各商家一行汇总(中卡近似口径)。
  1131. Args:
  1132. ws: openpyxl worksheet。
  1133. others (list[dict]): 每商家一行的汇总。
  1134. """
  1135. _set_widths(ws, [22, 14, 9, 15, 13, 16])
  1136. r = _write_section_title(ws, 1, f"其他商家汇总(共 {len(others)} 家,按销售额倒序)", span=6)
  1137. for i, (label, _key, _money) in enumerate(OTHER_COLS):
  1138. hc = ws.cell(row=r, column=1 + i, value=label)
  1139. hc.font = FONT_HEADER; hc.fill = FILL_HEADER
  1140. hc.alignment = ALIGN_CENTER; hc.border = BORDER
  1141. r += 1
  1142. for oi, o in enumerate(others):
  1143. zebra = FILL_ZEBRA if oi % 2 == 1 else None # 隔行淡蓝灰
  1144. for i, (_label, key, is_money) in enumerate(OTHER_COLS):
  1145. value = o.get(key)
  1146. cell = ws.cell(row=r, column=1 + i, value=value)
  1147. if is_money:
  1148. cell.number_format = MONEY_FMT
  1149. elif isinstance(value, int) and not isinstance(value, bool):
  1150. cell.number_format = INT_FMT # 成团数/中卡用户数千分位
  1151. cell.font = FONT_CELL
  1152. cell.alignment = _align_by_value(value) # 商家名左对齐、数字右对齐
  1153. cell.border = BORDER
  1154. if zebra:
  1155. cell.fill = zebra
  1156. r += 1
  1157. ws.freeze_panes = "A2"
  1158. # 明细 sheet 列宽(各自独立设,不再与其它表共享):
  1159. DETAIL_WIDTHS_MODDU = [8, 48, 16, 11, 13, 9, 8, 14, 14, 19, 19, 12, 11, 11, 11] # 15 列(含里程碑)
  1160. DETAIL_WIDTHS_STD = [8, 48, 16, 11, 13, 9, 8, 14, 19, 19, 12] # 11 列(标准)
  1161. # 重点商家 ID → 明细 sheet 名(其余走商家名兜底)
  1162. DETAIL_SHEET_NAMES = {"881226408": "魔都明细", "274584650": "卡皇明细", "538252487": "尼卡明细", "591544726": "文泰明细"}
  1163. def build_report(pool, out: str):
  1164. """汇总各段数据并生成多 Sheet Excel 报告(每一大项一个 sheet,各自独立列宽)。
  1165. Sheet 顺序(2026/08/24 起卡皇/尼卡、08/25 起文泰均走真实买家扩展明细 + 各带用户排行榜):
  1166. 平台总览 / 品类·系列榜 / 商家GMV榜 / 运营节奏 /
  1167. 魔都明细 / 用户排行榜(魔都) / 卡皇明细 / 用户排行榜(卡皇) / 尼卡明细 / 用户排行榜(尼卡) /
  1168. 文泰明细 / 用户排行榜(文泰) / 其他商家。
  1169. 规则:FOCUS_MERCHANTS 逐个出明细 sheet;属 REAL_BUYER_MIDS 的商家紧跟其「用户排行榜(简称)」。
  1170. Args:
  1171. pool (MySQLConnectionPool): MySQL 连接池。
  1172. out (str): 导出的 xlsx 路径。
  1173. """
  1174. # 报告前顺带把新成交团/在售品的品类落库到 category 列(方便按品类查库);只补 NULL 行、成本低
  1175. try:
  1176. n_cat = backfill_category(pool, only_null=True)
  1177. if n_cat:
  1178. logger.info(f"品类字段回填 {n_cat} 行(category IS NULL)")
  1179. except Exception as e:
  1180. logger.warning(f"品类字段回填跳过: {e}") # 回填失败不阻塞报告产出
  1181. win = get_window(pool)
  1182. platform = fetch_platform_summary(pool)
  1183. compare = fetch_groupbuy_compare(pool) # 当日 vs 昨日组齐环比
  1184. cat_rows, cat_total, series_rows, series_total = fetch_category_series(pool, TOP_SERIES) # 品类汇总 + 系列榜
  1185. mrank_rows, mrank_total, mrank_conc = fetch_merchant_gmv_ranking(pool) # 商家 GMV 榜 + 集中度
  1186. ops = [fetch_focus_ops_snapshot(pool, mid) for mid in FOCUS_MERCHANTS] # 重点商家运营快照
  1187. hour_dist = fetch_completion_hour_dist(pool, HOUR_DIST_DAYS) # 组齐时段 24h 分布
  1188. # 已采购买记录的商家(REAL_BUYER_MIDS=魔都/卡皇/尼卡)明细走扩展版(带参与人数 + 进度里程碑),
  1189. # 其余重点商家走标准明细(中卡近似)
  1190. focus = []
  1191. for mid in FOCUS_MERCHANTS:
  1192. summ = fetch_merchant_summary(pool, mid)
  1193. if mid in REAL_BUYER_MIDS:
  1194. focus.append((mid, summ, fetch_moddu_details(pool, mid), MODDU_DETAIL_COLS))
  1195. else:
  1196. focus.append((mid, summ, fetch_merchant_details(pool, mid), DETAIL_COLS))
  1197. others = fetch_other_merchants(pool, FOCUS_MERCHANTS)
  1198. # 各已采购买记录商家各自算:用户排行(按参与金额倒序) + 购买记录覆盖检测(成交团 vs 已采购买记录,看漏几个 T)
  1199. rank_by_mid = {} # {mid: (rows, total_users)}
  1200. miss_by_mid = {} # {mid: miss_info}
  1201. for mid in FOCUS_MERCHANTS:
  1202. if mid in REAL_BUYER_MIDS:
  1203. rank_by_mid[mid] = fetch_moddu_user_ranking(pool, mid, TOP_USERS)
  1204. miss_by_mid[mid] = fetch_moddu_missing_teams(pool, mid)
  1205. # 口径脚注(放平台总览底部;解释两种「参与人数」口径的差别)。
  1206. # 真实买家口径商家名按 FOCUS 顺序取 REAL_BUYER_MIDS 的简称动态拼接,新增商家自动纳入文案、无需再改此处。
  1207. real_names = "/".join(MERCHANT_SHORT_NAMES.get(m, m) for m in FOCUS_MERCHANTS if m in REAL_BUYER_MIDS)
  1208. notes = [
  1209. f"注:① {real_names} 各家「参与人数(真实买家)」= deca_buy_record 真实购买记录去重买家(跨其全部成交团);"
  1210. "各商家明细「参与人数(本团)」为各团单独去重买家,故明细逐团相加(人次) ≥ 汇总(跨团去重人头)。"
  1211. "(新接入商家历史团购买记录可能为 0,随后续采集逐日补齐。)",
  1212. f"  ② 平台大盘参与人数 = {real_names} 真实买家 + 其他商家中卡去重(两口径人群标识不同、且各真实买家商家间"
  1213. "也未跨商家去重,直接相加,属近似上界)。",
  1214. "  ③ 其他商家未采购买记录,「中卡用户数(近似)」= 拆卡报告 hit_user_nickname 去重(仅报告命中/中卡用户,"
  1215. "非真实参团人头,偏低),其「人均消费(按中卡近似)」据此计算、偏高,仅供参考。",
  1216. ]
  1217. wb = Workbook()
  1218. ws = wb.active
  1219. ws.title = "平台总览"
  1220. _build_overview_sheet(ws, win, platform, compare, mrank_conc, notes)
  1221. # 品类·系列榜(Excel sheet 名禁用「/」,故用中点「·」)
  1222. _build_category_series_sheet(wb.create_sheet("品类·系列榜"), cat_rows, cat_total, series_rows, series_total)
  1223. _build_mrank_sheet(wb.create_sheet("商家GMV榜"), mrank_rows, mrank_total)
  1224. _build_ops_sheet(wb.create_sheet("运营节奏"), ops, hour_dist)
  1225. # 每个重点商家单独一个明细 sheet(各自独立列宽,互不迁就)
  1226. for (mid, summ, details, cols) in focus:
  1227. sheet_name = DETAIL_SHEET_NAMES.get(mid, f"{summ['商家名'][:8]}明细")
  1228. ws_d = wb.create_sheet(sheet_name)
  1229. is_real = (mid in REAL_BUYER_MIDS)
  1230. widths = DETAIL_WIDTHS_MODDU if is_real else DETAIL_WIDTHS_STD
  1231. short = MERCHANT_SHORT_NAMES.get(mid)
  1232. # 已采购买记录商家的明细尾部附「购买记录覆盖检测」(漏采团数);其余商家无购买记录、不检测
  1233. miss = miss_by_mid.get(mid)
  1234. _build_detail_sheet(ws_d, f"{summ['商家名']} · 汇总(成交时间窗 {win[0]} ~ {win[1]})",
  1235. summ, details, cols, is_real, len(cols), widths,
  1236. miss_info=miss, short_name=short)
  1237. # 已采购买记录商家的明细后紧跟其「用户排行榜(简称)」sheet,让同商家相关表相邻
  1238. if mid in REAL_BUYER_MIDS:
  1239. rank_rows, rank_total = rank_by_mid[mid]
  1240. _build_user_ranking_sheet(wb.create_sheet(f"用户排行榜({short})"),
  1241. rank_rows, rank_total, TOP_USERS, short_name=short)
  1242. _build_others_sheet(wb.create_sheet("其他商家"), others)
  1243. wb.save(out)
  1244. def run_once(log) -> str:
  1245. """连库生成已售每日报告并发送到微信群(只发 Excel)。
  1246. Args:
  1247. log: 日志对象。
  1248. Returns:
  1249. str: 生成的 xlsx 绝对路径;数据库连接池异常时返回空串。
  1250. """
  1251. pool = MySQLConnectionPool(log=log)
  1252. if not pool.check_pool_health():
  1253. log.error("数据库连接池异常")
  1254. return ""
  1255. # 绝对路径:不受运行目录影响、便于企微上传定位;文件名带当天日期避免覆盖
  1256. out_file = os.path.abspath(f"{OUT_PREFIX}_{date.today():%Y%m%d}.xlsx")
  1257. build_report(pool, out_file)
  1258. log.info(f"报告已生成 -> {out_file}")
  1259. # 发企微群(只发 Excel;失败仅告警,不影响报告产出)
  1260. if SEND_WECHAT:
  1261. try:
  1262. from auto_send_wx_msg import send_wechat_group_file
  1263. send_wechat_group_file(log=log, file_path=out_file) # 只发 Excel,不发图
  1264. except Exception as e:
  1265. log.warning(f"企微发送跳过: {e}")
  1266. return out_file
  1267. def main():
  1268. """命令行一次性生成 + 发送(手动/调试用)。"""
  1269. run_once(logger)
  1270. def schedule_task():
  1271. """定时入口:每天 09:10 生成已售报告并发送到微信群。
  1272. 错开在售报告(on_sale 09:00 发)10 分钟发送,两份报告到群时间分开、便于查阅(企微为 webhook 直发,无 UI 冲突)。
  1273. """
  1274. # run_once(logger) # 立即跑一次(调试时取消注释)
  1275. schedule.every().day.at("09:10").do(run_once, logger)
  1276. while True:
  1277. schedule.run_pending()
  1278. time.sleep(1)
  1279. if __name__ == "__main__":
  1280. schedule_task()