tianyu.chu
|
1e0b59e370
perf(manual/trd): 订单 rebucket 资源按实测集群定值(30×4核/8g)
|
hai 1 semana |
tianyu.chu
|
f9d8367392
perf(manual/trd): 订单 re-init rebucket 加 Spark 资源调优 SET(集群闲置放大)
|
hai 1 semana |
tianyu.chu
|
112bdf12f6
feat(manual/trd): 订单 re-init rebucket(dump0722→ods_inc,GREATEST 活动日,封顶 0721)
|
hai 1 semana |
tianyu.chu
|
3085b39241
fix(ods/trd): 订单 inc 活动日锚点 COALESCE 改 GREATEST,兼容 update<create
|
hai 1 semana |
tianyu.chu
|
c210d254cf
fix(raw/trd): 订单日常 raw 关 splitPk,避开无 update 索引的病态 MIN/MAX 分片
|
hai 1 semana |
tianyu.chu
|
263118f449
fix(manual/trd): 订单 dump chunk9 去掉 id 上界,兜住 dump 期间新建单
|
hai 2 semanas |
tianyu.chu
|
dd64d181af
feat(manual/trd): 订单全量 dump 按 id 切 9 段(append),分节点并行抗断
|
hai 2 semanas |
tianyu.chu
|
d6622d6015
fix(datax): PG reader 加 socketTimeout+tcpKeepAlive,防连接被掐后死等
|
hai 2 semanas |
tianyu.chu
|
34aecd381d
fix(datax): datax.py 显式 -Xmx6g,避免多通道 ORC 写 GC 风暴/OOM
|
hai 2 semanas |
tianyu.chu
|
a523562f03
fix(datax): job.setting.speed 只留 channel,恢复多通道并发
|
hai 2 semanas |
tianyu.chu
|
40731a791b
feat(manual/trd): 订单全量 re-init 中转表 DDL(dump0722)
|
hai 2 semanas |
tianyu.chu
|
5b9bd81a5b
feat(manual/trd): 订单全量 re-init dump ini(无边界,新表 dump0722)
|
hai 2 semanas |
tianyu.chu
|
7c750f4e90
feat(manual/trd): 订单补数范围收回 0716~0719(ODS 仅这几天残)
|
hai 2 semanas |
tianyu.chu
|
9c10058e89
feat(manual/trd): 订单补数升级为全 2026 OR 重灌
|
hai 2 semanas |
tianyu.chu
|
58a026a050
fix(raw/trd): 订单 inc 同步锚点 COALESCE 改 create OR update
|
hai 2 semanas |
tianyu.chu
|
fb5bda252b
fix(manual/trd): 订单补数 rebucket DISTRIBUTE BY 改用投影后列名 dt
|
hai 2 semanas |
tianyu.chu
|
a5893e8046
refactor(manual/trd): 订单补数 rebucket 换回 explode 一次跑完
|
hai 2 semanas |
tianyu.chu
|
09c2482b42
refactor(manual/trd): 订单补数 rebucket 去掉 explode,改按天复用日常口径
|
hai 2 semanas |
tianyu.chu
|
59dcaf56ec
feat(manual/trd): 订单 716+ 大范围 dump→ODS 补数,活动日重灌封顶 0719
|
hai 2 semanas |
tianyu.chu
|
1188828365
fix(ods/trd): 订单 inc 增补 create 日分区,dt 改活动日语义
|
hai 2 semanas |
tianyu.chu
|
aef6157ae0
perf(ods/trd): ful_d merge 改反连接,避免每天全量 shuffle
|
hai 2 semanas |
tianyu.chu
|
5d85b7de4a
fix(ods/trd): ful_d seed 加 dt <= ${dt} 过滤
|
hai 2 semanas |
tianyu.chu
|
8b7818d205
fix(ods/trd): ful_d 改内部表 + 保留 2 天 drop 写进 merge SQL
|
hai 2 semanas |
tianyu.chu
|
1f48ef66e5
feat(ods/trd): 订单/拼团全量最新态表 ful_d + seed + 日常 merge
|
hai 2 semanas |
tianyu.chu
|
a0e78a631f
fix(raw/trd): 拼团 dump 窗口改 2026-01-01 全量
|
hai 2 semanas |
tianyu.chu
|
9db416b75e
feat(raw/trd): 拼团 5/18后回填走中转表 + ODS 重分桶
|
hai 2 semanas |
tianyu.chu
|
9cfb35f378
fix(raw/trd): 2026 重分桶 DISTRIBUTE BY 改用分区列名 dt
|
hai 2 semanas |
tianyu.chu
|
389b83295e
fix(raw/trd): 2026 重分桶去掉多余的 (id,ods_dt) 去重
|
hai 2 semanas |
tianyu.chu
|
f725985e83
feat(raw/trd): 订单 2026 回填走中转表 + ODS 重分桶
|
hai 2 semanas |
tianyu.chu
|
33e32549fe
docs(raw/trd): his_o 历史回填 ini 加弃用注释
|
hai 3 semanas |