|
1 | 1 | # 📊 项目进度仪表盘 |
2 | 2 |
|
3 | | -> 最后更新:**2026-06-06** | 当前阶段:**P4 maxcompute·scope=C(写-SPI RFC 先行)**——写/事务 SPI RFC 已批准;**W-phase(W1–W7)全部落地**:W1+W2 `be945476ba7` + W3+W6 `9ad2bbe40ec` + W4 `759cc0874c8` + W5 `9ebe5e27fa4` + W7 文档(D-021/D-022 入 log、01-spi-rfc §20 E11、DV-009),behind gate、零行为变更、golden 等价 ✅;**P4 adopter 设计已批准**([D-023],5 批/11 task,见 [tasks/P4](./tasks/P4-maxcompute-migration.md));**Batch A+B 全完成**(T01–T04 ✅,gate 关 dormant);**Batch C 设计 ✅ 签字 [D-026]**([翻闸设计](./tasks/designs/P4-T05-T06-cutover-design.md));下一步 = **实现 T05(dormant)→ T06(live, 两 commit)**,前置 R-004 防御测。P3 hybrid 已 **#64143 合入** `branch-catalog-spi`(`5c240dc7a34`)| 项目总进度:**37%** |
| 3 | +> 最后更新:**2026-06-07** | 当前阶段:**P4 maxcompute·scope=C(翻闸完成)**——写/事务 SPI RFC 已批准;**W-phase(W1–W7)全部落地** ✅;**P4 adopter 设计已批准**([D-023],5 批/11 task);**Batch A+B 全完成**(T01–T04,gate 关 dormant);**Batch C 翻闸完成**(T05 image-compat + T06a 写接线/UT + **T06b flip ✅** `CatalogFactory.SPI_READY_TYPES += "max_compute"`,gate 全绿 [D-027]);下一步 = **Batch D**(清 ~30 反向引用 + 删 legacy 子系统 + drop fe-core odps 依赖,**待用户 live ODPS 验证后做**——设计 [Batch D 移除](./tasks/designs/P4-batchD-maxcompute-removal-design.md))。P3 hybrid 已 **#64143 合入** `branch-catalog-spi`(`5c240dc7a34`)| 项目总进度:**38%** |
4 | 4 | > [README](./README.md) · [Master Plan](./00-connector-migration-master-plan.md) · [SPI RFC](./01-spi-extensions-rfc.md) · [Decisions](./decisions-log.md) · [Deviations](./deviations-log.md) · [Risks](./risks.md) · [Agent Playbook](./AGENT-PLAYBOOK.md) · [Handoff](./HANDOFF.md) |
5 | 5 |
|
6 | 6 | --- |
|
13 | 13 | | **P1** | scan-node 收口 + 重复清理 | 1 周 | ▰▰▰▰▰▰▰▰▰▰ 100% | ✅ 完成(PR [#63641](https://github.com/apache/doris/pull/63641) squash-merged `778c5dd610f`;T1 推迟 P8;T2 推迟 P4/P5)| [tasks/P1](./tasks/P1-scan-node-cleanup.md) | |
14 | 14 | | **P2** | trino-connector 迁移 | 2 周 | ▰▰▰▰▰▰▰▰▰▰ 100% | ✅ 已合入 `branch-catalog-spi`(#64096,squash `0793f032662`;T12 回归推迟 DV-003)| [tasks/P2](./tasks/P2-trino-connector-migration.md) | |
15 | 15 | | P3 | hudi 迁移 | 2 周 | ▰▰▰▰▰▱▱▱▱▱ 45% | ✅ hybrid(D-019)批 A–D 已合入 `branch-catalog-spi`(**#64143** squash `5c240dc7a34`);批 E(live cutover)并入 P7 | [tasks/P3](./tasks/P3-hudi-migration.md) | |
16 | | -| P4 | maxcompute 迁移 | 2 周 | ▰▰▰▰▰▱▱▱▱▱ 45% | 🚧 **W-phase 全落地** ✅(W1+W2 `be945476ba7` / W3+W6 `9ad2bbe40ec` / W4 `759cc0874c8` / W5 `9ebe5e27fa4` / W7 文档);**adopter 设计已批准**([D-023],5 批/11 task);**Batch A+B 全完成**(T01 DDL / T02 分区 / T03 写事务 / T04 写计划 ✅,gate 关 dormant),下一 = **Batch C 翻闸**(live)| [tasks/P4](./tasks/P4-maxcompute-migration.md) | |
| 16 | +| P4 | maxcompute 迁移 | 2 周 | ▰▰▰▰▰▰▱▱▱▱ 55% | 🚧 **W-phase 全落地** ✅;**adopter 设计已批准**([D-023],5 批/11 task);**Batch A+B 全完成**(T01–T04 dormant);**Batch C 翻闸完成**(T05 + T06a + **T06b flip ✅**,gate 全绿 [D-027]),下一 = **Batch D**(删 legacy + drop odps 依赖,待 live 验证)| [tasks/P4](./tasks/P4-maxcompute-migration.md) | |
17 | 17 | | P5 | paimon 迁移 | 3 周 | ▱▱▱▱▱▱▱▱▱▱ 0% | ⏸ 待启动 | — | |
18 | 18 | | P6 | iceberg 迁移 | 5 周 | ▱▱▱▱▱▱▱▱▱▱ 0% | ⏸ 待启动 | — | |
19 | 19 | | P7 | hive (+HMS) 迁移 | 6 周 | ▱▱▱▱▱▱▱▱▱▱ 0% | ⏸ 待启动 | — | |
|
33 | 33 | | **es** | ✅ | ✅ 100% | ✅ | ✅ | ✅ | **100%** | [详情](./connectors/es.md) | |
34 | 34 | | trino-connector | ✅ | ✅ 100% | ✅ | ✅ | ✅ | **100%** | [详情](./connectors/trino-connector.md) | |
35 | 35 | | hudi | 🟡(D-005 区分符 + D-020 模型 dispatch 已设计;实现批 E)| 🟨 55%(读路径 dormant + 批 C 测试基线)| ❌(gate 关)| ❌ | 0/0(寄生 hms)| **25%** | [详情](./connectors/hudi.md) | |
36 | | -| maxcompute | 🟡 | 🟨 70%(DDL+分区+写事务+写计划 ✅;剩 cutover 接线)| ❌ | ❌ | 0/~19(re-grep 校正,旧称 12)| **30%** | [详情](./connectors/maxcompute.md) | |
| 36 | +| maxcompute | 🟡 | 🟨 85%(DDL+分区+写事务+写计划+**翻闸 ✅**;剩 legacy 删除)| ✅ **翻闸 T06b** | ❌(Batch D 删,待 live 验证)| 0/~30(Batch D 闭包已 verify)| **60%** | [详情](./connectors/maxcompute.md) | |
37 | 37 | | paimon | 🟡 | 🟨 50% | ❌ | ❌ | 0/10 | **20%** | [详情](./connectors/paimon.md) | |
38 | 38 | | iceberg | 🟡 | 🟥 10% | ❌ | ❌ | 0/19 | **5%** | [详情](./connectors/iceberg.md) | |
39 | 39 | | hive (+hms) | 🟡 | 🟥 20% | ❌ | ❌ | 0/31 | **10%** | [详情](./connectors/hive.md) | |
|
44 | 44 |
|
45 | 45 | > 状态非 ✅ 的项,按阶段聚合。详细见各阶段 task 文件。 |
46 | 46 |
|
47 | | -### P4 — maxcompute 迁移(🚧 full adopter;**设计已批准** [D-023],5 批/11 task;Batch A ✅,Batch B ✅(T03+T04),下一步 Batch C 翻闸) |
| 47 | +### P4 — maxcompute 迁移(🚧 full adopter;**设计已批准** [D-023],5 批/11 task;Batch A+B+C ✅(翻闸完成),下一步 Batch D(删 legacy + drop odps 依赖,待 live 验证)) |
48 | 48 |
|
49 | 49 | > 策略 = **full adopter + 翻闸**([D-023],非 P3 hybrid);前置 W-phase(W1–W7)✅。批次计划 + 完整 task 表见 [tasks/P4](./tasks/P4-maxcompute-migration.md)。 |
50 | 50 |
|
51 | 51 | | 批 | 范围 | gate | task | 状态 | |
52 | 52 | |---|---|---|---|---| |
53 | 53 | | A | 连接器 DDL + 分区 parity | 🔒 关 | P4-T01 ✅ / T02 ✅ | ✅ T01 DDL + T02 分区 listing 完成(gate 全绿:compile + checkstyle 0 + import-gate)| |
54 | 54 | | B | 写/事务 SPI(`ConnectorTransaction`/`WriteOps` + `WritePlanProvider`→`TMaxComputeTableSink`)| 🔒 关 | P4-T03 ✅ / T04 ✅ | ✅ T03 写/事务 SPI(`MaxComputeConnectorTransaction`+`beginTransaction`)+ T04 写计划(`MaxComputeWritePlanProvider.planWrite`,OQ-2=Approach A)完成,gate 全绿 | |
55 | | -| C | 翻闸(`SPI_READY_TYPES` + GSON + `getEngine`;含 R-004 防御测)| 🔓 **live** | P4-T05/T06 | 🚧 设计✅[D-026];**T05 ✅ gate-green(待 commit)** / T06 ⏳ | |
56 | | -| D | 清 ~19 反向引用 + 删 `datasource/maxcompute/`(收口 P1-T02)| 🔓 live | P4-T07/T08/T09 | ⏳ | |
| 55 | +| C | 翻闸(`SPI_READY_TYPES` + GSON + `getEngine`;含 R-004 防御测)| 🔓 **live** | P4-T05/T06 | ✅ **翻闸完成**(T05 image-compat + T06a 写接线/UT + **T06b flip**,gate 全绿 [D-027]);R-004 part-2 live 待用户跑 | |
| 56 | +| D | 清 ~30 反向引用 + 删 legacy 子系统(21 文件,收口 P1-T02)+ **drop fe-core odps 依赖** | 🔓 live | P4-T07/T08/T09 | ⏳ 闭包已 verify([Batch D 移除设计](./tasks/designs/P4-batchD-maxcompute-removal-design.md));**执行待用户 live ODPS 验证后**([D-027])| |
57 | 57 | | E | 连接器测试基线 + PR | — | P4-T10/T11 | ⏳ | |
58 | 58 |
|
59 | 59 | ### P3 — hudi 迁移(🚧 hybrid,批 A–D 全部 in-scope 完成:T02/T04/T05/T07 ✅ + T06/T08 决策;T03→批 E;剩批 E→P7,**P3 已合入 #64143 `5c240dc7a34`**;批 E live cutover 并入 P7) |
|
0 commit comments