{"skill":{"slug":"guanyuan-majia","displayName":"观远 BI · 马甲实战版","summary":"观远 BI（Guandata）实战增益层 Agent Skill —— 架在官方全家桶（guancli 查数 / guanvis 建卡发布截图 / guanetl ETL / guanwf 数据流 / guands 数据源）之上，专攻官方 DSL/命令覆盖不到的硬骨头：Part B ETL 整库治理判断 + 10...","description":"---\nname: majia-guanyuan\ndescription: 观远 BI（Guandata）实战增益层 Agent Skill —— 架在官方全家桶（guancli 查数 / guanvis 建卡发布截图 / guanetl ETL / guanwf 数据流 / guands 数据源）之上，专攻官方 DSL/命令覆盖不到的硬骨头：Part B ETL 整库治理判断 + 10 类 BI 引擎报错手册 + SmartETL 全链路重写/ExecPlan、Part C 既有页自定义图表 HTML/CSS/JS 注入排障 + 固定卡/overlay、Part C-12 HTML 应用化看板（descriptor patch 把 selector 联到 custom chart 内部 dataView + 视觉设计底线/反 AI 味红线/guanvis screenshot 视觉验收）、Part D v7 草稿-发布状态机绕过 + SmartETL 节点化静默坑 + 移动端 phoneLayout ZIP inject、Part E SuperApp 开放应用反向工程（form 建表 /survey-engine/api/form/add + LLM 中转 ILLEGAL_JSON_RES 三路径解析 + 原生 fetch credentials 绕 unwrap）、AI-native ADS 数据架构方法论（治理 vs 重搭 / 7 字段约束 / 30+30+40 预算）、餐饮连锁 BI 公式实战库（60+ SQL/复购/RFM/AC/Comp/DWD 宽表范式/39 ETL 索引）。标准查数/建卡/ETL/数据集 CRUD 一律路由给官方全家桶，本 skill 专攻业务实战与引擎级踩坑。触发：营业额/门店/会员/订单/复购率/客单价/RFM/ETL 治理/payload_json/自定义图表/HTML 看板/应用化/看板太丑/AI 味/设计底线/观远/Guandata/v7 BI/60004 草稿/Spark 中文别名/customChart/phoneLayout/SuperApp/open-apps/form 建表/ILLEGAL_JSON_RES/AI-native ADS/数据架构重搭/DWD 宽表。\nlicense: MIT\nmetadata:\n version: \"3.1.2\"\n author: \"超级马甲 / maojiebc\"\n homepage: https://github.com/maojiebc/majia-guanyuan\n openclaw:\n emoji: \"📊\"\n homepage: https://github.com/maojiebc/majia-guanyuan\n os:\n - macos\n - linux\n requires:\n bins:\n - jq\n - bash\n install:\n - kind: npm\n package: \"@guandata/guanskill\"\n bins:\n - guancli\n - guanvis\n - guanetl\n - guanwf\n - guands\n---\n\n# 观远 BI · 马甲实战版（V3.1.2）\n\n> **结构说明（V1.5.0 引入 progressive disclosure）**：本文档是**路由层 + 关键规则**，详细操作手册下沉到 `references/`。每个 Part 的入口章节会指出\"何时回到 references/ 查全表\"。完整章节索引见末尾的 [📚 References 目录](#-references-目录)。\n\n## 🧭 Part 选择\n\n| 你想做 | 走 |\n|---|---|\n| 查数据、建卡、出报表、标准 ETL / 数据集 CRUD | **🧭 路由层** → 交给官方全家桶（`guancli` / `guanvis` / `guanetl` / `guands`），见路由总表 |\n| 扫整库 ETL 治理 / 新建/修改/删除 ETL / 字段使用度审计 / 修复 ETL 报错 | **Part B：ETL 治理与写入** |\n| 把整条 SmartETL 链改写成 SQL 版 + 页面副本验收 + 差异定位 + 空快照阻塞 | **Part B-17：全链路重写方法论**（拆到 [references/part-b17-fullchain-rewrite.md](references/part-b17-fullchain-rewrite.md)） |\n| 30+ 张表批量迁移 / 跨多日工程 / 复杂重构需要项目化追踪 | **B-17.11 ExecPlan 工作法**（同上文件 §11） |\n| 自定义图表 HTML/CSS/JS 注入、固定卡片/overlay、payload_json 取数、路由清理 | **Part C：自定义图表开发与排障** |\n| 从零生成 HTML 化经营分析应用（用户说\"更高级 / 应用化 / 自定义模块 / 最完美 / 不限标准看板\"）| **Part C-12：HTML 应用化看板生成**（拆到 [references/part-c-html-dashboard.md](references/part-c-html-dashboard.md)） |\n| **v7 BI 实例**上端到端搭多个 HTML 应用看板 / 手撸 `POST /api/page+/api/card` 被 `60004 此操作只能在草稿页面执行` 卡住 / CSV 散客 `会员ID IS NOT NULL` 算出 100% 假指标 / Spark `WITH 中文别名` 报 `PARSE_SYNTAX_ERROR` / ETL update 报 `1012 输出数据集目录中存在同名文件` | **Part D：V7 Page/Card 发布流水线 + 三态硬规则**（V2.1.6 新增，拆到 [references/v7-page-card-publish-pipeline.md](references/v7-page-card-publish-pipeline.md)） |\n| **SuperApp / 超级应用 / 开放应用**开发流水线 / `guancli app create/publish` / `--app-id` 不传变成每次新建 / 数据集异步预览 3 步 / **`form_xxx` 建表反向工程**（脚手架没暴露建表 API，实测 `POST /survey-engine/api/form/add`）/ **BI 中转 LLM 报 NOT_JSON_RES / ILLEGAL_JSON_RES**（响应被塞在 error_message）/ `/api/llm-config/list` 返回裸数组被脚手架 unwrap 吞 / 同源 fetch credentials 不带 cookie / 客户端模拟流式打字效果 / 任务池工作台「看 + 想 + 选 + 做 + 留痕」闭环 | **Part E：SuperApp 开放应用开发流水线**（V2.1.12 新增，拆到 [references/part-e-superapp-pipeline.md](references/part-e-superapp-pipeline.md)） |\n| **客户说\"想给现有 BI 接 AI / 上 LLM\"** / \"我们 ETL 治理做了一年还没出活\" / **判断 是该治理还是该重搭** / 客户预算分配讨论 / 评估底表 schema 是否 AI-friendly / 提案\"AI-native 数据底座\" | **AI-native ADS 设计方法论**（V2.1.13 新增，**majia-guanyuan 的哲学层文档**——不是操作手册而是范式判断，拆到 [references/ai-native-ads-design.md](references/ai-native-ads-design.md)） |\n| 写餐饮业务公式（AC / ADS / 复购率 / 新老客 / 用餐时段 / 留存流失 / RFM / Comp 老店）/ 查字段口径 / 排数据质量坑 / **ETL 工程范式（DWD 宽表 / 双源对账 / 评价 pipeline）** | **餐饮 BI 公式实战库**（[references/restaurant-bi-formulas/README.md](references/restaurant-bi-formulas/README.md)，V2.1.5 蒸馏自两段餐饮连锁 BI 履职 + 39 个生产 ETL，全脱敏） |\n| 不知道用哪个 | 看 Part B \"推荐工作流\" 章节，或直接读各 Part 章节末尾的\"实战 ID 速查\" |\n\n> **作者**：马甲（Part B/C/D/E 实证）+ 观远 CTO 张进（B-17 SmartETL 改写方法论 + Part C 自定义图表经验）+ OpenAI Codex（ExecPlan 规范）\n> **版本**：V3.1.2（2026-06-17）· **环境**：Node ≥20 · **前置**：官方全家桶 `npm i -g @guandata/guanskill && guanskill install-skill`（装齐 guancli / guanvis / guanetl / guanwf / guands + 各自 AI skill）· **认证**：`guancli auth login`（全家桶共用一套 profile，本 skill 不再单独要 config.json）· **作用域**：本地私有 BI 实例\n> **安装**：`git clone https://github.com/maojiebc/majia-guanyuan.git`，或 `npx github:maojiebc/majia-guanyuan install`\n> **兼容工具**：Claude Code · OpenClaw · Codex · Hermes (gbrain) · 任何支持 `SKILL.md` frontmatter 的 agent。详见 [README · 兼容性](README.md#-兼容性--compatibility) 与 [AGENTS.md](AGENTS.md)。\n>\n> 🆕 **V3.1.2 更新**（2026-06-17）：**专业 skill 评审团驱动的质量迭代**（8 视角审 + 对抗校验 + 红队）——① **删除顺序矛盾实测定案**：workshop513 真实独立 ETL 净零回归确认 **ds-first 正确**（先删输出数据集再删 ETL，两步皆成功不报 6001）、etl-first 撞 `2002 输出数据集已存在`；据此修正 B-0.5 line 219 + Part D 删除段两处把方向写反/错记 6001 的旧文，统一到 B-7.1。② **`page?force=true` 级联删页纳入 B-7.0 安全闸**（条件句：本地有 guanvis 源可重建才免对账）+ 红线括号补全。③ 事实性卫生：README 双语移除已下架 `guanetl delete`、AGENTS.md/marketplace.json 元数据 drift 修正、References 行数回填、description 瘦身、餐饮锚点死链修、config 死字段注释。纯 correctness+safety+hygiene，护城河零删减。\n>\n> 🆕 **V3.1.1 更新**（2026-06-17）：**官方全家桶 06-15 版本对齐**——`guanskill` 0.1.5→0.1.6，子包全部对齐最新：`guancli` 1.0.33→1.0.34（`metric by-dataset` 按数据集 ID 反查原子指标 + 沿血缘展开下游复合/衍生）、`guanvis` 0.1.24→0.1.26（资源包打包一致性校验 + 自定义排序 payload 修复）、`guanetl` 0.1.14→0.1.15（`save` 输出数据集保护增强 + 追加写入行结构校验）、**`guanwf` 0.1.4→0.1.5（`workflow.go` DSL 统一 + 新增 Python 节点 DSL/本地校验 + 保存三方合并）**、**`guands` 0.1.14→0.1.15（新增 `dataset update-fields` 批量改字段展示名/注释 + `import` 增编码/分隔符参数 + `refresh --overwrite`）**。路由总表版本号 + 能力描述刷新（guanwf 升级为「数据流 + Python 节点多节点 DAG」、guands 补 `dataset update-fields`）；Part B 实测边界补 0.1.15 note；manifest/README/package 基线 pin 同步。\n>\n> 🆕 **V3.1.0 更新**（2026-06-11）：**HTML 看板视觉设计底线落地**——吸收 [design-taste-skills](https://github.com/xiaomingtx666/design-taste-skills)（MIT）的「可执行设计底线」方法论，新建 [references/part-c-design-baseline.md](references/part-c-design-baseline.md)：模块第一视觉位=数据判断、KPI 3-4 个 + 28-32px + 单位/时间范围/对比基准、图表真实性硬底线（禁 CSS 假图表）、视觉 token 硬上限（圆角 ≤8px / 阴影 ≤8px / tabular-nums）、反 AI 味红线表（禁紫蓝渐变/玻璃拟态/卡片墙/emoji 图标/营销 CTA）、状态文案带业务上下文。C-12 验收清单从四层扩到**五层**（§11.5 视觉验收走 `guanvis screenshot` 服务端截图）；模板 `html_base.css` 按底线校准（KPI 28px + tabular-nums + 表格行高 38px + 状态样式族）。覆盖 C-12 / Part D customChart / Part E SuperApp 三场景。\n---\n\n# 🧭 路由层：标准活交给官方全家桶\n\n> **V3.0.0 心法**：观远官方已把\"查数 / 建卡 / ETL / 数据流 / 数据源 / 截图 / 管理\"做成公网全家桶（`npm i -g @guandata/guanskill`）。本 skill **不再自造这些轮子**——标准活一律路由给官方，本 skill 专攻官方 DSL/命令覆盖不到的\"业务实战 + 引擎级踩坑\"（Part B–E + 方法论 + 公式库）。\n\n## ⚠️ 跨 Part 通用工作原则\n\n1. **所有数值计算必须跑代码** —— 禁止在思考里口算百分比、环比、除法、占比。\n2. **必须确认数据范围** —— 用户没明确日期范围时**必须追问**（\"看哪段时间？今天 / 本周 / 上月？\"），不要自己假设。\n3. **遇到意外错误立即落档** —— 把新坑写进对应章节（Part B 报错 → `references/part-b-errors.md`，Part C → `references/part-c-payload-json.md`）或 ExecPlan 的 `Surprises & Discoveries`（B-17.11）。格式：`### [YYYY-MM-DD] 标题` + 场景 / 问题（含 task error 原文、payload 片段）/ 判断。\n4. **写操作前先治理、删除前先对账** —— 见 Part B-〇 工作流 + B-7.0 删除安全闸。\n\n## 官方全家桶 ↔ 本 skill 分工总表\n\n> 前置：`npm i -g @guandata/guanskill && guanskill install-skill`（装齐 7 个命令 + AI skill）；认证 `guancli auth login`，全家桶共用一套 profile。\n\n| skill | 版本 | 角色 | 什么需求路由给它 |\n|---|---|---|---|\n| **`guancli`** | 1.0.34 | 只读分析中枢 + 表单 CRUD + **指标 CRUD** | 查 ETL / dsId / page / card / 血缘 / 节点 SQL、`ds execute-sql` 跨集 SQL、`ds search --id` 精确解析、`metric query` 同比/累计/Top N、`metric_attribution` 归因、`task` 排查、ChatBI 问数、`card preview` 取数导出、form 数据 CRUD、**指标建/改/删（metric create/edit/delete，1.0.32 起从只读转可写）** + `metric by-dataset` 按数据集 ID 反查原子指标并沿血缘展开下游复合/衍生（1.0.34 新）|\n| **`guanvis`** | 0.1.26 | 标准建卡 + Page 装配 + 服务端截图 | 74 种图表 JS DSL、双 Y 轴、同环比/累计/排名/占比、selector 联动、tab/栅格、**AreaTitle 分区标题 + CardGroup 卡片组（0.1.24 新）**、custom chart(ECHARTS_LITE/SDK)、`guanvis pack/publish/upload`、`guanvis screenshot` 出 PNG、指标卡片构建（metric init）、`publish --allow-overwrite` 覆盖前自动建迁移备份、资源包打包一致性校验提前发现重复/冲突资源（0.1.26）|\n| **`guanetl`** | 0.1.15 | ETL 写操作闭环 | 单个 ETL 新建/改/`lint`/preview/`save`/`run`/`schedule`/`mkdir-pair`（源文件 `etl/etl.go`+SQL 驱动，黑盒 direct-save）；**0.1.14 移除 `delete` 命令**（高风险操作不再暴露，删 ETL 走 BI UI 或 API）；修复 save 导出空 `dataSource` 覆盖服务端绑定的 bug；**0.1.15 save 输出数据集保护增强（保留级联配置）+ 追加写入场景行结构提前校验** |\n| **`guanwf`** 🆕 | 0.1.5 | 工作流（数据流 + Python 节点多节点 DAG）| 工作流引擎里建/编/存/跑工作流，`workflow.go` DSL 统一数据流创建/编辑/导出/预览/保存/运行；**0.1.5 新增 Python 节点 DSL + 本地校验 + 保存采用三方合并降低覆盖线上数据流配置风险**；`guanwf edit <父工作流ID>` → 改 `etl/` → export → save；只读查 `guancli workflow`（隐藏命令） |\n| **`guands`** | 0.1.15 | 数据源 + 数据集 CRUD | 建数据连接（MySQL/PG/Oracle）、`dataset create-db/create-query/import/replace-data`、批量移删、增量更新、定时调度、计算字段、`dataset alias` 改字段展示名、**`dataset update-fields` 批量改字段展示名/注释（0.1.15 新，命令行或 JSON + `--dry-run`）+ import 增 `--header-row`/`--encoding`/`--delimiter` + refresh `--overwrite` 全量覆盖** |\n| **`guanvis screenshot`** | — | 导出 | 页面 PNG/PDF 服务端截图（彻底取代 legacy `guanexport`）|\n| ~~`guanexport` / `guanadmin`~~ | **已退出** | — | **2026-06-04 起从 `guanskill` 聚合包移除、npm 也下架**：导出全归 `guanvis screenshot`；管理员级操作（dynamicCode / adminToken / svc SQL）已不在公开全家桶，需另装 standalone 或走 BI UI |\n| **`majia-guanyuan`**（本 skill） | **3.1.2** | 业务实战 + 引擎级踩坑 + 方法论 | **Part B** ETL 整库治理判断 + 10 类引擎报错 + 双源字段审计 + B-17 全链路重写/ExecPlan · **Part C** 既有页自定义图表 HTML/JS 注入排障 + 固定卡/overlay · **Part C-12** HTML 应用化看板 + descriptor patch 联 dataView + **视觉设计底线（反 AI 味红线 + 五层验收）** · **Part D** v7 草稿-发布状态机绕过 + 节点化静默坑 + phoneLayout · **Part E** SuperApp 反向工程 · **AI-native ADS** 方法论 · **餐饮 BI 公式库** |\n\n**一句话路由**：标准查数 → `guancli`；标准建卡/发布/截图 → `guanvis`；标准 ETL → `guanetl`；数据流 → `guanwf`；数据源/数据集 → `guands`。**任何一个遇到官方 DSL/命令够不着的字段、报错、状态机、反向工程、业务口径**——回到本 skill 对应 Part。\n\n**为什么还要本 skill**：官方命令封装在\"高层 DSL + 黑盒\"那层，遇到 ① 整库治理的判断逻辑（砍哪张表/哪个字段）② BI 引擎运行期/语义报错（`<> NULL` 吞行、CTE 中文别名、UNION 列数）③ v7 草稿-发布状态机绕过 ④ custom chart 内部 dataView 联 selector ⑤ SuperApp 脚手架没暴露的 form 建表 / LLM 中转 bug ⑥ AI-native 的 schema 重搭判断 ⑦ 餐饮业务口径——**官方都够不着，这就是本 skill 的地盘**。\n\n**降歧义**：5 个官方 skill + 本 skill 同时启用时，只读场景（查 dsId/ETL）可能在 `guancli` 与本 skill 间双触发。本 skill **不与官方抢只读**——遇到纯查询/取数，直接路由 `guancli`，别自己拼 API。\n\n## 🔄 官方全家桶更新 SOP（高频操作）\n\n观远官方迭代节奏快（平均每周 1–2 次），本 skill 需要跟着对齐。以下是完整更新链路——从检查到落地，一条龙。\n\n### Step 0. 检查是否有新版本\n\n```bash\n# 看本机当前全家桶版本\nguanskill version\n\n# 看 npm 上最新聚合包版本\nnpm view @guandata/guanskill version\n\n# 逐个看子包最新版本（聚合包可能滞后）\nnpm view @guandata/guancli version\nnpm view @guandata/guanvis version\nnpm view @guandata/guanetl version\nnpm view @guandata/guands version\nnpm view @guandata/guanwf version\n```\n\n如果 npm 版本 > 本机版本 → 继续 Step 1。否则无需更新。\n\n### Step 1. 升级 CLI（npm 聚合包）\n\n```bash\n# 升级到最新聚合包（装到你的 npm 全局 prefix —— 先 `npm prefix -g` 确认当前目标）\nnpm i -g @guandata/guanskill@latest\n\n# 验证新版本\nguanskill version\n```\n\n> **安装路径坑（双装滞后）**：`guanskill` 的 forwarder 跟着 `which guancli` 解析到的 prefix 走。若曾用不同 node（如 Homebrew node 的 `/opt/homebrew` vs nvm/asdf/独立 `~/.local`）装过两份，PATH 靠前那份会\"赢\"，而 `npm i -g` 只更新当前 prefix 的那份、另一份滞后 →「升了却没生效 / 本地副本常滞后」。排查：`which -a guancli` 看是否多份；统一到单一 prefix（多余的用 `npm uninstall -g @guandata/guanskill --prefix <多余prefix>` 删掉）。\n\n### Step 2. 升级 AI Skill（SKILL.md + references）\n\n```bash\n# install-skill 把每个子包的 SKILL.md + references/ 装到 ~/.agents/skills//\nguanskill install-skill\n```\n\n落点：`~/.agents/skills/{guancli,guanvis,guanetl,guands,guanwf}/`。这些是 agent 路由用的 skill 定义，和 CLI 二进制分开更新。\n\n### Step 3. 读 Changelog，摘要变更\n\n```bash\n# 各子包 CHANGELOG.md 在 npm 包目录下\nGUANSKILL_DIR=$(npm root -g)/@guandata/guanskill/node_modules/@guandata\nfor pkg in guancli guanvis guanetl guands guanwf; do\n echo \"=== $pkg ===\" && head -30 \"$GUANSKILL_DIR/$pkg/CHANGELOG.md\" 2>/dev/null && echo\ndone\n```\n\n重点关注：新增/移除命令、DSL 新组件、bug 修复（尤其影响 B-0.5 / Part C / Part D 的）、breaking change。\n\n### Step 4. 迭代 majia-guanyuan\n\n按 changelog 摘要，更新以下位置（有改动的才改）：\n\n| 位置 | 改什么 |\n|------|--------|\n| **路由总表**（本文件 `官方全家桶 ↔ 本 skill 分工总表`） | 版本号 + 能力描述 |\n| **V3.x.x 更新 callout**（本文件顶部 `> 🆕`） | 新版本摘要 |\n| **Part B 实测边界 callout** | 如果 guanetl 有 bug 修复 |\n| **Part D guanvis 版本引用** | 如果 guanvis 版本变了 |\n| **manifest.json / package.json** | `version` + `description` 里的版本号 |\n| **README.md / README.en.md** | 版本徽章 + 版本记录段（≤3 条） |\n| **CHANGELOG.md** | 新增 `[x.y.z] — YYYY-MM-DD` 条目 |\n\n版本号规则：官方对齐 = **patch**；影响 skill 自身逻辑（如 B-0.5 降级）= **minor**。\n\n### Step 5. 同步 + 发布\n\n```bash\n# 同步到已安装 skill 目录\ncp SKILL.md CHANGELOG.md ~/.agents/skills/majia-guanyuan/\n\n# commit + push（或走 /majia-ota-skill 完整发布链）\n```\n\n### 快速一键检查（日常用）\n\n```bash\n# 一行看完「本机 vs npm 最新」差异\necho \"LOCAL:\" && guanskill version && echo \"---\" && echo \"NPM latest:\" && npm view @guandata/guanskill version\n```\n\n## 通用错误码处理\n\n| 状态码 | 处理 |\n|--------|------|\n| 500 | 终止，服务器问题 |\n| 401 | 终止，登录失效（`guancli auth login` 重登） |\n| 403 | 终止，无权限 |\n| 404 | 终止，资源不存在 |\n\n---\n\n# 🅱️ Part B：ETL 治理与写入（V1.0）\n\n> 基于 `@guandata/guancli@1.0.34` 的实证记录。所有 API 路径、payload 字段、报错信息、治理判断维度均来自真实跑通的请求。覆盖整库治理扫描 + 60+ 张 ETL 创建/重构/修复/删除的实战。\n>\n> ⚠️ 官方全家桶已把 BI 写操作拆成兄弟 skill 并**全部公网化**（2026-06-03，`npm i -g @guandata/guanskill`）：标准 ETL 写入有 `guanetl`、工作流数据流有 `guanwf`、数据源/数据集有 `guands`。**但 Part B 这套基于 `guancli fetch` + payload 的实战手册仍是底层事实源**——直接命中 API 路径 / payload 字段 / 报错码 / 治理判断的部分官方命令封装不到。遇到标准化 ETL 写入可路由到 `guanetl`，但**整库治理扫描、direct-save、payload_json、SmartETL 全链路重写、10 类报错速查继续走本 skill**。\n>\n> 🧪 **实测边界（2026-06-04 · workshop513 · BI 8.2.1-hf6）**：guanetl `edit` 的 base→etl.go 逆向在 **0.1.12 / 0.1.13 完全失效**（空 `return []Node{}`，5/5 ETL 全复现、`-v` 无报错）；`save` 的输出绑定 guard 也误触发。**0.1.14 两个 bug 均已修复**（2026-06-09 workshop513 实测：`ads_会员经营任务池` 6 节点 `edit→export→lint→save` 全链路通过）。改现有 ETL 现在可以走 `guanetl edit` 正常路径了。**B-0.5 绕过方案仍保留作 fallback 参考**（万一其他 BI 版本 / 节点类型仍触发）。\n>\n> ⚡ **0.1.14 修复确认**（2026-06-09 复测）：① `edit` 空 `etl.go`（Wall 1）→ ✅ 已修，6 节点完整逆向为 `BasicInputDataset×4 + BasicSqlScript + BasicOutputDatasetInDir`；② `save` 输出绑定 guard 误触发（Wall 2）→ ✅ 已修，save 直接成功不再拦截。另：**0.1.14 移除了 `delete` 命令**，删 ETL 改走 BI UI 或直接 `DELETE /api/etl/` API。**0.1.15（2026-06-15）进一步增强 `save` 输出数据集保护（保留级联相关配置）+ 对追加写入场景的行数据结构提前校验**——改 ETL 走 `guanetl edit` 正常路径更稳。\n\n## B-0.5 guanetl `edit` 失效时的绕过方案（0.1.12–0.1.13 历史；0.1.14 已修复，保留作 fallback）\n\n> ✅ **0.1.14 修复确认**（2026-06-09 · workshop513 复测）：`edit` 空 etl.go + `save` 输出绑定 guard 误触发两个 bug 均已修复，`edit→export→lint→save` 全链路跑通。**正常情况下直接用 `guanetl edit` 即可**。以下绕过方案保留为 fallback——万一特定 BI 版本 / 节点类型仍触发时可用。\n\n**原三道墙**（guanetl 0.1.12–0.1.13，0.1.14 已全部修复）：\n1. ~~`edit` 的 base→`etl.go` 逆向出空~~ → **0.1.14 已修**\n2. ~~`save` 撞输出绑定 guard 误触发~~ → **0.1.14 已修**\n3. `save` 的合并对「身份字段」base 优先（改 ETL 名 / 节点名被覆盖）+ 输出 dsId churn → **未验证是否修复**，改名仍建议走 `guands dataset rename` / `alias`\n\n**→ Fallback 路径**（仅在 `guanetl edit` 仍有问题时使用）：\n- **纯改名 / 字段展示名** → 别碰 ETL 图，直接 `guands dataset rename` / `guands dataset alias`。\n- **改逻辑 / 改结构（加节点、改 SQL）** → **不可变重建**（最稳）：读 `_base_etl.json` 拿旧定义 → `guanetl create` 写一份**新 outputDsName** 的新 ETL → `export/lint/save/verify` → 旧 ETL 退役。\n- **高级逃生**（仅在没法重建时）：手工构造 `_exported.json` = fresh `_base` 的 actions + 保留 output `dataSource.dsId` + 你的**逻辑**改动，再 `guanetl save`。\n- **认证别绕**：BI API 是 **cookie/session 认证**——写操作一律走 `guanetl save` / `guands`（它们持有正确会话）。\n\n**清理坑**：~~`guanetl delete --cascade`~~（0.1.14 起无 delete 命令）。删 ETL + 孤儿输出集走 `DELETE` API，**顺序必须先删输出数据集、再删 ETL（与 B-7.1 一致）**；反过来先删 ETL → `2002 输出数据集已存在` 失败。**2026-06-17 · workshop513 实测定案**（独立 DATAFLOW ETL，净零回归）：`DELETE /api/data-source/<输出dsId>`（ETL 还在）→ `DataSource deleted` 成功、**不报 6001**；再 `DELETE /api/etl/` → 成功。churn 出的中间绑定是另一回事——删 ETL 后多为 `NOT_FOUND` 幽灵（`ds get`=1002 但 `ds delete`=6001，不可见、无害）。\n\n## B-〇. 推荐工作流（先治理再重建）\n\n```text\n1. 治理扫描 ← 批量抓全部 ETL 原始 JSON，分析依赖、循环、复杂度\n2. 决策保留 ← 用 8 维 ETL + 4 维字段判断：保留 / 合并 / 降级 / 删除\n3. 设计分层 ← 按 ODS/DIM/DWD/DWS/APP 重新分配\n4. 字段审计 ← 双源（page + etl）扫字段使用度，确定砍字段范围\n5. 新建目录 ← v2 目录与旧目录并行，不动旧链路\n6. 写入 ETL ← 三节点骨架 INPUT→SQL→OUTPUT，本地编译 payload\n7. 预览节点 ← etl preview 先看 OUTPUT 节点能不能出数据\n8. 执行落表 ← execute + task get 轮询 + 拿 result.error\n9. 对账切流 ← 新旧并行验证，下游看板/ETL 逐张迁移\n10. 清理旧链路 ← 先 DELETE data-source，再 DELETE etl（顺序不能反）\n```\n\n跳过治理直接动手 = 把同样混乱重做一遍。第 1–4 步是写 ETL 之前最值钱的活。\n\n---\n\n## B-1. API 全图（11 个已实测 endpoint）\n\n```text\n🔧 写入类（POST）\nPOST /api/directory ← 建目录（dirType=ETL 或 DATA_SET）\nPOST /api/etl/direct-save --stdin ← 创建/更新 ETL（payload 有 dataFlowId 即更新）\nPOST /api/etl/execute ← 触发执行 {\"dataFlowId\":\"...\"} → taskId\n\n📖 读取类（GET）\nGET /api/etl/ ← ETL 完整定义（含 actions/sql/relativeFieldAlias）\nGET /api/directory/ETL/authorized-tree ← ETL 目录树\nGET /api/directory/DATA_SET/authorized-tree ← 数据集目录树\nGET /api/task/ ← 任务状态 + 错误详情（关键修 bug 入口）\n\n🗑️ 删除类（DELETE）\nDELETE /api/data-source/ ← 删数据集（必须先于 etl 删）\nDELETE /api/etl/ ← 删 ETL（输出数据集还在 → 失败）\n\n🔍 探测类（OPTIONS）\nOPTIONS /api/ ← 返回 Allow 头，反推支持的 method\n```\n\n### B-1.1 反推未知 endpoint 的方法\n\n```bash\n# 步骤 1：探 method 集合（最高效）\nguancli fetch OPTIONS /api/\n# Allow: POST,GET,HEAD,DELETE,OPTIONS\n\n# 步骤 2：盲发 POST，根据错误类型判断\n# - \"No static resource X\" → endpoint 不存在\n# - \"Request method 'X' is not supported\" → endpoint 存在但方法不对\n# - \"InvalidJSON\" / \"missing field\" → endpoint 对，body 不对（开始迭代）\n# - \"ResourceId(...) ResourceNotExist\" → endpoint 模式错误\n\n# 步骤 3：根据错误反推 schema\n```\n\n**血泪经验**：BI 内部 endpoint 命名不一致——`data-source`（带连字符）、`dataflow`（无连字符）、`etl`（无连字符）、`directory/ETL`（驼峰大写）混用。靠 OPTIONS 探测比盲发 POST 高效 10 倍。\n\n---\n\n## B-2. 治理扫描：判断 ETL/字段去留\n\n### B-2.1 为什么扫描\n\n观远 BI 用久了的常见症状：核心表互相循环引用、同份业务规则散落多张计算列、维表混入下游经营字段、大量已创建未运行的废弃 ETL、名实不符。**不扫一遍直接动手，重建出来还是一团乱麻。**\n\n### B-2.2 扫描 3 步走\n\n```bash\n# Step 1：列出范围\nguancli etl tree # 全库\nguancli etl search '' -d --raw # 按目录缩范围\n\n# Step 2：批量抓原始定义（--raw 关键，不带就只输出阉割版）\nmkdir -p raw\njq -r '.response.contents[].dataFlowId' etl-list.json | while read id; do\n guancli --raw etl get $id > raw/$id.json\ndone\n\n# Step 3：本地脚本聚合分析\nnode analyze.mjs raw/ > analysis.json\n```\n\n### B-2.3 分析脚本要算的 10 个指标\n\n| 指标 | 怎么算 |\n|---|---|\n| 输出数据集 | `actions[].type==\"OUTPUT_DATASET\"` 的 `outputDsName` |\n| 上游 ETL 依赖 | `inputs[]` 里 `displayType==\"DATAFLOW\"` 的，反查归属哪个 ETL |\n| 节点数 | `actions.length` |\n| Join 数 | `actions[].type==\"JOIN_DATA\"` 的个数 |\n| 计算列数 | `actions[].type==\"CALCULATOR\"` 的个数 |\n| 透传聚合数 | `actions[].type==\"GROUP_BY\"` 的个数 |\n| 长公式数 | CALCULATOR 里 `formulas[].expr.length > N` 的个数 |\n| 输出行数/大小 | 输出 ds 的 `rowCount` / `storageSize` |\n| 调度方式 | `cron`（`AFTER_REFRESH` / 具体 cron / 无） |\n| 状态 | `status`（`FINISHED` / `CREATED` / `FAILED`） |\n\n构建依赖图（节点 = ETL，边 = \"本 ETL 输入了另一个 ETL 的输出表\"），DFS 三色标记找循环组，计算 fanIn/fanOut。\n\n### B-2.4 ETL 去留判断（8 维）\n\n| 维度 | 信号 | 处置 |\n|---|---|---|\n| **循环依赖** | 出现在循环组里 | **必拆**：找共同字段抽到 DIM/DWD，让两下游都读它 |\n| **状态异常** | `status=CREATED` 且无输出 / 0 次执行 | 删或重建为明确用途 |\n| **本地无下游** | 没有任何其他本地 ETL 引用其输出 | 区分两类：① 给看板用 → 标 APP 层；② 没人用 → 删或归档 |\n| **节点复杂度** | 节点 > 25、Join > 5、CALCULATOR > 3、长公式 > 0 | **拆**成多段：基础明细 / 规则映射 / 业务汇总 |\n| **输出大小** | 单表 > 1GB 或 > 1000 万行 | 检查是否不必要物化；规则计算应集中 |\n| **名实不符** | ETL 名跟输出表名差距大 | 改名或废弃 |\n| **历史补数** | 名字含\"补齐 / 历史 / 月末\"等，调度异常 | 移到补数/归档目录，不挂主链 |\n| **未调度** | `cron` 为空且不是被其他 ETL 触发 | 确认是否临时/手工 → 标记或删除 |\n\n### B-2.5 字段去留判断（4 维）\n\n| 维度 | 怎么判断 | 处置 |\n|---|---|---|\n| **下游 ETL 引用** | 在所有下游 ETL 的 SQL/CALCULATOR/SELECT_COLUMNS 里 grep 字段名 | 0 引用 → 候选删 |\n| **看板（page）引用** | 看板/卡片是否用了这个字段 | 有 → 不能删 |\n| **业务口径** | 字段名是否含业务规则（\"是否会员\"、\"是否新客\"） | 这类是规则字段，集中维护到专门的规则映射 ETL |\n| **冗余/派生** | 能否从其他字段推导（开业天数 vs 开业日期） | 派生字段尽量在下游算，不在维表物化 |\n\n详细双源审计方法见 **B-10**。\n\n### B-2.6 ODS/DIM/DWD/DWS/APP 分层\n\n| 层 | 放什么 | 关键约束 |\n|---|---|---|\n| **ODS** | 原始外部表、DB_EXTRACT、手工源表 | 只做轻清洗，不承载业务口径 |\n| **DIM** | 门店、会员、日期、支付通道、顾客标识映射 | **稳定、少依赖、可复用，禁止依赖 DWS/APP** |\n| **DWD** | 订单明细、券明细、好友明细、评价明细 | 固定主键和时间粒度 |\n| **DWS** | 复购、RFM、拉新、蓄水、门店日报 | 从 DWD/DIM 读，**禁止反向被 DIM 引用** |\n| **APP** | 看板专用宽表 | **只服务页面，不再作为基础上游** |\n\n调度按层推进 ODS → DIM → DWD → DWS → APP。\n\n**核心反模式**：维表（DIM）混入了下游经营结果字段——比如门店维表里塞了\"近 90 天订单数\"。这是循环依赖最常见的根源。\n\n### B-2.7 输出物建议\n\n- `analysis.json`：机器可读分析结果（summaries / cycleGroups / highComplexity / nodeTypes）\n- `governance-report.md`：人类可读治理报告（核心结论 + 循环组 + 合并主题域 + 清理对象 + 目标架构 + 实施路线）\n- `migration-plan.json`：每个旧 ETL → v2 的对应表（score / targetName / status）\n\n---\n\n## B-3. 第一步：新建目录\n\n### B-3.1 不要试这些路径（全部 5001 失败）\n\n```text\nPOST /api/directory/create\nPOST /api/directory/ETL/create\nPOST /api/directory/ETL/add\nPOST /api/directory/add\nGET /api/directory ← Method 'GET' is not supported\nGET /api/etl/tree ← ResourceId(tree)/ResourceKind(DataFlow) ResourceNotExist\nPOST /api/etl/dir ← Method 'POST' is not supported\nPOST /api/resource-atlas/dir ← 'resourceTypeName missing'\n```\n\n合法 `dirType` 只有 **`ETL`** 和 **`DATA_SET`**（不要写 `DATA_PROCESS_ETL` `SMART_ETL` `DATAFLOW` `DATA_FLOW`）。\n\n### B-3.2 正确做法\n\nETL 树和数据集树是**两棵独立的树**：\n\n```bash\nguancli fetch GET /api/directory/ETL/authorized-tree\nguancli fetch GET /api/directory/DATA_SET/authorized-tree\n```\n\n**分别建**（同名也得建两次）：\n\n```bash\n# ETL 目录\nguancli fetch POST /api/directory \\\n '{\"name\":\"warehouse_v2\",\"parentDirId\":\"\",\"dirType\":\"ETL\"}'\n\n# 数据集目录\nguancli fetch POST /api/directory \\\n '{\"name\":\"warehouse_v2\",\"parentDirId\":\"\",\"dirType\":\"DATA_SET\"}'\n```\n\n记住返回的两个 dirId，写 ETL payload 时**两个都要用**：\n- ETL 目录 id → ETL 自身的顶层 `parentDirId`\n- 数据集目录 id → OUTPUT_DATASET 节点的 `parentDirId` + `dataSource.parentDirId`\n\n---\n\n## B-4. 第二步：构造 ETL payload（速查）\n\n最小骨架 = 3 节点：\n\n```text\nINPUT_DATASET → SQL_SCRIPT → OUTPUT_DATASET\n```\n\n**最关键的字段坑**（详细见 references）：\n- ⚠️ SQL 节点字段名是 **`sql`，不是 `sqlScript`**。写错时 direct-save 不报错，但 SQL 不生效（最隐蔽 bug）。\n- ⚠️ SQL 里 `input1/input2/...` 是**位置式索引**对应 `sources[]`，删除 INPUT 节点会让索引前移，**改 input 节点必须同时改 SQL**。\n- ⚠️ INPUT_DATASET 的 `relativeFieldAlias` 决定 SQL 里能引用什么字段名，必须读了再写 SQL。\n- ⚠️ OUTPUT_DATASET 的 `parentDirId` 是**数据集目录 id**，不是 ETL 目录 id（错填→\"保存路径无效\"）。\n\n📖 **[references/part-b-payload.md](references/part-b-payload.md)** — 完整 payload 模板（含 dataSource.dirPath）+ 三种节点的字段速查表 + 9 种已知节点类型 + dataFlowId 控制 create vs update + **B-8 复用模板：从扫描到落表的完整 4 阶段脚本**（治理扫描 → 建目录 → 写入执行 → 删除旧链）。\n\n---\n\n## B-5. 第三步：执行 + 拿真实错误\n\n### B-5.1 触发执行（status 字段误导）\n\n```bash\nguancli fetch POST /api/etl/execute '{\"dataFlowId\":\"\"}'\n# => {\"taskId\":\"\",\"status\":\"FINISHED\"}\n```\n\n⚠️ **status 字段误导最坑**：返回的 `status:\"FINISHED\"` 是**任务触发**结果，不是 ETL 执行结果。\n\n### B-5.2 查任务详情（修 bug 必经路径）\n\n```bash\nguancli fetch GET /api/task/\n# => {\"response\":{\"taskId\":\"...\",\"status\":\"FAILED\",\"result\":{\"error\":\"...\"},\"messages\":\"\"}}\n```\n\n`response.result.error` 才是 BI 引擎给的真实错误（SQL 报错、字段找不到等）。\n\n### B-5.3 错误定位三步走\n\n```bash\n# Step 1：触发 execute 拿 taskId\ntaskId=$(guancli fetch POST /api/etl/execute \"{\\\"dataFlowId\\\":\\\"$DFID\\\"}\" \\\n | jq -r '.response.taskId')\n\n# Step 2：等几秒再查 task error\nsleep 4\nguancli fetch GET \"/api/task/$taskId\" | jq '.response.result.error'\n\n# Step 3：根据 error 类型对照 references/part-b-errors.md 修复手册\n```\n\n### B-5.4 异步轮询写法\n\n```bash\nTASK_ID=\"\"\nfor i in $(seq 1 30); do\n st=$(guancli task get $TASK_ID --raw | jq -r '.response.status')\n echo \"[$i] $st\"\n [ \"$st\" = \"FINISHED\" ] || [ \"$st\" = \"FAILED\" ] && break\n sleep 10\ndone\n```\n\n复杂表给 5 分钟（30×10s）一般够。\n\n---\n\n## B-6. 第四步：校验工具集\n\n```bash\n# 1. ETL 视角\nguancli etl search -d --raw \\\n | jq '.response.contents[0] | {dataFlowId,name,status,lastExecution,outputs}'\n\n# 2. 节点级预览（不用 execute 也能看任意节点输出 — 修 bug 利器）\nguancli etl preview --limit 5 --timeout 120\n\n# 3. 数据集视角\nguancli ds search --raw\n\n# 4. 实际数据预览\nguancli ds preview --limit 10\n\n# 5. 行列数对账\nguancli ds get --brief\n```\n\n⚠️ 保存后 OUTPUT 节点 ID 会变成 `id___out`，preview 时用新 id：\n\n```bash\nguancli etl get --raw \\\n | jq -r '.data.actions[] | select(.type==\"OUTPUT_DATASET\") | .id'\n```\n\n---\n\n## B-7. 第五步：删除拓扑\n\n### ⛔ B-7.0 删除前的硬性安全闸（V1.3.1 新增）\n\n**Agent 在执行任何 `DELETE /api/data-source/` 或 `DELETE /api/etl/` 前必须满足以下全部条件，否则拒绝执行：**\n\n1. **用户已逐项明确确认**：列出本次将删除的所有 dsId / etlId（含 ETL 名 + 输出表名 + 路径），用户回复\"确认删除\"或等价明确指令。**模糊回复（如\"嗯\"、\"可以\"、\"清理一下\"）不算确认。**\n2. **下游引用已切流**：通过 `guancli ds get --assoc` 或 B-10 双源审计验证目标 ds 的下游 ETL 与看板（page）已切到 v2，无任何活跃引用。\n3. **新链路对账通过**：v2 对应 ETL `status:FINISHED`，行数与 v1 差异 <1%，关键字段一致（参考 B-7.3 checklist）。\n4. **批量删除分批确认**：单次删除 ≤ 5 张表；超过 5 张必须分批，每批单独走步骤 1。\n\n**Agent 默认行为**：在 ETL 治理 / 重写 / 字段裁剪等任务里，**永远不要主动建议删除**。把待删清单作为 `governance-report.md` / `migration-status.md` 的一节产出给用户审阅，由用户主动指令\"删 X / 删这一批\"才执行。**新旧并行是默认终态，不是过渡态**——除非用户明确要求收敛。\n\n> 这条闸跟 B-13 红线、B-17.10 完成标准里的\"对账确认后再处理旧表\"一脉相承。**误删一张被看板用着的 ds，恢复成本高过保留旧链一年。**\n\n### B-7.1 关键约束：先 ds 后 etl\n\n> ✅ **2026-06-17 · workshop513 实测复核（净零回归）**：独立 DATAFLOW ETL 两个方向各测一次——etl-first 撞 `2002 输出数据集已存在` 失败；ds-first（先 `DELETE /api/data-source/<输出dsId>`，后 `DELETE /api/etl/`）两步皆 `ok`、**不报 6001**。本约束适用所有「ETL + 其输出数据集」清理。`6001 依赖于该数据集` **不**出现在这里，它只属于删*输入*数据集（ETL 仍读它）或 churn `NOT_FOUND` 幽灵场景（见 B-0.5 清理坑）。\n\n```bash\nguancli fetch DELETE /api/etl/\n# => {\"error\":{\"status\":2002,\"message\":\"输出数据集已存在\"}} ← 失败！\n```\n\n正确顺序：\n\n```bash\n# Step 1：先删数据集\nguancli fetch DELETE /api/data-source/\n\n# Step 2：再删 ETL\nguancli fetch DELETE /api/etl/\n```\n\n### B-7.2 数据集 endpoint 反推血泪史\n\n```text\nDELETE /api/dataset/ ← No static resource dataset/...\nDELETE /api/datasource/ ← No static resource datasource/...\nDELETE /api/ds/ ← No static resource ds/...\nDELETE /api/dataflow/ ← No static resource dataflow/...\n✅ 正确：\nDELETE /api/data-source/\n```\n\n### B-7.3 删除前 checklist\n\n- [ ] v3 对应 ETL Status = FINISHED\n- [ ] v3 输出数据集行数 vs v2 行数（差异 < 1%）\n- [ ] v3 输出字段集 = v2 字段集 - 设计砍掉的\n- [ ] 看板（page）依赖 v2 数据集的，已先切到 v3\n- [ ] 下游 ETL 依赖 v2 输出的，已先切到 v3\n\n---\n\n## B-9. 报错修复手册（10 类真坑 · 速查）\n\n每条只列**触发现象 + 一句根因 + 一句修复方向**；完整修复方案 + SQL 示例 + 升级版坑见 **[references/part-b-errors.md](references/part-b-errors.md)**。\n\n| 坑号 | 触发现象 | 根因 / 修复方向 |\n|---|---|---|\n| **1** | `请输入ETL名称` / `保存路径无效` | 顶层 `parentDirId` 缺失或填错 → 必须是 `dirType=ETL` 那棵树的 id |\n| **2** | 保存成功但 execute 数据为空 | 上游 `inputDsId` 只有读权限没运行权限 → 换有权限的输入或写自包含 ETL |\n| **3** | 列名带隐藏 `\\n` 找不到字段 | SQL 里要 `` `带换行的原字段名` AS `干净别名` ``；升级版坑：fieldAlias 与 SQL 中换行+空格不一致 |\n| **4** | `WHERE field <> NULL` 输出 0 行 | SQL 标准里 `<> NULL` 永远是 unknown → 必须 `IS NOT NULL` / `IS NULL` |\n| **5** | `cannot resolve column` | 字段引用与 INPUT_DATASET 的 `relativeFieldAlias` 错位 → 编译时按节点级别名替换 |\n| **6** | `Syntax error at or near ';'` | CTE 内 trailing `;` + 中文注释 → 用 regex 去除 `FROM n_id_xxx;` 后的 `;` 与注释 |\n| **7** | `AMBIGUOUS_REFERENCE` | FROM/JOIN 同表别名同名 → 改 FROM 别名为 s2，对齐 ON 子句 |\n| **8** | `s2.xxx 找不到` | FROM 表错位（自连而非 JOIN 不同表） → 修正 JOIN 目标表 |\n| **9** | `NUM_COLUMNS_MISMATCH` | UNION 列数不一致（老引擎自动补 NULL，新引擎严格化） → 手工对齐 SELECT，缺的用 `NULL AS xxx` |\n| **10** | 日期比较恒为 false | `WHERE order_date < 'today_field'` 字符串字面量 → 改 `date_sub(current_date(), 1)` |\n\n---\n\n## B-10. 字段使用度审计（双源扫描）\n\n### B-10.1 方法论\n\n字段裁剪不能只看看板（page）—— 下游 ETL 也消费字段。**双源 0 引用**才能安全裁。\n\n```bash\n# 1. 拉数据集所有下游\nguancli ds get --assoc\n# 输出 N 个下游：M 个 ETL + K 个 PAGE\n\n# 2. 批量 page get + etl get 落本地\nfor id in ; do\n guancli page get $id > pages/$id.txt\n guancli etl get $id > etls/$id.txt\ndone\n\n# 3. 对每个字段做 grep 双源统计\nfor fld in ; do\n page_cnt=$(grep -c \"$fld\" pages/*.txt)\n etl_cnt=$(grep -c \"$fld\" etls/*.txt)\n if [ \"$page_cnt\" = \"0\" ] && [ \"$etl_cnt\" = \"0\" ]; then\n echo \"🟥 $fld → 真 0 引用，可裁\"\n fi\ndone\n```\n\n### B-10.2 实测对照（必看）\n\n```text\n某千万级订单明细表：43 字段、5GB\n全量扫描：29 page + 14 etl\n仅看板抽样：17 个 0 引用候选\n双源全扫描：仅 2 个真 0 引用\n误删任何一个 → 下游 ETL 跑挂\n```\n\n**只看看板会高估 8 倍可裁字段，必须 page+etl 双源。**\n\n---\n\n## B-11. v2 → v3 批量改造 SDK（速查）\n\n`v3_sdk.mjs` 三个核心 API：\n\n```js\ntransformV2ToV3({ v2PayloadFile, v3Name, removeInputs, newSql, inputMap, description })\npushAndExecute(v3Name, payloadPath) // direct-save → execute\ncheckStatus(v3Name) // guancli etl search → parse Status\n```\n\n`transformV2ToV3` 内部 7 步关键陷阱：**SQL 字段名是 `sql` 不是 `sqlScript`**（最大坑） · 重排节点 ID 时 sources 数组要同步 · 删除 INPUT 后 input 索引重排 · meta 字段要同步更新。\n\n📖 **[references/part-b-sdk.md](references/part-b-sdk.md)** — 完整 7 步实现 + 时间窗口缩减实战（v2 近 3 月 → v3 昨日窗口的 regex 替换样板）。\n\n---\n\n## B-12. 批量迁移工程经验（30+ 表实战）\n\n1. **先治理后写入**：跳过治理直接写 = 把混乱重做一遍。\n2. **payload 全部本地生成**：写编译器把每个旧 ETL 的 meta 编译成三段式 payload，存 `payloads/.json`。\n3. **分批保存**：一次 5–10 张 direct-save，避免单次失败影响整批。\n4. **预览先于执行**：保存完先 `etl preview` 看 OUTPUT 节点能不能出数据；能出来再 execute。\n5. **节点 ID 重映射**：保存后 OUTPUT 节点 ID 变成 `id___out`，从 `etl get` 拿新 id。\n6. **失败修复就地更新**：改 payload 加 `dataFlowId` 再 POST，不要删了重建。\n7. **复用旧 payload**：v2 payload 作为模板，改名+改 SQL+改输入。30 个 ETL 中 22 个用这种方式。\n8. **失败定位用 task error**：每个 task 详情里 `result.error` 是真实失败原因，必看。\n9. **批量任务异步监控**：`until` 循环 + `etl search | grep -c PROCESSING` 比单 task 轮询效率高。\n10. **新旧并行**：v2 链路与 v1 并行，对账无误后再下线 v1。\n\n> 💡 **30+ 张表跨多日的工程必须走 ExecPlan**：不要靠零散 todo + 群消息 + 临时 markdown 来追踪进度。直接走 **B-17.11**（在 [references/part-b17-fullchain-rewrite.md](references/part-b17-fullchain-rewrite.md)）的 ExecPlan 工作法——四个活文档章节（Progress / Surprises & Discoveries / Decision Log / Outcomes & Retrospective）能把治理判断、循环依赖拆法、字段隐藏换行这类\"踩坑—修复\"轨迹完整落到一份自包含文档里，下一个接手的人不用问任何上下文就能继续。\n\n---\n\n## B-13. ETL 治理与写入红线\n\n- ❌ 不要试 `/api/directory/create` 这类拼凑路径，全部 5001。\n- ❌ 不要给 `dirType` 写 `DATA_PROCESS_ETL` `SMART_ETL` `DATAFLOW`，只接受 `ETL` 和 `DATA_SET`。\n- ❌ 不要把 `OUTPUT_DATASET.parentDirId` 填成 ETL 目录 id —— 报\"保存路径无效\"。\n- ❌ **不要把 SQL 字段名写成 `sqlScript`**，正确是 `sql`（写错时 direct-save 不报错但 SQL 不生效）。\n- ❌ 不要在 SQL 里写 `<> NULL` 或 `= NULL`，用 `IS NOT NULL` / `IS NULL`。\n- ❌ 不要假设 INPUT_DATASET 字段名干净 —— 先看 `relativeFieldAlias` 和实际预览。\n- ❌ 不要 execute 完就走人 —— `status:FINISHED` 是任务触发结果，不是 ETL 执行结果。要 `GET /api/task/` 拿 `result.error`。\n- ❌ 不要假设节点 ID 重排不影响 SQL —— 删除 INPUT_DATASET 后 input 位置式索引会变。\n- ❌ **未经用户逐项明确确认，绝不执行任何 DELETE 操作**（含 `/api/data-source/`、`/api/etl/` 和 `/api/page/?force=true` 级联删页）—— Agent 默认行为是把待删清单产出给用户审阅，由用户明确指令才执行。详见 **B-7.0 删除前的硬性安全闸**。模糊回复（\"嗯\"、\"可以\"、\"清理一下\"）不算确认。\n- ❌ 不要为了\"清理\"删旧 ETL —— 并行做新链路、对账确认后再处理旧表。新旧并行是默认终态，不是过渡态。\n- ❌ 不要直接 `DELETE /api/etl/` —— 必须先 `DELETE /api/data-source/` 再删 ETL。\n- ❌ 不要试 `DELETE /api/dataset/`、`/datasource/`、`/ds/` —— 正确是 `/api/data-source/`（带连字符）。\n- ❌ 不要给 INPUT_DATASET 用没有运行权限的 dsId —— 保存能过，执行会拿不到数据。\n- ❌ 不要复用 OUTPUT 节点 id 作为 preview 参数 —— 保存后会变成 `id___out`。\n- ❌ 不要跳过治理扫描直接重建 —— 不识别循环依赖和重复主题域，重建出来还是一团乱麻。\n- ❌ 不要把\"是不是被引用\"等同于\"该不该保留\" —— 看板 APP 表常常没下游 ETL，要单独看看板侧。\n- ❌ 不要让 DIM 维表依赖 DWS/APP 层 —— 这是循环依赖最常见的根源。\n- ❌ 不要只看看板做字段裁剪 —— 实测仅看板会高估 8 倍可裁字段，必须 page+etl 双源。\n- ❌ 不要假设老 ETL SQL 写法在新引擎也能跑 —— 5 类历史 bug（trailing `;` / UNION 列差 / 字段名换行+空格 / self-join 别名同名 / 字符串字面量与 DATE 比较）会暴露。\n- ❌ 不要忘记 OPTIONS 探测 —— 找未知 endpoint 时比盲发 POST 高效 10 倍。\n\n---\n\n## B-14. ETL 写入侧 API 速查\n\n| 操作 | 方法 | 路径 / 命令 |\n|---|---|---|\n| 探测 method | OPTIONS | `/api/` |\n| ETL 目录树 | GET | `/api/directory/ETL/authorized-tree` |\n| 数据集目录树 | GET | `/api/directory/DATA_SET/authorized-tree` |\n| 建目录 | POST | `/api/directory` body: `{name, parentDirId, dirType}` |\n| 抓 ETL 详情 | – | `guancli --raw etl get ` |\n| 写入 ETL（创建/更新） | POST | `/api/etl/direct-save --stdin` |\n| 触发执行 | POST | `/api/etl/execute` body: `{dataFlowId}` |\n| 查任务真错误 | GET | `/api/task/` → `.response.result.error` |\n| 节点级预览 | – | `guancli etl preview ` |\n| 删数据集（先） | DELETE | `/api/data-source/` |\n| 删 ETL（后） | DELETE | `/api/etl/` |\n\n---\n\n## B-15. 实战 ID 速查（模板）\n\n> 跨多日的大型重构（B-17 / 30+ 表）建议在仓库根维护一份本地 ID 速查表，避免每次都用 `guancli` 翻树。下面是模板，把 `<...>` 占位符替换成你自己 BI 实例里的真实 ID。**不要把这份表 commit 到公开仓库。**\n\n| 名称 | ID | 说明 |\n|---|---|---|\n| 旧 ETL 父目录 | `` | v1 ETL 目录 |\n| 旧数据集父目录 | `` | v1 数据集目录 |\n| **v2 ETL 目录** | `` | 新建 ETL 落这里 |\n| **v2 数据集目录** | `` | OUTPUT_DATASET 落这里 |\n| 数据集树根目录 | `` | dirPath 第一层 |\n| ETL 树根目录 | `` | – |\n| PoC ETL | `` | 第一个跑通的最小 ETL |\n| PoC 输出数据集 | `` | 同上输出 |\n| PoC 输入数据集 | `` | 小表，权限可运行 |\n\n如果上面 ID 失效（被删/改名），用以下命令重新拿：\n\n```bash\nguancli fetch GET /api/directory/ETL/authorized-tree | jq '.response | .. | objects | select(.name==\"<你的 v2 目录名>\")'\nguancli fetch GET /api/directory/DATA_SET/authorized-tree | jq '.response | .. | objects | select(.name==\"<你的 v2 目录名>\")'\n```\n\n---\n\n## B-17. 全链路重写方法论（CTO 张进）\n\n> 这套是观远 CTO 张进的 SmartETL 完整改写经验。它跟 B-2 治理扫描互补：B-2 解决\"有哪些 ETL 该治理\"，B-17 解决\"具体重写一条链路时怎么做才不留尾巴\"。\n>\n> **核心区别**：B-17 强调**全链路追到原始源**，不接受只重写最终 ADS。如果用户说\"把这条链路重新做一遍\" / \"替换数据源\" / \"做副本页验收\"，必走 B-17。\n\n📖 **[references/part-b17-fullchain-rewrite.md](references/part-b17-fullchain-rewrite.md)** — 完整方法论 11 节：何时用 B-17 / 4 件交付 / 8 条硬规则 / 5 步标准工作流 / 三层验收（数据集/副本页/卡片级）/ 差异追踪 5 步法 / 空快照处理标准 / 标准交付物清单 / 6 类专属常见坑 / 完成标准 6 项 / **B-17.11 用 ExecPlan 管理重写工程**（含 SmartETL 改写专用 ExecPlan 骨架，拿去直接填空）。\n\n**最简口诀**（10 秒决定要不要进 B-17）：\n- 只新建 1 个 SQL 节点数据集 → 走 B-3 ~ B-9，不进 B-17\n- 涉及\"页面副本验收\"或\"卡片级数值对账\"或\"全链路追到原始源\" → 必进 B-17\n- 30+ 表 / 跨多日 / 循环依赖拆解 → 进 B-17 + 走 B-17.11 ExecPlan\n\n---\n\n# 🆎 Part C：自定义图表开发与排障（V1.1 新增）\n\n> **并行参考（V2.0 标注）**：观远 maintainer wubaoqi 在 2026-04-29 发布了 `@wubaoqi/guan-chart-kit`（React + ECharts 组件库，专为观远 BI 设计）和 `@wubaoqi/guan-chart-kit-usage-skill`（agent-skill，教 SuperApp 接 chart-kit）。两条路线区别：\n> - **chart-kit 路线**（wubaoqi）：从零搭新看板，走**组件接入** + npm 依赖管理，适合标准化复用\n> - **本 Part C 路线**：在既有卡片上做 HTML/CSS/JS 注入 hack，绕过组件直接改 DOM/data，适合改造既有页面、临时 overlay、固定卡片\n>\n> 两者互补，按\"是新搭还是改造\"分流。\n\n> 来源：观远 CTO 张进的自定义图表注入实战经验。涵盖 HTML/CSS/JS 注入、runtime 取数、固定卡片、遮罩层、z-index/stacking context、路由清理，以及任何**必须在真实观远页面里做浏览器验证**的前端问题。\n\n## C-〇. 何时用 Part C\n\n任务涉及观远 BI **自定义图表**的：\n- 前端代码（HTML/CSS/JS）\n- 运行时取数（`renderChart` 的 `data` 参数解析）\n- 页面级 DOM 操作（固定卡片、overlay、mask）\n- 浏览器层级问题（z-index、stacking context、pointer-events）\n- 路由切换清理、复制页 card id 重定位\n- 懒加载导致脚本不执行\n- 必须在真实页面验证的问题\n\n不用 Part C 的情况：只是在观远 UI 里点几下做卡片配置，不写代码 → 走路由层（标准建卡交 guanvis）。\n\n## C-1. 快速开始原则（6 条）\n\n1. **要注入 HTML/CSS/JS** → 用「自定义图表」，不用「自定义图表 Lite」\n2. **先在真实观远页面复现问题，再改代码**\n3. **先确认 live 页实际运行的是哪份脚本**，再判断问题\n4. **脚本开始漂移或多次局部修补失效时，优先给完整 JS**，不要继续发零碎 diff\n5. **每次结构性修改后回浏览器重新验证**\n6. **遇到取数问题，先看 `GDPlugin().init(renderChart)` 的 runtime 入参**，不要先假设它等于 `/api/card/.../data` 的 HTTP 包裹层\n\n## C-2. runtime 契约（必须知道）\n\n观远当前的 runtime 回调签名是：\n\n```javascript\nfunction renderChart(data, clickFunc, config, helpers) {}\n```\n\n⚠️ **常见误解**：\n- ❌ 把第一个参数 `data` 当 DOM 根节点 —— 错。要自己从 `document.querySelector(...)` 或 `document.body` 获取 DOM。\n- ✅ `helpers` 常见为 `{ refreshData, clickFunc }`\n\n`data` 形态多变，常见 5 种：\n\n```javascript\n// 形态 1（最常见）\n[\n [\n { name: \"payload_json\", data: [\"{...}\"] },\n { name: \"report_date\", data: [\"2026-03-18\"] }\n ]\n]\n\n// 形态 2\n[{ name, data }, ...]\n\n// 形态 3\n{ chartMain: { columns: [...] } }\n\n// 形态 4\n{ response: { viewData: [...] } }\n\n// 形态 5\n[{ payload_json, report_date }]\n```\n\n**结论**：优先围绕 runtime `data` 写解析逻辑。`/api/card/.../data` 只用于核对证据，不要把它当 callback 结构直接照搬。\n\n## C-3. payload_json 取数排障（速查）\n\n📖 **[references/part-c-payload-json.md](references/part-c-payload-json.md)** — 三种\"拿不到 payload\"的细分 / 最快判断方式 / `JSON.parse` 硬规则 / 截断错误（`Unterminated string` / `Unexpected end of JSON input`）的判断 / 推荐方案：拆列而非整包 JSON。\n\n**最简结论**：JSON.parse 失败且报截断错时，**优先判断为数据链路把长字符串截断了**，不要继续堆兼容解析逻辑。改数据方案——把整份报告拆成多列（`report_date` / `key_insights_md` / 各 section 列）传给前端，比 runtime 再 `JSON.parse(payload_json)` 稳得多。\n\n## C-4. 固定卡片 / overlay 场景\n\n### C-4.1 保守做法\n\n- ✅ **只移动目标卡片内容**，不要把整页都抽进 overlay\n- ✅ overlay 和 mask **挂到当前页面根节点**，**不要挂到 `body`**\n - 挂到 body 的后果：切页后残留 / 与原生浮层打架 / 跟右侧锚点导航层级冲突\n- ✅ overlay 的 z-index 要够用，但**不能压过观远原生导航、浮层、工具条**\n- ✅ 卡片尺寸变化时，主动派发 `resize`（立即一次 + 延迟几次）让图表重排\n\n### C-4.2 z-index 基线（已验证）\n\n```text\noverlay 容器 约 8\nmask 约 1\n固定卡项 约 20，按需要递减\n```\n\n目标：**高于滚动内容，低于观远原生导航、菜单、工具层。**\n\n### C-4.3 让加载器看得到注入卡，但用户不必看到\n\n- 观远自定义图表 iframe **是懒加载的**\n- 注入卡放在首屏以下 → 初次进页时脚本可能根本不执行\n\n**可靠做法**：\n1. 把注入卡**放在首屏**\n2. 查看态视觉隐藏\n3. **编辑态恢复可见**（让用户能找到并编辑）\n\n## C-5. 页面生命周期管理\n\n### C-5.1 必须主动销毁注入物的场景\n\n- URL 不再匹配目标 page id\n- 进入编辑态\n- 切到 `pageRenderType=phoneView`\n- 客户端路由离开当前页\n\n**只在目标桌面查看态重建。**\n\n### C-5.2 复制页面后 card id 全变\n\n- 观远复制页面会生成新的 card id\n- 继续使用原页面硬编码 id 通常**不会显式报错，只会悄悄失效**\n- 复制页一定要重新确认 card id\n\n### C-5.3 MutationObserver 死循环陷阱\n\n- 监听 `body subtree` 后又在回调里改样式 → 容易反复触发，卡死页面\n- ✅ 更稳的做法：低频轮询 + 精准 rect 比较\n\n## C-6. 浏览器排障清单\n\n### C-6.1 改代码前先看 live runtime\n\n检查：\n- 当前 URL 和 page id\n- `window` 上是否已有旧版注入 key\n- `__gd_overlay__` 和 `__gd_overlay_mask__` 是否存在\n- 页面里是否留有历史实验节点\n\n### C-6.2 找到真正可点击的 DOM\n\n不要把\"看到的文本节点\"误当成真正交互节点。对右侧锚点导航，真正有用的目标往往是：\n- 打开按钮图标\n- tab 按钮\n- pin 图标\n\n### C-6.3 用 `elementFromPoint` 查层级问题\n\n控件可见但点不动时，查控件中心点命中的真实元素：\n- 命中 fixed card 或 overlay 子节点 → 层级问题\n- 命中正确控件但还不工作 → 之前点错节点 / 某个祖先禁用了 pointer events\n\n### C-6.4 最终用真实浏览器点击验收\n\n不要只靠 `page.evaluate(... click())`。要用真实浏览器点击，确认：\n- tab 切换是否真的生效\n- 页面滚动位置是否真的变化\n- pin 状态是否真的切换\n\n## C-7. 保留原生浮动 UI\n\n- ❌ 没必要时，**不要重绘或克隆**观远原生浮动控件\n- ✅ 优先修 stacking context、pointer-events、opacity，而不是复制一套控件\n\n原生控件不可点时，按这个顺序排查：\n1. overlay 是否盖住它\n2. mask 是否拦截事件\n3. 祖先节点是否被设成 `pointer-events: none`\n4. 原控件是否被历史实验隐藏\n\n## C-8. 交付规则\n\n- ✅ 用户要手工粘贴时，**默认给完整 JS**，不给局部片段\n- ✅ 如有需要，同时明确给出 HTML / CSS\n- ✅ 脚本不稳定时，完整替换优于局部修改\n- ✅ 页面已经完全坏掉时，先给最小恢复版救回来：\n\n```javascript\nfunction renderChart() {}\nnew GDPlugin().init(renderChart);\n```\n\n提醒用户执行：**保存 → 发布 → 强刷查看页**。\n\n## C-9. 最终验收清单\n\n最终一定要在真实页面验证：\n- [x] 页面加载\n- [x] 查询 / 筛选切换\n- [x] 滚动\n- [x] 左侧栏展开收起\n- [x] 路由切页\n- [x] 编辑态进出\n- [x] 桌面 / 手机态切换\n- [x] 原生浮动控件是否仍可见、可点\n\n## C-11. 深度参考资料\n\n遇到复杂的固定卡片 / overlay / 锚点导航问题时，读：\n\n- [references/custom-chart-playbook.md](references/custom-chart-playbook.md) — 张进的完整自定义图表排障手册原文（含固定层与真实布局错位修正、右侧原生导航失效详细处理、elementFromPoint 实战、MutationObserver 死循环深入分析）\n- [references/etl-rewrite-original.md](references/etl-rewrite-original.md) — 张进的 SmartETL 改写经验原文（B-17 章节就是基于它整合的，这里是未删减版）\n\n## C-12. HTML 应用化看板生成（V2.1.1 新增）\n\n> **触发**：用户说\"更高级 / 更复杂 / 更好 / 应用 / 自定义模块 / 不要限制在标准看板 / 最完美版本 / HTML 看板\"——立刻切到这条路线，**不要**按 guanvis 标准 KPI/折线/柱状图套路交付。\n>\n> **架构**：原生 Page + 原生 selector + HTML SDK 可见层（`createCustomChart().setSubType(CustomChartSubType.SDK).loadContent(...)`）+ DATA_GRID dataView 数据层。后端负责权限/刷新/聚合/筛选，前端负责叙事/布局/SVG-HTML 可视化。\n>\n> **不能跳的两条坑**（2026-05-14 `app.guandata.com` 上 `` 实例实测）：\n> 1. `guanvis` DSL 的 `.linkToAll()` **不会** 把 selector 联到 custom chart 内部 dataView——必须走 **资源包级 descriptor patch**（不要去调 `/api/card/.../edit/session`，会返回 `60004 此操作只能在草稿页面执行`）。\n> 2. `guancli card preview` 的命令面 V2.1 起 **不再有 `--pg-id`**，老写法 `card data --pg-id ` 已废弃；同时不同子命令返回根字段不同（`page get → .data`、`card get → .response`），jq 统一写 `.data // .response // .`。\n\n📖 **[references/part-c-html-dashboard.md](references/part-c-html-dashboard.md)** — 完整方法论 15 节：何时切到 HTML 应用看板 / 总体架构 / SDK vs ECHARTS_LITE 决策 / dataView contract / 共享 runtime API / 24 字符 ID 校验 / selector → custom chart dataView 联动补丁 / 12 步 pack-patch-upload 工作流 / 字段粒度后缀兼容（`月份` / `月份 (月)` / `年月`）/ guancli V2.1 命令面（含 `.data // .response` 兼容）/ **五层验收清单（四层管道 + §11.5 视觉验收）** / 13 类常见错误表 / 模板包索引。\n\n🎨 **视觉设计底线（V3.1.0 新增）**：[references/part-c-design-baseline.md](references/part-c-design-baseline.md) — 管道通了 ≠ 看板能看。模块第一视觉位=数据判断 / KPI 3-4 个 + 28-32px + 单位/对比基准 / 图表真实性（禁 CSS 假图表）/ token 硬上限 / 反 AI 味红线表（命中即重做）/ `guanvis screenshot` 视觉验收。吸收 design-taste-skills（MIT），覆盖 C-12 / Part D / Part E 三场景。\n\n🧰 **模板包**：[`templates/html-dashboard/`](templates/html-dashboard/) — `charts/html_common.js` (GDHTML runtime) + `html_base.css`（V3.1.0 按设计底线校准）+ 2 个起手模块（executive / trend）+ `scripts/patch_selector_linkage.js`（CLI 参数化，弥补 `linkToAll` 联不到 custom chart dataView 的盲区）。\n\n---\n\n# 🆎 Part D：V7 Page/Card 发布流水线 + 三态硬规则（V2.1.6 新增）\n\n> **触发**：用户说\"v7 BI 实例上端到端搭多个 HTML 应用看板\"，或卡在以下任一报错——立刻进 Part D，**不要** 在标准建卡（guanvis）/ Part C 链路上继续挣扎，没用：\n> - `POST /api/page` + `POST /api/card` 返回 `60004 此操作只能在草稿页面执行`\n> - PUT 草稿页 cdId 后，published page 拿到的 cdId 跟 draft 的不映射，整页拼不出来\n> - CSV 散客订单 `会员ID IS NOT NULL` 算出 \"会员销售占比 = 100%\" 假指标\n> - Spark `WITH 订单汇总 AS (...)` 报 `PARSE_SYNTAX_ERROR Syntax error at or near '订'`\n> - ETL update 报 `1012 输出数据集目录中存在同名文件，请修改`\n> - `dim_是否新店 = '1'` 永远空表（CSV 布尔字段实际是 `'TRUE'/'FALSE'` 字符串）\n> - 50 店 / 90 天 / 45 万订单 openpyxl 写 Excel 4-5 分钟\n>\n> **架构**：v7 BI 的草稿/发布分离机制使**手撸 `/api/page` + `/api/card` 全链路废弃**；银弹是官方 `guanvis`（原 `guanvis-skill`，全家桶成员，现公网 `@guandata/guanvis@0.1.26`），`guanskill install-skill && guanvis publish .` 30 秒一键发布整个 page + custom chart + dataView，跳过所有草稿/发布的状态机。配套硬规则：CSV 散客 `会员ID` 是 `\"\"` 不是 NULL（三态判断必须 `IS NOT NULL AND <> ''`）；STRING 字段才能 `<> ''`，日期/数字 Spark 严格类型不行；Spark CTE 别名必须英文；ETL update 必须带 `OUTPUT_DATASET.dataSource.dsId` 否则 1012；数据集上传 / 建集走官方 `guands`（`create-db` / `import` / `replace-data`，不必再 BI UI 手动）；大表 pandas 用 `to_csv` 而非 `to_excel`（50 倍速差）。\n>\n> 🗑️ **删除 guanvis-published 页面 / ETL（2026-06-05 · workshop513 实测）**：`guanvis publish` 出的页面，卡片**内嵌在 `page.cards` + `meta.layout`、不是独立 `/api/card` 资源**——所以 `DELETE /api/card/` 报 `1002 找不到`、`DELETE /api/page/` 报 `1004 无法删除包含卡片的页面`、guanvis 也不让覆盖成空页（validation 拒 `No layout items`）。**唯一可行**：`guancli fetch DELETE \"/api/page/?force=true\"` → `Page deleted`（级联删卡）。⚠️ **`force=true` 级联删整页内嵌卡片且不可逆，属 B-7.0 安全闸覆盖的 DELETE**：执行前用户须逐项确认页 ID + 页名（模糊回复不算确认）。**仅当本地保有该 page 的 guanvis 源（`page.js` / card 定义）可 `guanvis publish` 重建时，确认即可、无需对账；若是 BI UI 手搭、本地无源的发布页，按不可逆 DELETE 对待、走 B-7.0 完整对账。** 删 ETL + 输出集 → **先删输出数据集、再删 ETL**（与 B-7.1 一致；2026-06-17 实测：反过来先删 ETL 撞 `2002 输出数据集已存在`，ds-first 不报 6001）；`guanetl delete --cascade` 0.1.14 起已无此命令。\n>\n> **不能跳的硬约束**（2026-05-20/21 v7 demo 实战 · 90 天 / 1200 门店 / 80K 会员 / 20 表 / 17 ETL / 6 HTML 看板）：\n> 1. **直接手撸 page+card API 全废**：draft cdId ≠ published cdId 不会自动映射回 published page，光走 `POST /api/page` 拼不出来；走 `guanvis publish` 才能跨过状态机。\n> 2. **CSV 类型三态硬规则**：STRING 字段可以 `<> ''`，日期/数字字段不能（Spark 严格类型直接报错）；CSV 布尔字段实际是 `'TRUE'/'FALSE'` 字符串而非 int 1/0，`= '1'` 永远空表。\n\n📖 **[references/v7-page-card-publish-pipeline.md](references/v7-page-card-publish-pipeline.md)** — 完整 16 节：v7 草稿/发布机制详解 / HTML 应用看板 SDK 最小骨架（schema.js + card_01_html.js + page.js + charts/dashboard.{html,css,js} 4 文件） / CSV 三态判断硬规则 / Spark SQL 4 个硬限制（中文别名 / 嵌套窗口 / `<> NULL` / 字面量日期）/ ETL update OUTPUT_DATASET dsId 注入脚本（`guancli ds search` 自动查 dsId 注入）/ 数据集上传 / 建集走官方 `guands` / pandas to_csv vs to_excel 性能对比 + 向量化 30 倍速差 / JOIN 键全局统一命名（COL_MAP）/ 奶白 `#faf7f2` + 暖蓝 `#2563eb` 主题 / 端到端时间预算 / 反模式与硬约束总表 / 工程目录参考结构 / 与 Part C-12 的边界关系 / **§14 SmartETL 节点化两大静默坑（V2.1.8 新增）** / **§15 customChart 三大坑 + autoBootstrap + chip toolbar 兜底（V2.1.9 新增）** / **§16 移动端 phoneLayout ZIP inject + v7 草稿 save API 死路（V2.1.10 新增）**。\n\n---\n\n## 📚 References 目录\n\n> 本 SKILL.md 主文是路由层 + 关键规则；以下马甲蒸馏档（官方够不着的硬骨头）+ 餐饮公式库 + 贡献者原文构成完整知识库。详细索引：\n\n**马甲蒸馏版：**\n\n| 文件 | 何时读 | 行数 |\n|---|---|---|\n| [part-b-payload.md](references/part-b-payload.md) | 写新 ETL payload / 复用 4 阶段脚本时 | ~175 |\n| [part-b-errors.md](references/part-b-errors.md) | execute 失败、对照 `task error` 找修复方案时 | ~150 |\n| [part-b-sdk.md](references/part-b-sdk.md) | 30+ 表批量改造、写 `transformV2ToV3` 时 | ~60 |\n| [part-b17-fullchain-rewrite.md](references/part-b17-fullchain-rewrite.md) | 全链路 SmartETL 重写、副本页验收、ExecPlan 管理时 | ~290 |\n| [part-c-payload-json.md](references/part-c-payload-json.md) | runtime 拿不到 payload_json / JSON.parse 失败时 | ~60 |\n| [part-c-html-dashboard.md](references/part-c-html-dashboard.md) | 用户说\"更高级 / 应用化 / 不限标准看板\"，从零生成 HTML 化分析应用时（V2.1.1 新建） | ~620 |\n| [part-c-design-baseline.md](references/part-c-design-baseline.md) | 生成/修改任何 HTML 看板的视觉层时；用户说\"做好看点 / 太丑 / AI 味重\"时；C-12 §11.5 视觉验收时。模块首屏=数据判断 / KPI 与数值口径 / 图表真实性 / token 硬上限 / 反 AI 味红线 / `guanvis screenshot` 验收清单。吸收 [design-taste-skills](https://github.com/xiaomingtx666/design-taste-skills)（MIT），覆盖 C-12 / Part D / Part E（V3.1.0 新建） | ~150 |\n| [v7-page-card-publish-pipeline.md](references/v7-page-card-publish-pipeline.md) | V7 BI 实例端到端搭多个 HTML 看板 / 手撸 page+card API 被 `60004` 草稿页面错误卡住 / CSV 散客 `会员ID IS NOT NULL` 算出 100% 假指标 / Spark `WITH 中文别名` 报错 / ETL update `1012 同名文件` / SmartETL `COUNT_DISTINCT`/`JOIN_DATA` 多键/`FULL_OUTER` 节点化坑（V2.1.8）/ HTML customChart `renderChart` 不调 + `autoBootstrap` + chip toolbar 兜底（V2.1.9）/ 移动端 phoneLayout v7 草稿 save API 死路 + ZIP inject 唯一可行路径 + CSS @media 模板（V2.1.10） | ~1120 |\n| [part-e-superapp-pipeline.md](references/part-e-superapp-pipeline.md) | SuperApp 开放应用开发流水线 / `guancli app create/publish` 不读 `.env` 必须显式传 `--app-id` / 脚手架 bi-services 速查 / 数据集异步预览 3 步链路 / **`/survey-engine/api/form/add` 建表反向工程**（脚手架没暴露） / **BI LLM 中转 NOT_JSON_RES/ILLEGAL_JSON_RES 三路径解析模板**（含从 error_message 抠 LLM 响应）/ 客户端模拟流式 + prompt 模板 / 原生 fetch + credentials: 'include' 绕过脚手架 `get` unwrap / `` + Router basename / 设计纪律 + 反模式表 + 决策树（V2.1.12 新建） | ~760 |\n| [ai-native-ads-design.md](references/ai-native-ads-design.md) | **majia-guanyuan 哲学层文档**——客户问\"想给现有 BI 接 AI\"时判断\"治理 vs 重搭\" / 7 条 AI-native ADS 字段约束（中文枚举 / 推荐预算 / 复合拼好 / TIMESTAMP / 强约束取值 / 数值算好 / 权限冗余） / ODS+DWD 不动 ADS 重建 / 预算分配 30%+30%+40% / 与 Part D/E + 餐饮 BI 公式库的关系 / 反模式 8 条（V2.1.13 新建） | ~260 |\n\n**餐饮 BI 公式实战库（V2.1.5 新建，去敏蒸馏自两段餐饮连锁 BI 履职 + 39 个生产 ETL）：**\n\n| 文件 | 何时读 | 行数 |\n|---|---|---|\n| [restaurant-bi-formulas/README.md](references/restaurant-bi-formulas/README.md) | 进入业务公式库的总入口 / 字段词典 / 5 条最常踩坑 | ~70 |\n| [restaurant-bi-formulas/01-date-and-time.md](references/restaurant-bi-formulas/01-date-and-time.md) | 写时间范围（T-1 / 本月 / 上月 / 近 N 天 / 时间宏 / 用餐时段 / 跨月对齐） | ~180 |\n| [restaurant-bi-formulas/02-customer-and-membership.md](references/restaurant-bi-formulas/02-customer-and-membership.md) | 新老客 / 会员属性 / 消费频次（3 口径）/ 复购（跨天 vs 非跨天）/ 留存流失 / RFM / 注册前后行为 / 90 天复购分桶 | ~700 |\n| [restaurant-bi-formulas/03-revenue-kpi.md](references/restaurant-bi-formulas/03-revenue-kpi.md) | AC / ADS / ADT / AUD / Comp / TC_CRM% / NS_CRM% / 营收占比 / 客单分桶 / 累计消费 | ~240 |\n| [restaurant-bi-formulas/04-channel-and-store.md](references/restaurant-bi-formulas/04-channel-and-store.md) | 业务渠道（堂食/外卖）/ 订单子渠道大 case / 时效类型 / 搭配类型 / StoreDate / 成长类型 / 注册门店优先级回填 | ~410 |\n| [restaurant-bi-formulas/05-coupon-and-discount.md](references/restaurant-bi-formulas/05-coupon-and-discount.md) | 核销率 / 折扣率 / 折扣分桶 / 券类型分流 / 注册第一张券 / 30 日优惠订单比例 | ~160 |\n| [restaurant-bi-formulas/06-sql-utils.md](references/restaurant-bi-formulas/06-sql-utils.md) | 字符串拆解 / `explode+split` / `collect_set+concat_ws` / 开窗排名（ROW_NUMBER/RANK/DENSE_RANK）/ 累计窗口 / 多表 LEFT JOIN | ~350 |\n| [restaurant-bi-formulas/07-data-quality-traps.md](references/restaurant-bi-formulas/07-data-quality-traps.md) | `NULL vs 0` / 三态判断 / 口径歧义 / 重复字段名 / A↔B↔通用字段对照表 / 日期边界 | ~250 |\n| [restaurant-bi-formulas/08-etl-engineering-patterns.md](references/restaurant-bi-formulas/08-etl-engineering-patterns.md) | **ETL 工程范式**：10-CTE DWD 宽表底座 / 轻节点重 SQL vs 重节点轻 SQL 哲学 / 财务双源对账 / POS 系统归一化 / 会员生命周期多输出 / Cohort 日期×门店网格（蒸馏自 39 个 V1 生产 ETL）| ~280 |\n| [restaurant-bi-formulas/09-etl-catalog.md](references/restaurant-bi-formulas/09-etl-catalog.md) | **39 个 V1 生产 ETL 索引清单**：按 11 业务域分类（基础维表 / DWD / 会员档案 / 顾客行为 / 财务营收 / 营销目标 / 私域社群 / 活动券 / 评价管理 / 业务标签 / 数据质量）+ 每 ETL 的节点/输入/输出/SQL 速查 + 复用决策表 | ~190 |\n\n> 触发场景：\"如何算复购率 / 客单价 / 同店增长\" / \"怎么判新老客\" / \"用餐时段怎么分桶\" / \"为什么会员数对不上\" / **\"我要写 DWD 宽表 / 评价 pipeline / 财务对账\"** — 直接进 [restaurant-bi-formulas/README.md](references/restaurant-bi-formulas/README.md) 路由表。和 Part B/C 正交（按业务领域分，非按平台操作分）。\n\n**贡献者原文（不修改，照引）：**\n\n| 文件 | 来源 |\n|---|---|\n| [etl-rewrite-original.md](references/etl-rewrite-original.md) | CTO 张进 — SmartETL 改写经验未删减原文 |\n| [custom-chart-playbook.md](references/custom-chart-playbook.md) | CTO 张进 — 自定义图表排障完整 playbook |\n| [execplan-spec.md](references/execplan-spec.md) | OpenAI Codex — ExecPlan 完整规范 |\n| [agents-rule.md](references/agents-rule.md) | OpenAI Codex — AGENTS.md 极简调度规则 |\n\n---\n\n## 📋 版本记录\n\n**最新：V3.1.2** (2026-06-17) — **专业 skill 评审团驱动的质量迭代**（8 视角审 + 每条发现对抗式校验 + 红队综合）。**① 删除顺序矛盾实测定案**：workshop513 真实独立 DATAFLOW ETL 净零回归——ds-first（先删输出数据集再删 ETL）两步皆成功、不报 6001；etl-first 撞 `2002 输出数据集已存在`。据此修正 B-0.5 line 219 与 Part D 删除段两处把顺序写反、误记 6001 的旧文，统一到 B-7.1 并加实测锚点。**② `page?force=true` 级联删页纳入 B-7.0 安全闸**（条件句：本地保有 guanvis 源可 republish 才免对账，无源手搭页按不可逆 DELETE 走完整对账）+ 红线括号补 `/api/page?force=true`。**③ 事实性卫生**：README 双语移除已下架的 `guanetl delete`、AGENTS.md 三处 drift（version/行数/guanadmin 退役括注）、marketplace.json 橱窗去 Part A 补 D/E/ADS、References 目录回填 8 条偏差>20% 行数、description 瘦身脱离 1024 上限、餐饮库 `#时间宏` 锚点死链修复、config.example.json 死字段加注释。纯 correctness+safety+hygiene patch，护城河零删减。\n\n**V3.1.1** (2026-06-17) — **官方全家桶 06-15 版本对齐**。guanskill 0.1.5→**0.1.6**：guancli 1.0.33→**1.0.34**（`metric by-dataset` 按数据集 ID 反查直接原子指标并沿指标血缘展开下游复合/衍生指标）、guanvis 0.1.24→**0.1.26**（资源包打包配置一致性校验提前发现重复/冲突资源 + 自定义排序 payload 归一化修复；0.1.25 补资源 ID 字母开头指引）、guanetl 0.1.14→**0.1.15**（`save` 输出数据集保护增强、保留级联配置 + 追加写入场景行结构提前校验）、guanwf 0.1.4→**0.1.5**（**`workflow.go` DSL 模式统一 + 新增 Python 节点 DSL 与本地校验 + 保存采用三方合并降低覆盖线上数据流风险**）、guands 0.1.14→**0.1.15**（**新增 `dataset update-fields` 批量更新字段展示名/注释（命令行或 JSON，含 `--dry-run`）+ `import` 增 `--header-row`/`--encoding`/`--delimiter` + `refresh --overwrite` 全量覆盖**）。路由总表版本号 + 能力描述刷新（guanwf 升级为「数据流 + Python 节点多节点 DAG」、guands 补 update-fields）；Part B 实测边界补 0.1.15 note；manifest/README/package 基线 pin 同步；majia-guanyuan 版本列 3.1.0→3.1.1 对齐。\n\n**V3.1.0** (2026-06-11) — **HTML 看板视觉设计底线落地**。吸收 [design-taste-skills](https://github.com/xiaomingtx666/design-taste-skills)（MIT）的「可执行设计底线」方法论，新建 [references/part-c-design-baseline.md](references/part-c-design-baseline.md)（~150 行，覆盖 C-12 / Part D customChart / Part E SuperApp 三场景）：模块第一视觉位=数据判断、KPI 3-4 个 + 主值 28-32px + 单位/时间范围/对比基准、图表真实性硬底线（禁 CSS 高度条假图表）、视觉 token 硬上限（圆角 ≤8px / 阴影 ≤8px / 间距刻度 / tabular-nums）、状态文案带业务上下文、反 AI 味红线表（禁紫蓝渐变/玻璃拟态/卡片墙/emoji 图标/营销 CTA，命中即重做）。C-12 验收从四层扩到**五层**（§11.5 视觉验收走 `guanvis screenshot` 服务端截图，绕开 Chrome 黑屏）；模板 `html_base.css` 按底线校准（KPI 28px + tabular-nums + 表格行高 ~38px + `.gd-error` 状态样式族）。与 Part E §10 官方 design:lint 同源互补——lint 机械自检打底，本底线补口径/文案/反 AI 味人工查。完整变更历史见 [CHANGELOG.md](CHANGELOG.md) 或 [GitHub Releases](https://github.com/maojiebc/majia-guanyuan/releases)。\n\n## 👤 作者 / 联系\n\n**马甲（@maojiebc）** · 超级马甲\n\n如果这份 skill 帮到你，欢迎在以下任意渠道找我交流踩坑实录、提需求、报 bug，也欢迎切磋用户运营 / 数据中台 / BI 工程的实战经验：\n\n| 渠道 | 链接 |\n|---|---|\n| 📧 Email | [m9224@163.com](mailto:m9224@163.com) |\n| 🐙 GitHub | [github.com/maojiebc](https://github.com/maojiebc) |\n| 🪝 ClawHub | [clawhub.ai/p/maojiebc](https://clawhub.ai/p/maojiebc) |\n| 🐦 X | [@maojiebc](https://x.com/maojiebc) |\n| 📕 小红书 | [超级马甲](https://xhslink.com/m/4fQMJeHHWKC) |\n| 📰 微信公众号 | **超级马甲** |\n\n> 这份 skill 是 14 年用户运营 + 观远 BI 实战 + 60+ 张 ETL 写入实证沉淀出来的，问题/合作随时聊。\n","tags":{"agent-skill":"3.1.2","agent-skills":"3.1.2","ai-native-ads":"3.1.2","bi":"3.1.2","business-intelligence":"3.1.2","chinese":"3.1.2","claude-code":"3.1.2","custom-chart":"3.1.2","data-analysis":"3.1.2","design-baseline":"3.1.2","etl":"3.1.2","guandata":"3.1.2","guandata-bi":"3.1.2","html-dashboard":"3.1.2","latest":"3.1.2","methodology":"3.1.2","metric-query":"3.1.2","mobile-adaptation":"3.1.2","phonelayout":"3.1.2","restaurant-bi-formulas":"3.1.2","rfm-analysis":"3.1.2","smartetl":"3.1.2","superapp":"3.1.2","v7-publish-pipeline":"3.1.2"},"stats":{"comments":0,"downloads":1254,"installsAllTime":41,"installsCurrent":1,"stars":1,"versions":30},"createdAt":1778341209286,"updatedAt":1781705943739},"latestVersion":{"version":"3.1.2","createdAt":1781705943739,"changelog":"v3.1.2 评审团驱动质量迭代：删除顺序矛盾 workshop513 实测定案（ds-first，修正 line219/Part D 写反与误记 6001）、page?force=true 纳入 B-7.0 安全闸、README/AGENTS/marketplace 元数据 drift 修正、References 行数回填、description 瘦身、餐饮锚点死链修。纯 correctness+safety+hygiene，护城河零删减。","license":"MIT-0"},"metadata":{"setup":[],"os":["macos","linux"],"systems":null},"owner":{"handle":"maojiebc","userId":"s171vv4g1xczzsxtgd1wg0626x83khts","displayName":"超级马甲","image":"https://avatars.githubusercontent.com/u/74524515?v=4"},"moderation":{"isSuspicious":false,"isMalwareBlocked":false,"verdict":"clean","reasonCodes":["review.llm_review"],"summary":"Review: review.llm_review","engineVersion":"v2.4.25","updatedAt":1781746047580}}