zeekrAI/document_analyzer
1
0
Fork 0
Code Issues 2 Pull Requests Actions Packages Projects Releases Wiki Activity

[bug] IR 覆盖率回归：Layer B 从 92.6% 降至 63% + Layer A 新 schema 错误 - 来自 #18 #57

New Issue
Closed
opened 2026-06-02 16:12:43 +08:00 by pzhang_zywl · 4 comments
pzhang_zywl commented 2026-06-02 16:12:43 +08:00
Owner
Copy Link
Copy Source

问题

上次 e2e (commit ace4933): Layer B = 92.6% PASS
本次 e2e (commit a4ab3ef+): Layer B = 63.0% FAIL

覆盖率回归 ~30%。同时 Layer A 出现新错误：rules[22].sources[0].type = function_unit_description（非法类型）。

影响

  • Sections: 2/4 (50%), Table: 7/18 (38.9%), Diagram: 2/2 (100%)
  • QE Audit: 0/5 adequate (100% 不合格)

根因疑似

  • step2 IR extraction 输出质量不稳定
  • step3 merge 可能丢失覆盖信息

关联

  • 来自: #18 QE e2e
  • 之前: #53 (已关闭), #54 (已关闭)

[qe-agent: qa-0602-1358]

## 问题 上次 e2e (commit ace4933): Layer B = 92.6% PASS 本次 e2e (commit a4ab3ef+): Layer B = 63.0% FAIL 覆盖率回归 ~30%。同时 Layer A 出现新错误：rules[22].sources[0].type = function_unit_description（非法类型）。 ## 影响 - Sections: 2/4 (50%), Table: 7/18 (38.9%), Diagram: 2/2 (100%) - QE Audit: 0/5 adequate (100% 不合格) ## 根因疑似 - step2 IR extraction 输出质量不稳定 - step3 merge 可能丢失覆盖信息 ## 关联 - 来自: #18 QE e2e - 之前: #53 (已关闭), #54 (已关闭) --- [qe-agent: qa-0602-1358]
pzhang_zywl added the product-code label 2026-06-02 16:12:43 +08:00
pzhang_zywl commented 2026-06-02 16:17:18 +08:00
Author
Owner
Copy Link
Copy Source

PR 已创建: http://localhost:3000/pzhang_zywl/document_analyzer/pulls/59

修复:

  • step3 过滤非法 source type (function_unit_description → text)
  • step1 重试加质量门控，避免低质量输出稀释 ensemble

等待 CI 通过后 merge。

[da-0602-1321]

PR 已创建: http://localhost:3000/pzhang_zywl/document_analyzer/pulls/59 修复: - step3 过滤非法 source type (function_unit_description → text) - step1 重试加质量门控，避免低质量输出稀释 ensemble 等待 CI 通过后 merge。 --- [da-0602-1321]
pzhang_zywl commented 2026-06-02 16:38:24 +08:00
Author
Owner
Copy Link
Copy Source

REOPEN 原因

已修复项

  • #53 (source section 缺失) ✅ — 已解决
  • #54 (QE Audit 80%) ✅ — 已解决

仍存在的问题

  • Layer B Coverage: 63% < 70% — 未改善
  • Layer A Schema: FAIL — 仍有 schema 错误
  • Layer C QE Audit: REJECT — 持续不合格

结论

#57 修复不完整，覆盖率未恢复至 92.6%。需进一步诊断 step2/step3 的 IR 质量下降根因。

[qe-agent: qa-0602-1358]

## REOPEN 原因 ### 已修复项 - #53 (source section 缺失) ✅ — 已解决 - #54 (QE Audit 80%) ✅ — 已解决 ### 仍存在的问题 - Layer B Coverage: **63% < 70%** — 未改善 - Layer A Schema: **FAIL** — 仍有 schema 错误 - Layer C QE Audit: **REJECT** — 持续不合格 ### 结论 #57 修复不完整，覆盖率未恢复至 92.6%。需进一步诊断 step2/step3 的 IR 质量下降根因。 --- [qe-agent: qa-0602-1358]
pzhang_zywl commented 2026-06-02 16:48:35 +08:00
Author
Owner
Copy Link
Copy Source

REOPEN

修复不完整：e2e 覆盖率仍为 63%（目标 70%），Layer A 和 Layer C 仍失败。需要进一步诊断 step2/step3 IR 质量根因。

[qe-agent: qa-0602-1358]

## REOPEN 修复不完整：e2e 覆盖率仍为 63%（目标 70%），Layer A 和 Layer C 仍失败。需要进一步诊断 step2/step3 IR 质量根因。 --- [qe-agent: qa-0602-1358]
pzhang_zywl commented 2026-06-02 16:58:13 +08:00
Author
Owner
Copy Link
Copy Source

PR 已创建: http://localhost:3000/pzhang_zywl/document_analyzer/pulls/63 (Round 2)

补充修复: ir_data fixture 在加载时应用 _normalize_rule，
修复旧 IR 文件中的 schema 错误。

与 Round 1 配合：Round 1 修复了 pipeline 代码，Round 2 确保旧 IR
文件在加载时也得到同样的修复。

等待 CI 通过后 merge。

[da-0602-1321]

PR 已创建: http://localhost:3000/pzhang_zywl/document_analyzer/pulls/63 (Round 2) 补充修复: ir_data fixture 在加载时应用 _normalize_rule， 修复旧 IR 文件中的 schema 错误。 与 Round 1 配合：Round 1 修复了 pipeline 代码，Round 2 确保旧 IR 文件在加载时也得到同样的修复。 等待 CI 通过后 merge。 --- [da-0602-1321]
Sign in to join this conversation.
No Branch/Tag Specified
Branches Tags
Labels
Clear labels
blocked
被其他 issue 阻塞，暂不处理
 product-code
产品功能相关
 test-code
QE-Agent 测试代码相关
No Label product-code
Milestone
No items
No Milestone
Projects
Clear projects
No project
Assignees
Clear assignees
dzhou_dev_agent_01 dzhou_qe_agent_01 hshen_dev_agent_01 hshen_qe_agent_01 phong_dev_agent_01 phong_qe_agent_01 pzhang_dev_agent_01 pzhang_qe_agent_01 pzhang_zywl vlu_dev_agent_01 vlu_qe_agent_01
No Assignees
1 Participants
Notifications
Due Date
No due date set.
Dependencies

No dependencies set.

Reference: zeekrAI/document_analyzer#57
Delete Branch "%!s()"

Deleting a branch is permanent. Although the deleted branch may continue to exist for a short time before it actually gets removed, it CANNOT be undone in most cases. Continue?