F2-4(一): 修 XML 实体污染并重批重入库,固化标准入库器

- run_eval: PG xpath(...)::text 保留实体转义(< → &lt;),抽取后补 XML 预定义实体反转义
  (等价手册 §5.3 dom4j getText() 语义);293 个污染产物清零,Groovy 编译失败根因消除
- 缓存重建(源=eip4dev,1428 条:1 模板改名+1 新增脚本属数据演进);全量重跑
  497/30/86/815,自动化率 81.1% 守住 ≥80%
- 重大发现:同模板内脚本顺序在两次抽取间会交换((templateId,seq) 非稳定键,
  welfare 模板 seq1↔seq2 实锤)——重批后 onEvent seq 已与磁盘对齐,长期需内容哈希键(登记 F2-4)
- tools/page-schema-loader/load_page_schema.py:幂等标准入库器(etag=sha256,version 递增,
  仅允许 localhost 双库);本次双库各更新 756/幂等跳过 733,e2e 28/28 保持全绿
- 坑:mvn exec:java 的 -Dexec.args 引号空参会被吞导致参数错位(密码用占位符代替空串)

Co-Authored-By: Claude Fable 5 <noreply@anthropic.com>
This commit is contained in:
2026-06-11 21:27:20 +08:00
parent 8e02c0149b
commit a711ecd8f0
1000 changed files with 7612 additions and 7128 deletions

View File

@@ -63,6 +63,16 @@ def load_corpus_dir(corpus_dir: str) -> List[Dict[str, Any]]:
return records
def _xml_unescape(s: str) -> str:
"""XML 预定义实体反转义(amp 必须最后解,避免 &amp;lt; 双解)。含十进制/十六进制数字引用。"""
import re as _re
s = _re.sub(r"&#x([0-9a-fA-F]+);", lambda m: chr(int(m.group(1), 16)), s)
s = _re.sub(r"&#([0-9]+);", lambda m: chr(int(m.group(1))), s)
for ent, ch in (("&lt;", "<"), ("&gt;", ">"), ("&quot;", '"'), ("&apos;", "'"), ("&amp;", "&")):
s = s.replace(ent, ch)
return s
def load_corpus_db(db_params: Dict[str, str]) -> List[Dict[str, Any]]:
"""
从数据库 view_template 表抽取脚本(--from-db 模式)。
@@ -121,6 +131,11 @@ def load_corpus_db(db_params: Dict[str, str]) -> List[Dict[str, Any]]:
rows = cur.fetchall()
for i, row in enumerate(rows):
script_text = row["script_text"] or ""
# F2-4 修复:PG xpath(...)::text 把文本节点按 XML 序列化返回,
# 预定义实体保持转义(< → &lt;),不反转义则 Groovy 编译失败
# (等价于迁移手册 §5.3 dom4j getText() 的解码语义;只解 XML
# 五个预定义实体+数字引用,不引入 HTML 实体集)。
script_text = _xml_unescape(script_text)
if len(script_text.strip()) < 5:
continue
records.append({