Files
zhangxiang 2474477495 docs(qa): §12.9 GA4 首次真断言 + §12.10 基线重采 113 张与 --radius-cta 负对照,取证车道与 PR 描述入库
- GA4:16 passed / 0 skipped,另有独立正对照(G-LGTLCR15KM 烘进两处客户端 chunk),
  §11.6 的「未取证」就此闭合;口径必须连「装配产物 + E2E_TARGET=production」一起引。
- AUTH-VISUAL:重采 113 张(23/23/23/21/23),终版只读复跑 125 passed / 0 failed,
  负对照 --radius-cta=12px ⇒ 15 failed / EXIT=1、还原 ⇒ 25 passed 且工作树干净。
- 两条不抹平的挂账:①113 与 §11.6 预测的 104 差 9 张,逐名对账未做(已进 PR 未验证项);
  ②逐张读图追认只做了抽样。
- 另记仪器口径教训:用字节数筛可疑空白图会把 button-*(82×44)误报,
  空白/塌版的判据应是尺寸与像素分布。
- docs/acceptance/2026-10-17-final/ 存三条可复跑车道脚本与 PR 描述(31 个子项,
  check-pr-checklist EXIT=0)。
2026-10-17 08:26:57 +08:00

43 lines
2.0 KiB
Bash
Executable File

#!/usr/bin/env bash
# AUTH-VISUAL 的第二半:终版代码上的只读复跑 + --radius-cta 负对照
#
# 为什么要负对照:§11.4 明写「负对照若 N=0 则只读复跑的绿灯作废」。
# 换句话说,125 张全绿只证明"这次跑和基线一致",不证明"基线对视觉属性敏感"。
# 把 --radius-cta 从 0px 改成 12px(本批对标语法刚把它定为直角档),
# 基线必须转红 —— 否则我们采的是一堆什么都没拍的图。
#
# 取退出码一律 `> log 2>&1; echo $?`:管道会把 npm/playwright 的状态吞成 tail 的 0。
set -u
cd "$(git rev-parse --show-toplevel)" || exit 1
SUM=/tmp/12-vis-final.txt
: > "$SUM"
step() {
local name="$1"; shift
"$@" > "/tmp/${name}.log" 2>&1
local code=$?
{
echo "${name}_EXIT=${code}"
grep -E '[0-9]+ (passed|failed|skipped|did not run)' "/tmp/${name}.log" | tail -2
} >> "$SUM"
}
# A) 终版代码上的全量只读复跑(5 个 project)
VIS_A=VIS_READONLY
step "$VIS_A" bash -c 'cd e2e && npx playwright test visual-regression.spec.ts --update-snapshots=none'
# B) 负对照:改令牌 ⇒ 期望判红
cp src/app/globals.css /tmp/globals.12.bak
perl -pi -e 's/--radius-cta: 0px/--radius-cta: 12px/' src/app/globals.css
echo "token_now=$(grep -m1 -- '--radius-cta:' src/app/globals.css)" >> "$SUM"
step VIS_NEGCONTROL bash -c 'cd e2e && npx playwright test visual-regression.spec.ts --update-snapshots=none --project=visual-chromium-desktop'
grep -c 'Test timeout\|expect(received).toBe' /tmp/VIS_NEGCONTROL.log > /dev/null 2>&1
echo "neg_failed_assertions=$(grep -cE 'Image comparison failed|Expected to have same size|Screenshot comparison failed' /tmp/VIS_NEGCONTROL.log)" >> "$SUM"
# C) 还原并确认工作树干净 + 该项目复跑回绿
cp /tmp/globals.12.bak src/app/globals.css
echo "worktree_diff_lines=$(git diff --name-only src/app/globals.css | wc -l | tr -d ' ')" >> "$SUM"
step VIS_REVERTED bash -c 'cd e2e && npx playwright test visual-regression.spec.ts --update-snapshots=none --project=visual-chromium-desktop'
echo DONE >> "$SUM"