Pre-choice usable artifact execution
Purpose & Output Contractの最小の実成果物をmain contextで作成する。effect別のparse/open・secret・irreversible・corrupt guardだけを実行し、現物path・digest・開き方を提示してからaccept-as-is/light/standard/detailedを記録する。accept-as-isはその場でhandoff完了とし、後続sectionを実行しない。
Post-choice selected improvement execution
以下の既存workflow・goal-seek・評価・修正sectionはlight/standard/detailedが記録されてsemantic_evaluator_startedへ遷移した場合だけ実行する。release/exhaustiveは別の明示eventを必要とする。
delegate-codex-skill-review
Purpose & Output Contract
評価対象 Skill (SKILL.md) を任意の外部 codex CLI に渡すための手順と入力を作り、Sycophancy を避けた第三者レビューの準備をする。
入力: target_skill_path (SKILL.md への絶対パス)
出力: eval-log/delegate-codex-request.json (ユーザーが任意で実行する codex review 入力)
完了条件: codex CLI が標準フローの必須依存ではないことを保ったまま、任意実行用の入力とコマンド例が提示されている。
内製 vs 委譲の選定根拠 (PARA-001)
| 観点 | 内製 (run-elegant-review) | 外部委譲 (本 skill) |
|---|
| Sycophancy リスク | 高 (自己採点罠) | 低 (第三者 LLM) |
| 再現性 | 高 (schema 固定) | 中 (codex モデル更新で変動) |
| 依存 | Python 標準のみ | 外部 codex CLI 別途インストール |
| 適用シーン | 標準フロー全件 | 重要 PR / 自己採点疑義時の cross-check |
判断指針: 標準フローは内製で完結させ、本 skill は opt-in の cross-check として使う。両者は競合せず補完関係。
Key Rules
- 委譲先は任意:
delegate_agent: codex-cli は外部拡張の識別子であり、標準フローでは起動しない。
- 入力のみ準備: SKILL.md 本文と rubric パスを記録するが、自セッションで採点しない。
- 結果はユーザー管理: codex 実行はユーザーが明示的に行い、返答を eval-log/ に保存する。
- 任意拡張: Node / npm / shell script / codex CLI を標準依存にしない。存在確認は Python 標準ライブラリで行う。
ゴールシーク実行
外部 codex CLI へレビューを委譲する実行系。固定手順ではなくゴール・チェックリストへ向けて反復する(正本 run-build-skill/references/goal-seek-paradigm.md)。
ゴール (Goal)
codex CLI を標準フローの必須依存にしないまま、任意実行用の入力 eval-log/delegate-codex-request.json とコマンド例が提示され、自セッションでは採点していない状態になっている。
目的・背景 (Why)
自己採点の Sycophancy を避けるため、採点は第三者 LLM (codex) に委ね、本 Skill は入力準備と結果提示に徹する(opt-in cross-check)。
完了チェックリスト (Checklist)
ゴールシークループ
正本の 6 ステップ(現状評価→手順生成→実行→検証→Anchor Step→反復/差し戻し)に従う。固有差分: codex 実行自体はループ外(ユーザーが任意で行う)。本 Skill のループは「入力準備が io-contract を満たす」まで回し、委譲結果を自セッションで再評価しない。
局面カタログ(順序は都度判断)
-
codex 存在確認 (決定論):
python3 plugins/harness-creator/skills/delegate-codex-skill-review/scripts/check-codex-installed.py
exit 2 が返ったら BLOCK。標準フローではなく任意拡張であることを案内して停止。
-
target 検証: target_skill_path が存在し SKILL.md であることを確認。
-
任意実行コマンドの提示 (正本 references/codex-connection.md):
codex --prompt "$(cat plugins/harness-creator/skills/delegate-codex-skill-review/prompts/R2-codex-review.md)" \
--context-file eval-log/delegate-codex-request.json \
--output-format text \
--approval-mode yolo \
> eval-log/delegate-codex-response.json
codex に subcommand は無く --prompt 直接指定。rubric (ref-skill-design-rubric/references/rubric.json の critical axis) は R2 プロンプト本文へ焼き込み、別フラグでは渡さない。このコマンドは自動実行しない。codex CLI を導入済みのユーザーが任意で実行する。
-
結果提示: 書き出した JSON のサマリをユーザーに返す。修正判断は委ねる。
Gotchas
- 委譲結果を再評価しない: 自セッションでスコア改竄をしない (09章 Sycophancy 防止)。
- codex 未インストール時: BLOCK するが、Node/npm を案内しない。公式に確認済みの配布元をユーザーが選ぶ。
- L1 階層: codex CLI 抽象 (L1)。プロジェクト固有の review 観点は L2 で wrap する。
Additional Resources