実際の製品を操作して、利用者が確認できる動作証拠を集め、検証計画に沿った受け入れレポートとして公開するスキルです。
- 変更後の製品動作を実地で検証したいとき
- 画面キャプチャなどの証拠を集めたいとき
- 検証計画とレポートを作成したいとき
lobehub/lobehub8.4万2026年10月26日 更新
無料GitHub で公開日本語紹介
response-compliance
Response APIの実装に公式準拠テストを実行し、基本応答やストリーミング、ツール呼び出しなどの失敗から、認証やレスポンス形式の問題を調べるスキルです。
原文原文の説明を見る
Use for OpenResponses/Response API compliance tests, endpoint schema failures and test runs.
lobehub/lobehubスター 83,502(GitHub 83,502 + cccskills 0)
実行スコア 未検証
インストール方法を見るこんなときに便利
- Response APIの準拠テストを実行したいとき
- エンドポイントのスキーマ不整合を調べたいとき
- 特定の応答テストだけ再実行したいとき
- CI向けにJSON形式で結果を出したいとき
日本語での紹介
できること
ローカルまたはリモートのResponse APIエンドポイントに、公式のOpenResponses準拠テストを実行するためのスキルです。通常応答やストリーミング、システムプロンプト、ツール呼び出し、画像入力、複数ターンの会話をまとめて確認したり、--filterで対象を選んだりできます。詳細表示ではリクエストとレスポンスの内容を確認でき、JSON形式の結果はCIで扱えます。失敗時は、認証エラーによるHTML応答、未実装のLLM実行、必須フィールドの欠落、レスポンス形式の不整合など、症状に応じた調査の手がかりを得られます。
こんなときに便利
Response APIの実装後に、仕様に沿った応答を返すか確かめたいときや、特定のテストだけを再実行して問題箇所を絞りたいときに向いています。エンドポイントのスキーマ変更や認証設定を調べる開発者、CIに準拠テストを組み込みたいチームにも使えます。
使い方の例
- 「ローカルのResponse APIに準拠テストを実行して、失敗内容を詳しく見せて」
- 「streaming-responseとtool-callingだけをテストして」
- 「CIで扱えるJSON形式でテスト結果を出して」
注意点
テスト対象のサーバーを起動し、api/v1/responsesルートを登録しておく必要があります。開発用のモック認証を使う場合は、.envでENABLE_MOCK_DEV_USER=trueを設定します。初回実行時に公式テストリポジトリを取得し、そのCLIランナーを実行します。
この紹介文は、公開されている SKILL.md をもとに AI（OpenAI Codex）が作成しました。正確な仕様は下の原文を確認してください。
資料チェック
SKILL.md の記述から、注意が要る操作と導入の前提を AI が確認しました。点数は実際に動かした結果（実行検証）だけで付けています。
- 安全面送信・削除・コマンド実行などの扱いが明示されているか
- A良好テストサーバーへのリクエストと初回の公式リポジトリ取得が明示されています。
- 導入のしやすさ必要なツールや API キーが少ないか、書かれているか
- B一部不足サーバー、ルート、モック設定は示されていますが、bun等の導入手順はありません。
点数には入れていません。 2026年10月26日 時点で AI（OpenAI Codex）が判定しました。目安なので、入れる前に原文も確認してください。
評価が違うと思ったら、見直しを依頼する
含まれるファイル（1）
- SKILL.md3.9 KB
SKILL.md（原文）
インストールする前に、エージェントに与えられる指示の中身を確認できます。
OpenResponses Compliance Test
Run the official OpenResponses compliance test suite against the local (or remote) Response API endpoint.
Quick Start
# From the openapi package directory
cd packages/openapi
# Run all tests (dev mode, localhost:3010)
APP_URL=http://localhost:3010 bun run test:response-compliance -- \
--auth-header "lobe-auth-dev-backend-api" --no-bearer --api-key 1
# Run specific tests only
APP_URL=http://localhost:3010 bun run test:response-compliance -- \
--auth-header "lobe-auth-dev-backend-api" --no-bearer --api-key 1 \
--filter basic-response,streaming-response
# Verbose mode (shows request/response details)
APP_URL=http://localhost:3010 bun run test:response-compliance -- \
--auth-header "lobe-auth-dev-backend-api" --no-bearer --api-key 1 -v
# JSON output (for CI)
APP_URL=http://localhost:3010 bun run test:response-compliance -- \
--auth-header "lobe-auth-dev-backend-api" --no-bearer --api-key 1 --json
Prerequisites
- Dev server running with
ENABLE_MOCK_DEV_USER=truein.env - The
api/v1/responsesroute registered (viasrc/app/(backend)/api/v1/[[...route]]/route.ts)
Auth Modes
| Mode | Flags |
|---|---|
| Dev (mock user) | --auth-header "lobe-auth-dev-backend-api" --no-bearer --api-key 1 |
| API Key | --api-key lb-xxxxxxxxxxxxxxxx |
| Custom | --auth-header <name> --api-key <value> |
Test IDs
Available --filter values:
| ID | Description | Related Issue |
|---|---|---|
basic-response | Simple text generation (non-streaming) | LOBE-5858 |
streaming-response | SSE streaming lifecycle + events | LOBE-5859 |
system-prompt | System role message handling | LOBE-5858 |
tool-calling | Function tool definition + call output | LOBE-5860 |
image-input | Multimodal image URL content | — |
multi-turn | Conversation history via input items | LOBE-5861 |
Environment Variables
| Variable | Default | Description |
|---|---|---|
APP_URL | http://localhost:3010 | Server base URL (auto-appends /api/v1) |
API_KEY | — | API key (alternative to --api-key flag) |
How It Works
The script (packages/openapi/scripts/compliance-test.sh) clones the official openresponses/openresponses repo into scripts/openresponses-compliance/ (gitignored) and runs its CLI test runner. First run clones; subsequent runs update from upstream.
Debugging Failures
- Run with
-vto see full request/response payloads - Common failure patterns:
- "Failed to parse JSON": Auth failed, server returned HTML redirect
- "Response has no output items": LLM execution not yet implemented
- "Expected number, received null": Missing required field in response schema
- "Invalid input": Zod validation on response schema — check field format
Key Files
- Types:
packages/openapi/src/types/responses.type.ts - Service:
packages/openapi/src/services/responses.service.ts - Controller:
packages/openapi/src/controllers/responses.controller.ts - Route:
packages/openapi/src/routes/responses.route.ts - Test script:
packages/openapi/scripts/compliance-test.sh - Cloud route:
src/app/(backend)/api/v1/[[...route]]/route.ts
レビュー
まだレビューはありません。使ってみた感想をお寄せください。
コメント
ログインなしで書き込めます。使ってみた感想、質問、動かなかった環境などを気軽にどうぞ。
まだコメントはありません。最初のコメントを書いてみませんか。
同じリポジトリのスキル
LobeHubにAIモデルプロバイダーを追加し、実行時連携からモデル表示、設定、ブランド表記、文書化、動作確認まで進めるスキルです。
- 新しいAIモデルプロバイダーを追加したいとき
- プロバイダーの設定手順や説明文を更新したいとき
- 既存プロバイダーへのモデル追加要件を見極めたいとき
lobehub/lobehub8.4万2026年10月26日 更新
ユーザー設定の初期値をサーバー側の環境変数で切り替えるため、型定義や設定の組み立て、ユーザーストアへの反映、環境変数の例と説明書きを追加する手順です。
- 設定の初期値を環境変数で変えたいとき
- 設定項目をサーバー設定に追加したいとき
- 環境変数の例と説明を更新したいとき
lobehub/lobehub8.4万2026年10月26日 更新
エージェント実行中の各段階をフックで監視し、ツール呼び出しの模擬・制御や人の承認、圧縮、サブエージェント処理に介入する仕組みを扱います。
- エージェントの実行状況を記録したいとき
- ツール結果をテスト用に模擬したいとき
- Webhookでツール実行を許可・拒否したいとき
lobehub/lobehub8.4万2026年10月26日 更新
イベントを起点にエージェントのバックグラウンド処理を組み立て、ソース・シグナル・アクション・ポリシーの役割分担や非同期連携を実装するためのスキルです。
- イベント起点の処理を追加したいとき
- バックグラウンド処理を非同期化したいとき
- 重複実行を防ぐ仕組みを整えたいとき
lobehub/lobehub8.4万2026年10月26日 更新
DiscordやSlackなどの実際のチャットアプリでボットにメッセージを送り、応答を画面で確認する受け入れテストを行うスキルです。
- 実際のDiscordでボット応答を確かめたいとき
- SlackやTelegramの会話経路をテストしたいとき
- macOSアプリ上の操作結果を画面で記録したいとき
lobehub/lobehub8.4万2026年10月26日 更新