テスト・セキュリティのスキル

Mastraのplayground向けに、通信だけを模擬するテストを作るスキル。実際のSDKとキャッシュを通し、画面表示や取得条件、エラー時の動作を検証します。

• 読み込み中・空・エラー表示の検証
• 権限や機能設定による通信制御の検証
• ページ分割や検索条件を確認したいとき

現在の作業ツリーにつないだ専用プロジェクトを作り、Agent Builderのエージェント・スキル管理、権限、APIや画面の基本動作を検証するスキル。

• Agent Builderの変更を検証したいとき
• 役割別の権限と認証の確認
• APIと画面でエージェント・スキル管理を検証

指定バージョンのMastraプロジェクトを作成し、ChromeでStudioの基本動作を確認します。チャットやツール、ワークフローの実行結果を画像付きで報告するスキルです。

• 新規Mastraプロジェクトの動作確認
• バージョンや作成ツールを指定した初期化確認
• Studioのチャットやツールの実行確認

Studioの画面変更に合わせ、設定の反映やデータ保存、ツールの実行結果まで確かめるPlaywrightのE2Eテストを作成・改善するスキル。

• エージェント設定の反映を確かめたいとき
• 再読み込み後のデータ保存確認
• ツールの出力と処理間の連携確認

エラー処理の結合テストでAPIエラーを模擬し、再試行やメッセージ修正を検証するスキル。通常応答とストリーミングのテスト作成・不具合調査を支援します。

• APIエラー後の再試行を確認したいとき
• ストリームの空出力を調べたいとき
• 対象外エラーの伝播を確認したいとき

実モデルで起きるMastra Codeの不具合を再現し、通信から画面表示までの時刻付きログを比較して、応答順序や速度表示の異常が生じる箇所を調べるスキル。

• トークン速度表示の異常調査
• 実モデルで時々起きる不具合の再現
• 画面のちらつきや状態停止の調査

既存のVitest 3.2のJSONレポートを読み込み、失敗したテストやファイル単位のエラーを検索し、元の診断情報を根拠に結果を調べるスキル。

• 既存レポートの失敗件数を知りたいとき
• パスや診断文で失敗を探したいとき
• ファイル単位のエラーの切り分け

qwen-codeのPRを隔離環境で動かし、変更前後の比較と対象を絞ったテストで挙動を検証します。合否の根拠と未検証の範囲をレポートにまとめるスキルです。

• PRの中心となる変更を検証したいとき
• PR版と比較用ビルドの動作比較
• PR更新後に以前の指摘を再検証

同じコミットでも失敗と成功が入れ替わるテストを調べ、待機・時刻・乱数・共有資源の問題を最小限の変更で直し、検証内容を保ったまま安定させるスキル。

• 再実行すると通るテストの修正
• タイムアウトや待機方法の見直し
• 時刻や乱数に依存するテストの安定化

Qwen Codeに再現した機能をCodexやClaude Codeと同じ条件で動かし、通信記録や画面出力の差を比べて、利用者に見える動作を近づけるスキル。

• 再現した機能の動作を検証したいとき
• ツール定義や必須引数の比較
• ターミナル出力の差を調べたいとき

Qwen Codeの端末画面をtmuxで実際の利用者のように操作し、認証やコマンド実行の経過を、後から検証できる読みやすいログとテスト報告にまとめます。

• 認証画面とキー操作を検証したいとき
• スラッシュコマンドの動作確認
• 途中画面を含む回帰テスト

Qwen Code CLIを実際のモデルや模擬サーバーで動かし、不具合の再現、MCP連携、端末画面の操作、API通信の内容まで一連の動作を検証するスキル。

• CLIの不具合を再現し修正を確認したいとき
• MCPツールの接続を検証したいとき
• 端末表示やキー操作を確認したいとき

PRで未対応のまま残ったCI失敗をログと変更ファイルから分類し、再実行・コメント・対応見送りの判断と根拠をJSONにまとめるスキルです。

• PRに残ったCI失敗の仕分け
• 再実行に向く一時障害の判別
• PRの変更が失敗原因か確認

CLIの文字入力やキー操作をシナリオ化し、入力時と実行後のターミナル画面を自動撮影します。PRの表示確認や操作手順の資料作成に使えるスキルです。

• PRによるCLIの表示変更の確認
• スラッシュコマンドの操作を撮影
• 操作説明用の画像を作成したいとき

不具合を再現するテストを先に失敗させ、修正後の成功と、修正を外した際の再失敗まで確認します。テストが問題を実際に検出していることを実行結果で確かめます。

• 修正前に不具合を再現したいとき
• 再発防止テストの有効性を確かめたいとき
• 実行証拠を残して障害を調査したいとき

エージェントやプロンプトの変更前後を繰り返し評価し、成功率の低下と結果のばらつきを区別。ツール呼び出しや重要ケースも点検し、CIで変更を止める判断を支援します。

• プロンプトやモデルの変更前後を比較
• 評価結果が不安定なケースの特定
• 必須・禁止ツールの呼び出し確認

Playwrightによるブラウザ操作のテスト環境を整え、仕様からのテスト生成、失敗が不安定なテストの修正、既存ツールからの移行や網羅性の確認を支援するスキル。

• PlaywrightとCIのテスト環境構築
• ユーザーストーリーからテスト生成・レビュー
• 成否が不安定なテストを修正したいとき

Playwrightのテストを20項目の観点で点検し、不安定さの原因や検証漏れを洗い出します。ファイル別の採点と修正コードで改善を支援するスキル。

• 特定のPlaywrightテストのレビュー
• プロジェクト全体のテスト品質点検
• テスト結果が不安定な原因の調査

既存のWebプロジェクトにPlaywrightのテスト環境を導入します。構成に合わせた設定、サンプルテスト、CI連携を整え、実行確認まで進めるスキルです。

• 既存のWebプロジェクトにテストを追加したいとき
• フレームワークに合うテスト設定の作成
• CIでブラウザテストを自動実行したいとき

ページや機能の説明、コンポーネントのコードからPlaywrightのテストを作成し、既存の構成に合わせた補助ファイルの用意と実行確認まで行うスキル。

• ログイン動作のテストを追加したいとき
• 購入手続きやフォーム送信の確認
• 検索条件やコンポーネント操作の確認

ISO 27001に沿った情報セキュリティ監査の計画、証拠確認、指摘事項の整理を支援し、是正措置の管理や認証審査に向けた文書準備まで進めるスキル。

• 年間の内部監査計画を作りたいとき
• Annex Aの管理策の証拠確認
• 監査指摘と是正措置の整理

PlaywrightのテストをBrowserStackのクラウドで実行し、ブラウザや端末ごとの互換性を確認します。接続設定から結果一覧、動画・ログの確認まで支援します。

• Playwrightでブラウザ互換性を確認
• BrowserStackへの接続を設定
• 動画とログでテスト失敗を調査

SaaS企業のSOC 2監査準備を支援します。評価基準と管理策を対応付け、担当者や必要な証拠を一覧化し、Type I・Type IIそれぞれの準備不足を洗い出します。

• 管理策と担当者・証拠の一覧を作りたいとき
• Type I・Type IIの準備不足を調べたいとき
• 管理策ごとの証拠収集を管理したいとき

失敗する、または時々しか通らないPlaywrightテストを再現し、待機処理・テスト間の干渉・環境差・実行基盤の四分類で原因を調べ、修正と十回の再実行で確認します。

• 失敗するPlaywrightテストの修正
• 時々しか通らないテストの原因調査
• CIだけで起きる失敗の調査