テスト・セキュリティのスキル

既存のテストを補強するため、さまざまな入力で成り立つ性質をfast-checkで検証し、少数の具体例では見逃す不具合と、失敗を再現する最小の入力を探すスキル。

• パーサーを多様な入力で検証したいとき
• データの変換と復元を確かめたいとき
• 具体例のテストしかない関数の調査

AIエージェントやチャットボットの応答・動作をDeepEvalで評価し、評価用データと再実行できるテストを整え、失敗例を基に改善と再評価を進めます。

• AIエージェントの品質テストを整えたいとき
• 複数ターンのチャット応答を評価したいとき
• 資料から評価用データを生成したいとき

LangBotのWebUIをブラウザで操作し、画面の結果とバックエンドのログや通信を照合するスキル。チャットやモデル設定の検証、失敗原因の調査を支援します。

• Debug Chatの応答確認
• モデル設定とテストボタンの検証
• Bot・ナレッジベース・プラグインの検証

アプリのコードや認証・権限設定、依存ライブラリを点検し、脆弱性と修正案を整理します。OWASP Top 10や既知の脆弱性情報に基づく影響評価も支援します。

• アプリのセキュリティレビュー
• 依存ライブラリの脆弱性評価
• 認証とデータアクセス権限の点検

データの暗号化、TLS通信、電子署名、鍵管理の設計を支援するスキル。既存ライブラリの活用を軸に、用途に合う方式の選定や実装上の注意点を整理します。

• 保存データの暗号化方式を選びたいとき
• TLS通信の設定を見直したいとき
• パスワード保存やトークン署名の設計

RESTやGraphQLのAPIを、正常な応答から認証エラー、入力の境界条件まで検証します。curlなどで送受信の内容を確認し、失敗するリクエストの原因調査を支援します。

• 認証とアクセス権限の確認
• 不正入力と境界条件の検証
• 失敗するHTTP通信を調べたいとき

SOC 2やGDPRなどへの対応に向け、社内方針や技術的な対策、担当者、監査用の証拠を整理し、日常業務に組み込むための手順を具体化するスキル。

• SOC 2への対応計画を立てたいとき
• 個人データの保存・削除ルール設計
• 監査証拠と権限レビューの整理

AIエージェントの成果を、正確性・網羅性・引用・ツール効率などの観点で評価します。変更前後の比較や品質低下の検出、本番での継続監視に使う評価基盤を設計するスキルです。

• エージェントの設定を比較したいとき
• 公開前に品質低下を検出したいとき
• コンテキスト設計の効果を測りたいとき

論文の平均値・統計値・差分などの整合性を決まったルールで点検し、問題の重大度に応じた判定と対応履歴を残します。内容全体の健全性を保証するものではありません。

• 投稿前に論文の数値を点検したいとき
• 監査の指摘と修正履歴を残したいとき
• 論文変更後の古い判定を検出したいとき

Verdaccioの変更箇所と依存関係に応じて必要なテストを選び、再ビルドから実行結果の報告まで進めます。古いビルドや未実行テストによる見かけの成功も確認します。

• コミットやプッシュ前の変更検証
• 変更パッケージと依存先のテスト選定
• パッケージ管理ツールやUIの動作確認

ファイルのダウンロードやAgentの読み取り処理で、許可範囲外へのアクセスを防ぐ実装規約を案内し、パス検証から多ユーザー環境の制限まで確認するスキル。

• ファイルダウンロード処理のレビュー
• Agentのファイルアクセスを制限したいとき
• クラウド向けのLoaderを確認したいとき

ローカルのWebアプリをPlaywrightで操作し、画面機能の検証や不具合調査、スクリーンショット撮影、ブラウザログの確認を支援するスキル。

• ボタンやリンク、フォームの動作確認
• 動的な画面の不具合を調べたいとき
• ローカルアプリの画面撮影

Python、JavaScript/TypeScript、Goのコードをセキュリティの観点で点検し、言語やフレームワークに応じた改善案と重要度別の報告書をまとめるスキル。

• 既存アプリの安全性を点検したいとき
• 重要度別の報告書を作りたいとき
• 安全な初期設定で実装したいとき

gitの変更履歴から重要なコードと担当者の関係を分析し、特定の人への依存や更新が滞った箇所を調べ、セキュリティ上の保守リスクをCSVやJSONにまとめるスキル。

• 保守が滞った重要コードの確認
• 認証・暗号処理の属人化を調べたいとき
• CODEOWNERSと実態の比較

ローカルのWebアプリをPythonのPlaywrightで操作し、画面機能の動作確認や不具合調査、スクリーンショット・ブラウザログの取得を進めるスキル。

• ローカル画面のボタンや入力欄の動作確認
• 想定外の画面動作を調べたいとき
• スクリーンショットとログの取得

コードを根拠に、守るべきデータや攻撃の入口、悪用経路を整理します。発生可能性と影響から優先順位を付け、既存の対策と追加案をMarkdownの脅威モデルにまとめます。

• コードの攻撃の入口を整理したいとき
• 特定ディレクトリの脅威分析
• 機密データや認証情報のリスク評価

MNNの静的チェックやホスト・Android実機の回帰テストを実行し、変更後の動作を確認します。iPhone・iPadでのLLM速度測定やブランチ間の比較も案内します。

• 静的チェックとホスト回帰テスト
• Android実機でバックエンドを検証
• iPhone・iPadでLLM速度とブランチを比較

Dorisの設定や起動スクリプトをGitの状態から復元し、ローカル変更の影響を避けたパッケージでDocker回帰テストの準備・実行・不具合調査を進めるスキル。

• Doris変更前後の回帰テスト
• ローカル設定の影響を避けたいとき
• テスト未選択や起動失敗の調査

BEとCloudの追加・変更したC++コードをclang-tidyで静的解析し、原則として変更行の警告に絞って、不具合や性能・読みやすさの問題を確認・修正するスキル。

• コミット前の変更コード点検
• CIのclang-tidy警告の調査
• 指定ブランチとの差分レビュー

実際のLLM APIと外部プロジェクトを使い、OpenHarnessの動作を検証するスキル。複数ターンの会話やツール実行を確認し、環境の不備と機能の不具合を切り分けます。

• 実際のAPIでエージェントを検証したいとき
• 複数ターンの文脈保持を確かめたいとき
• フックやスキルを組み合わせて試したいとき

ObsidianのWikiを読み取り専用で点検し、リンク切れや孤立ページ、プロパティ不足、出典管理の不備を報告します。場所と件数を基に修正候補を確認できます。

• リンク切れや孤立ページを探したいとき
• プロパティや出典管理を点検したいとき
• 空の節や古い索引を確認したいとき

コードや設定、依存ライブラリの安全性を点検し、秘密情報の埋め込みや認証の不備などを洗い出して、深刻度と修正案付きの監査報告にまとめるスキル。

• 公開前にコードの安全性を点検したいとき
• APIキーやパスワードを探したいとき
• 依存ライブラリの既知の脆弱性確認

未登録のAPIキーやログイン情報を、有効期限付きの一度限りのリンクで受け取り、チャットに秘密情報を書かずに本人のキーチェーンへ暗号化して保存するスキル。

• 未登録のAPIキーを受け取りたいとき
• メールとパスワードの入力依頼
• 別のメンバー用の入力リンク発行

起動中のデスクトップアプリをChrome DevTools Protocolで操作し、利用者の手順に沿ってUIの不具合や修正結果を画像と数値で検証します。

• 実アプリで報告された不具合の再現
• UI修正前後の動作比較
• 画面移動や開き直し後の状態確認