本文へ移動
cccskills
無料GitHub で公開

Benchmark CLI agents on autonomous LLM post-training with PostTrainBench

Run Claude Code, Codex CLI, Gemini CLI, or OpenCode through bounded H100 post-training tasks and compare how well each agent improves a base LLM.

インストール方法を見る

含まれるファイル(1)

  • SKILL.md1.7 KB

SKILL.md(原文)

インストールする前に、エージェントに与えられる指示の中身を確認できます。

Benchmark CLI agents on autonomous LLM post-training with PostTrainBench

Run Claude Code, Codex CLI, Gemini CLI, or OpenCode through bounded H100 post-training tasks and compare how well each agent improves a base LLM.

Prerequisites

Python, apptainer, fuse-overlayfs, Hugging Face cache, H100 GPU access, currently HTCondor scheduler support, and credentials for the selected CLI agent scaffolds

Installation

Install or set up from the source-backed instructions:

Clone https://github.com/aisa-group/PostTrainBench, install requirements including apptainer and fuse-overlayfs, build the standard container with bash containers/build_container.sh standard, download the Hugging Face cache with bash containers/download_hf_cache/download_hf_cache.sh, copy example.env to .env, set API keys and paths, then submit jobs with bash src/commit_utils/commit.sh.

Documentation

Source

レビュー

まだレビューはありません。使ってみた感想をお寄せください。

同じリポジトリのスキル

概要と使いどころ

Use Caliper to run real agent tasks with and without a skill, MCP server, or rule change so reliability and token cost are measurable.

日本語の概要は準備中です。原文の説明を表示しています。

agentskillexchange/skills512026年10月12日 更新

Builds citation networks from Semantic Scholar API and CrossRef DOI metadata. Visualizes paper influence graphs using NetworkX, identifies seminal works, and tracks research lineage across fields.

日本語の概要は準備中です。原文の説明を表示しています。

agentskillexchange/skills512026年10月12日 更新

Exposes Advanced Custom Fields data through the WordPress REST API using register_rest_field and acf_format_value. Handles repeater fields, flexible content layouts, and gallery fields with proper serialization.

日本語の概要は準備中です。原文の説明を表示しています。

agentskillexchange/skills512026年10月12日 更新

An ASE skill built around ACF Extended, the WordPress enhancement suite for Advanced Custom Fields that adds field types, admin improvements, front-end forms, options pages, and developer tooling. It is a practical fit for agents working inside complex WordPress content models and custom field workflows.

日本語の概要は準備中です。原文の説明を表示しています。

agentskillexchange/skills512026年10月12日 更新

Converts Advanced Custom Fields field groups into native Gutenberg blocks using the ACF Block API v2 and @wordpress/scripts build pipeline. Maps ACF repeaters, groups, and flexible content to InnerBlocks and block attributes with server-side rendering via acf_register_block_type().

日本語の概要は準備中です。原文の説明を表示しています。

agentskillexchange/skills512026年10月12日 更新

act is an open-source CLI tool that runs GitHub Actions workflows locally using Docker, enabling fast feedback on workflow changes without pushing to GitHub. It is a standard tool for local Actions development and testing.

日本語の概要は準備中です。原文の説明を表示しています。

agentskillexchange/skills512026年10月12日 更新

agentskillexchange のスキルをすべて見る

このスキルの問題を報告する