跳到正文
cccskills

“evaluation”的搜索结果

1281 个 · 按相关度排序

Builds repeatable evaluation systems with golden datasets, scoring rubrics, pass/fail thresholds, and regression reports. Use for "LLM evaluation", "testing AI systems", "quality assurance", or "model benchmarking".

中文简介正在准备中。当前显示原文说明。

sathishssj3/Stereix-Engine22026年10月4日 更新

scientific-thinking-scholar-evaluation

免费有简介AI 评分 100分

使用统一标准审阅论文和研究计划,检查研究方法、证据、引用及文章结构,并说明评分依据、修改优先级和下一步需要修改的内容。

  • 投稿前审阅论文
  • 检查引用是否支持论点
  • 评估研究方法与局限
affaan-m/ECC28.5万2026年10月20日 更新

ml-adoption-playbook

免费有简介AI 评分 90分

为尚未使用机器学习的现有应用梳理推荐、分类、预测等功能的引入步骤,从明确问题、检查数据到初始模型的训练、评估和集成。

  • 为现有应用添加推荐功能
  • 检查训练数据是否准备就绪
  • 为预测功能设计备用规则
affaan-m/ECC28.5万2026年10月20日 更新

gan-style-harness

免费有简介AI 评分 80分

将应用开发分配给规划、实现和评估代理,检查运行中的界面并按质量标准评分,把具体问题反馈给实现环节,反复修改直至达标或达到次数上限。

  • 从简短构想生成应用规格
  • 通过独立评估改善界面
  • 验证并修正全栈应用
affaan-m/ECC28.5万2026年10月20日 更新

continuous-agent-loop

免费有简介AI 评分 70分

帮助设计让人工智能智能体持续工作的循环,结合质量检查、评估与失败后的停止和重试规则,处理进度停滞、反复失败及成本增长问题。

  • 选择持续工作的循环方式
  • 结合质量检查与评估
  • 从失败或进度停滞中恢复
affaan-m/ECC28.5万2026年10月20日 更新

agentic-engineering

免费有简介AI 评分 100分

为主要由AI智能体实施的开发工作制定完成条件,拆分可独立验证的任务,并比较实施前后的评估结果;同时按难度选择模型,记录费用、耗时与重试情况。

  • 规划交给AI智能体的开发工作
  • 将大型变更拆成可验证的任务
  • 比较实施前后的评估结果
affaan-m/ECC28.5万2026年10月20日 更新

evaluating-llms-harness

免费有简介AI 评分 90分

使用统一任务评估大语言模型的知识、推理和代码生成能力,生成多模型对比表及训练阶段的成绩趋势,并保存评估结果和每道题的回答。

  • 使用MMLU和GSM8K评估模型
  • 生成多个模型的成绩对比表
  • 跟踪训练期间的模型成绩
NousResearch/hermes-agent25.6万2026年10月20日 更新

claude-api

免费有简介AI 评分 70分

依据按编程语言分类的资料,协助开发和维护Claude应用。涵盖官方SDK调用、工具集成、模型迁移、费用检查、提示词审查和评估流程。

  • 在应用中接入Claude API
  • 开发使用自定义工具的智能体
  • 为现有Claude集成迁移模型
anthropics/skills18.2万2026年10月10日 更新

mcp-builder

免费有简介AI 评分 80分

支持开发让 AI 使用外部服务的 MCP 服务器,从 API 调研、工具设计与实现,到功能检查和评估题编写,帮助检验多次工具调用下的实际使用效果。

  • 将外部 API 接入 AI 智能体
  • 用 TypeScript 或 Python 开发 MCP
  • 改进工具说明、输入和错误提示
anthropics/skills18.2万2026年10月10日 更新

train-pose

免费有简介AI 评分 90分

训练并评估从WiFi信号估计人体姿态的模型。将结果与始终输出平均姿态的基准模型比较,检查训练数据是否混入评估数据,并按实际测量条件报告改进幅度。

  • 使用相机图像的姿态标签训练
  • 评估推理时无需相机的姿态估计
  • 与平均姿态基准比较准确度
ruvnet/RuView9.9万2026年10月20日 更新

Review existing DeerFlow skill packages for publication readiness, activation rules, safety boundaries, supporting files, and evaluation evidence. Receive concrete findings and suggested replacement text, with a clear distinction between inspection results and verified runtime behavior.

中文简介正在准备中。当前显示英语简介。

  • Assessing whether a skill is ready to publish
  • Investigating unwanted or missed skill activation
  • Reviewing supporting scripts and safety boundaries
bytedance/deer-flow8.4万2026年10月20日 更新

Build MCP servers, which give AI agents tools for external services, using Python or TypeScript. The skill guides tool design, input validation, error handling, code review, and evaluations based on realistic tasks.

中文简介正在准备中。当前显示英语简介。

  • Build an MCP server for an external API
  • Design tools around complete agent workflows
  • Review input validation and error handling
ComposioHQ/awesome-claude-skills7.8万2026年9月18日 更新

Evaluate 3D point clouds and movement trajectories against reference data with CloudAnalyzer. Prepare inputs, measure differences, apply quality thresholds, inspect results visually, and track baseline history for mapping, localization, and perception workflows.

中文简介正在准备中。当前显示英语简介。

  • Compare a generated point cloud with reference data
  • Measure errors in estimated movement trajectories
  • Check ground segmentation against quality thresholds
HKUDS/CLI-Anything5.6万2026年9月22日 更新

Build and evaluate time-to-event models with scikit-survival, including records whose events remain unobserved when follow-up ends. Keep preprocessing separate from evaluation data, compare models, predict survival probabilities, and summarize censoring-aware metrics.

中文简介正在准备中。当前显示英语简介。

  • Validate event indicators and follow-up times in local CSV data
  • Train survival models without leaking evaluation data
  • Evaluate survival probabilities with censoring-aware metrics
K-Dense-AI/scientific-agent-skills5.3万2026年10月19日 更新

Develop and prioritize early research ideas through independent brainstorming, structured discussion, evidence checks, and critical review. Keep assumptions, uncertainty, dissent, and scoring reasons visible, then record the human decision and appropriate next steps.

中文简介正在准备中。当前显示英语简介。

  • Exploring candidate directions for a new research topic
  • Organizing ideas before a research team discussion
  • Comparing proposals using explicit evaluation criteria
K-Dense-AI/scientific-agent-skills5.3万2026年10月19日 更新

Combine laboratory animal welfare measurements into reference-relative RELSA severity scores. Analyze individual trajectories, explore forecasts for specified observation times, and derive candidate score zones, with explicit checks on normalization, reference selection, prediction intervals, and evaluation limits.

中文简介正在准备中。当前显示英语简介。

  • Combine animal welfare measurements into daily scores
  • Compare group severity using a shared reference
  • Explore severity forecasts at specified observation times
K-Dense-AI/scientific-agent-skills5.3万2026年10月19日 更新

pyhealth

免费

Build and check clinical machine learning workflows with PyHealth, from loading electronic health records, signals, or images to training and evaluation. Includes patient-level data splits, prediction task checks, model checkpoints, and medical code mapping.

中文简介正在准备中。当前显示英语简介。

  • Prototype mortality and readmission prediction models
  • Check patient splits and data leakage
  • Train and evaluate sleep staging models
K-Dense-AI/scientific-agent-skills5.3万2026年10月19日 更新

Build Python AI applications on Microsoft Foundry with azure-ai-projects. Provides examples for creating agents, connecting tools, managing conversations and project resources, and running evaluations through Foundry and OpenAI-compatible clients.

中文简介正在准备中。当前显示英语简介。

  • Build an agent that searches uploaded documents
  • Implement conversation threads and response handling
  • List model deployments and project connections
sickn33/agentic-awesome-skills4.8万2026年10月19日 更新

Deploy and operate AI agents with AWS Bedrock AgentCore. Choose services for hosting agents, connecting external APIs, managing credentials and conversation state, monitoring activity, and assessing agent quality through automated evaluations.

中文简介正在准备中。当前显示英语简介。

  • Plan an agent deployment on AgentCore
  • Expose a REST API as an agent tool through MCP
  • Configure credentials and access controls
sickn33/agentic-awesome-skills4.8万2026年10月19日 更新

Plan and build AI agents through selected stages of design, implementation, tool integration, memory, and evaluation. The workflow points to specialized skills for single agents, coordinated agent teams, and stateful workflows using CrewAI or LangGraph.

中文简介正在准备中。当前显示英语简介。

  • Designing an autonomous AI agent
  • Building a team of agents with distinct roles
  • Creating stateful workflows with LangGraph
sickn33/agentic-awesome-skills4.8万2026年10月19日 更新

Build repeatable evaluations for AI agent responses, tool choices, and multi-step tasks. Use reference datasets and scoring criteria to compare changes, detect quality regressions, and set automated checks that must pass before deployment.

中文简介正在准备中。当前显示英语简介。

  • Compare agent quality before and after prompt changes
  • Test tool selection and multi-step task execution
  • Evaluate resistance to prompt injection
sickn33/agentic-awesome-skills4.8万2026年10月19日 更新

Compare agent, prompt, or tool configuration changes using versioned test cases and explicit outcome checks. Record each attempt, distinguish agent failures from evaluation or infrastructure problems, and report regressions, permission violations, and uncertainty.

中文简介正在准备中。当前显示英语简介。

  • Compare agent behavior before and after prompt changes
  • Reproduce an observed failure with preserved evidence
  • Run regression tests after a bounded fix
sickn33/agentic-awesome-skills4.8万2026年10月19日 更新

Configure supervised fine-tuning for models that process images and text. Define which components remain unchanged, set LoRA adapters for updating selected model weights, choose image resolution limits, and investigate training runs whose evaluation results fail to improve.

中文简介正在准备中。当前显示英语简介。

  • Configure training for an image-and-text task
  • Decide whether to train vision layers
  • Investigate training with flat evaluation scores
wshobson/agents4.1万2026年10月20日 更新

Investigate LLM application failures with Phoenix CLI by reviewing execution records, recording observations, and grouping mistakes into counted categories. Inspect datasets and experiments to identify which failure types deserve evaluation tests first.

中文简介正在准备中。当前显示英语简介。

  • Investigating failures in LLM applications
  • Grouping observed mistakes into failure categories
  • Choosing which evaluation tests to build first
github/awesome-copilot4万2026年10月20日 更新