huggingface-community-evals目的、用途、および情報源

このスキルが何をするか

inspect-aiとlightevalを使用して、ローカルハードウェア上でHugging Face Hubモデルの評価を実行します。バックエンドの選択、ローカルGPU評価、vLLM/Transformers/accelerateの選択に使用します。HFジョブのオーケストレーション、モデルカードのプルリクエスト、.eval_resultsの公開、コミュニティ評価の自動化には使用しないでください。

上流ワークフローの仕組み

要件とセットアップ

uv --version
printenv HF_TOKEN >/dev/null
nvidia-smi

制限事項と品質チェック

このファイルからは、個別の制限に関する記述は選択されていません。これは、このスキルがあらゆる入力や環境において安全であることを意味するものではありません。ソースコード全体を確認し、ご自身で結果を検証してください。

まずは安全なトライアルから始めましょう

1. サポートされているホストとリポジトリのインストール手順を確認してください。スキルディレクトリと、それに関連付けられているスクリプト、アセット、ドキュメントはまとめて保管してください。SKILL.md単独では依存関係を省略できる場合があります。
2. エージェントに実際の入力、希望する出力、および受け入れ基準を指定してください。呼び出し構文と利用可能なツールはホストによって異なります。このサイトは、汎用的なインストールコマンドを前提としていません。
3. 使い捨てプロジェクトまたはコピーで、元のワークフローを試してみてください。ファイル、リモートサービス、または課金対象リソースを変更する操作は、許可する前に必ず確認してください。
4. 出力結果をソースの品質チェックおよび独自の要件と照らし合わせて検証してください。トリガーが成功したことやリポジトリのスター数が多いことだけでは、正しい結果とは言えません。

スキルフォーマットとディレクトリの仕様 ↗

詳細は出典元をご覧ください。

• 概要
• 前提条件
• コアワークフロー
• オプションA：ローカル推論プロバイダーパスを使用したinspect-ai
• オプションB：ローカルGPU上でinspect-aiを実行する
• オプションC：ローカルGPU上でlightevalを実行する
• リモート実行境界
• タスク選択
• バックエンドの選択
• ハードウェアガイダンス
• トラブルシューティング
• 例

関連スキル

• build-zoom-meeting-sdk-appanthropics/knowledge-work-plugins
• build-zoom-phone-integrationanthropics/knowledge-work-plugins
• build-zoom-video-sdk-appanthropics/knowledge-work-plugins
• cloudflare-deployopenai/skills

翻訳と範囲

この読書ガイドは、ピン留めされた上流からの抜粋を選りすぐっていますSKILL.md翻訳は補助的なものです。完全なマニュアルではなく、互換性テスト済みであることを保証するものでもありません。ご使用前に原文および参照ファイルをお読みください。

この紹介文は、下記に固定表示されているバージョンに関するものです。現在のリポジトリのアクティビティと収集時間は別途表示されます。

ピン留めされたソース

原文を読む ↗

ソースを取得しました

2026-10-29T09:32:23Z

ソースコミット

fabc634a893f62ad5c2039830397efa35fa62715

ソースSHA-256

a97f1c703f55b72427453a76af858237e6392a447fcafa9eeb85f7ac67f0155d