Panduan membaca yang dilokalisasi

huggingface-community-evalsTujuan, penggunaan, dan sumber

Jalankan evaluasi untuk model Hugging Face Hub menggunakan inspect-ai dan lighteval pada perangkat keras lokal. Gunakan untuk pemilihan backend, evaluasi GPU lokal, dan memilih antara vLLM / Transformer / akselerasi. Bukan untuk orkestrasi HF Jobs, PR kartu model, publikasi .eval_results, atau otomatisasi evaluasi komunitas.

Sumber diambil: 2026-10-29

Repositori sumber: huggingface/skills
SKILL.md: skills/huggingface-community-evals/SKILL.md
Bintang Repositori: 11,241
Pembaruan terakhir repositori: 2026-10-30
Klasifikasi Kemampuan: Otomatisasi
Waktu pengumpulan terbaru: 2026-10-31 10:38 UTC+08:00

Lisensi: Apache-2.0

SKILL.md asli

Cuplikan alur kerja adalah alat bantu baca, bukan instruksi yang dapat dieksekusi dari Codez. Tidak ada Skill pihak ketiga yang dijalankan untuk menghasilkan halaman ini.

Bagian yang menjelaskan tujuan dan alur kerja di bawah ini merupakan materi dari hulu, yang telah diorganisir dan diterjemahkan untuk dibaca. Bagian ini berbeda dari analisis editorial Codez yang diberi label secara terpisah.

Apa yang dilakukan oleh Skill ini?

Bagaimana alur kerja hulu bekerja

Alur Kerja Inti

Pilih kerangka evaluasi. Gunakaninspect-aiSaat Anda menginginkan kontrol tugas eksplisit dan memeriksa alur native. Gunakanlightevalketika tolok ukur secara alami diekspresikan sebagai string tugas lighteval, terutama tugas bergaya papan peringkat. Pilih backend inferensi.

Jalur hulu · L55 ↗

Ringkasan

Skill ini digunakan untuk menjalankan evaluasi terhadap model-model di Hugging Face Hub pada perangkat keras lokal.inspect-aidengan inferensi lokallightevaldengan inferensi lokal memilih antaravllm, Transformer Wajah Berpelukan, danaccelerate

Jalur hulu · L6 ↗

Batas Eksekusi Jarak Jauh

Kemampuan ini sengaja berhenti pada eksekusi lokal dan pemilihan backend. Jika pengguna ingin: menjalankan skrip ini pada Hugging Face Jobs, memilih perangkat keras jarak jauh.

Jalur hulu · L136 ↗

Persyaratan dan pengaturan

Prasyarat

Lebih menyukaiuv rununtuk eksekusi lokal. AturHF_TOKENuntukgated/privatemodel.

Jalur hulu · L39 ↗

Jalur hulu · bash ↗

uv --version
printenv HF_TOKEN >/dev/null
nvidia-smi

Batasan dan pemeriksaan kualitas

Tidak ada bagian batasan terpisah yang dipilih dari file ini. Ini tidak berarti Keterampilan ini aman untuk setiap input atau lingkungan. Tinjau sumber lengkapnya dan validasi hasil Anda sendiri.

Mulailah dengan uji coba yang aman.

Periksa host yang didukung dan petunjuk instalasi repositori. Simpan direktori Skill beserta skrip, aset, dan dokumentasi yang dirujuk di dalamnya secara bersamaan;SKILL.mdsendirian dapat menghilangkan dependensi.
Berikan input sebenarnya, output yang diinginkan, dan kriteria penerimaan kepada agen. Sintaks pemanggilan dan alat yang tersedia bergantung pada host; situs ini tidak mengasumsikan perintah instalasi universal.
Cobalah alur kerja sumber dalam proyek sementara atau pada salinannya. Tinjau operasi yang mengubah file, layanan jarak jauh, atau sumber daya yang dapat ditagih sebelum mengizinkannya.
Validasi output terhadap pemeriksaan kualitas sumber dan persyaratan Anda sendiri. Pemicu yang berhasil atau jumlah bintang repositori yang tinggi tidak menjamin hasil yang benar.

Spesifikasi format dan direktori keterampilan ↗

Baca selengkapnya di sumber aslinya.

Terjemahan dan ruang lingkup

Panduan membaca ini memilih bagian-bagian dari teks yang telah disematkan di bagian atas.SKILL.mdTerjemahan ini dibantu. Ini bukan manual lengkap atau klaim kompatibilitas yang telah diuji. Bacalah dokumen asli dan file referensinya sebelum digunakan.

Pendahuluan ini mengacu pada versi yang disematkan di bawah ini; aktivitas repositori saat ini dan waktu pengumpulan ditampilkan secara terpisah.

Sumber yang disematkan: Baca teks aslinya ↗
Sumber diambil: 2026-10-29T09:32:23Z
Komit sumber: fabc634a893f62ad5c2039830397efa35fa62715
Sumber SHA-256: a97f1c703f55b72427453a76af858237e6392a447fcafa9eeb85f7ac67f0155d

Kembali ke katalog Keterampilan lengkap