OpenCompass
Pengujian model AI, evaluasi dan sumber daya benchmark
opencompass.org.cn
Tentang alat
OpenCompass adalah platform penilaian model yang cocok untuk mengatur misi penilaian, menggunakan data penilaian dan model komparatif.
Fitur utama
- Assembities: Atur proses pengujian model
- Analisis hasil: perbandingan kinerja dari model yang berbeda
Contoh penggunaan
Pengembang dan peneliti yang cocok untuk membandingkan model dan opsi kandidat yang memilih dapat menggunakan hasil terbuka sebagai titik awal untuk pengujian lebih lanjut.
Cara memulai
Misi penilaian, data, versi model dan definisi indikator pertama diketahui. Pilih untuk membandingkan dimensi yang terkait dengan aplikasi yang sebenarnya dan kemudian mengesahkan mereka dengan sampel Anda sendiri; dan merekam pengaturan tes untuk menghindari split total tunggal.
Hal yang perlu diperiksa
Kondisi untuk daftar yang berbeda mungkin berbeda. Nilai terbuka tidak menjamin bahwa model akan melakukan hal yang sama di setiap tugas yang sebenarnya.
Harga dan ketersediaan
Persyaratan akun, harga, batas ekspor berkas, dan ketersediaan wilayah dapat berubah. Periksa ketentuan resmi terbaru sebelum menggunakan layanan. Direktori ini tidak menjamin kuota gratis atau harga tertentu.
