HELM

ツールについて

HELMはスタンフォード大学が立ち上げた大型モデル評価システムです。 評価方法は、主に3つのモジュールで構成されています:シーン、適合性、インジケータ、各評価操作は、シーンの指定、適切なモデルのリマインダー、および1つ以上の指標を必要とします。

主な機能

• 包括的な評価能力
• 回復力と透明性
• 多項目サポート
• カスタムエクステンション

用途と対象者

検証のために編集する

• 言語モデルのパフォーマンス評価
• モデルの最適化と改善
• マルチモデルモデル評価
• 公平性とバイアステスト

使い方

1. 01

   HELMのインストール

2. 02

   ソースコードからインストール(現在の機能が必要な場合)

3. 03

   評価ミッションの設定

4. 04

   <ファイルの設定パス>

利用前に確認

公式サイトで提供範囲、登録、上限、料金を確認し、小さなサンプルで試してください。

公開の公式情報に基づく基本情報です。商用条件、プライバシー、地域アクセス、制限は未確認です。