hellaswag Rowan
Dataset Card for "hellaswag" Dataset Summary HellaSwag: Can a Machine Really Finish Your Sentence? is a new dataset for commonsense NLI. A paper was published at ACL2019. Supported Tasks and Leaderboards More Information Needed Languages More Information Needed Dataset Structure Data Instances default Size of downloaded dataset files: 71.49 MB Size of the generated dataset: 65.32 MB Total… See the full description on the dataset page: https://huggingface.co/datasets/Rowan/hellaswag.
- 種別
- dataset
- 言語
- en
- ダウンロード
- 307,069
- いいね
- 189
- アクセス
- public
- ファイル
- 0
タグ
- 評価データ
- ベンチマーク
- 多肢選択
- NLP
- 英語コーパス
- テキストデータセット
- 大言語モデル
- モデル評価
概要
HellaSwagは、機械が常識を使って文中の次の文を正しく選べるかを問う、常識的自然言語推論用の多肢選択式評価ベンチマークです。ACL2019で発表され、文脈に対し複数のエンディング候補から正解を選ぶ形式で、モデルの常識理解力を測定します。大規模言語モデルの推論能力評価・リーダーボード用途に広く使われる英語データセットです。
README
--- language: - en paperswithcode_id: hellaswag pretty_name: HellaSwag dataset_info: features: - name: ind dtype: int32 - name: activity_label dtype: string - name: ctx_a dtype: string - name: ctx_b dtype: string - name: ctx dtype: string - name: endings sequence: string - name: source_id dtype: st…