ai2_arc

• 説明:

高度な質問応答の研究を促進するために集められた、7,787 の本物の小学校レベルの多肢選択式科学問題の新しいデータセット。データセットは、チャレンジ セットとイージー セットに分割されます。前者には、検索ベースのアルゴリズムと単語共起アルゴリズムの両方によって間違って回答された質問のみが含まれます。また、タスクに関連する 1,400 万を超える科学文のコーパスと、このデータセットの 3 つのニューラル ベースライン モデルの実装も含まれています。私たちは ARC をコミュニティへの挑戦として提起します。

• ホームページ: https://allenai.org/data/arc

• ソース コード: tfds.datasets.ai2_arc.Builder

• バージョン:

  • 1.0.0 (デフォルト): リリース ノートはありません。

• ダウンロードサイズ: 649.30 MiB

• 自動キャッシュ(ドキュメント): はい

• 機能構造:

FeaturesDict({
    'answerKey': ClassLabel(shape=(), dtype=int64, num_classes=5),
    'choices': Sequence({
        'label': ClassLabel(shape=(), dtype=int64, num_classes=5),
        'text': Text(shape=(), dtype=string),
    }),
    'id': Text(shape=(), dtype=string),
    'question': Text(shape=(), dtype=string),
})

• 機能のドキュメント:

• 監視されたキー( as_supervised docを参照): None

• 図( tfds.show_examples ): サポートされていません。

• 引用：

@article{allenai:arc,
      author    = {Peter Clark  and Isaac Cowhey and Oren Etzioni and Tushar Khot and
                    Ashish Sabharwal and Carissa Schoenick and Oyvind Tafjord},
      title     = {Think you have Solved Question Answering? Try ARC, the AI2 Reasoning Challenge},
      journal   = {arXiv:1803.05457v1},
      year      = {2018},
}

ai2_arc/ARC-Challenge (デフォルト設定)

• 構成説明: 2590 の「難しい」問題のチャレンジ セット (検索と共起の両方の方法で正しく答えられない問題)

• データセットサイズ: 939.91 KiB

• スプリット:

• 例( tfds.as_dataframe ):

ai2_arc/ARC-Easy

• 構成の説明: ARC チャレンジの 5197 問の簡単なセット。

• データセットサイズ: 1.63 MiB

• スプリット:

• 例( tfds.as_dataframe ):