- Mô tả :
Các câu Wikipedia với các nhịp nổi bật được dán nhãn.
Trang chủ : https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia
Mã nguồn :
tfds.datasets.salient_span_wikipedia.BuilderPhiên bản :
-
1.0.0(mặc định): Không có ghi chú phát hành.
-
Kích thước tải xuống :
Unknown sizeTự động lưu vào bộ nhớ cache ( tài liệu ): Không
Các khóa được giám sát (Xem
as_superviseddoc ):NoneHình ( tfds.show_examples ): Không được hỗ trợ.
trích dẫn :
@article{guu2020realm,
title={REALM: Retrieval-Augmented Language Model Pre-Training},
author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
year={2020},
journal = {arXiv e-prints},
archivePrefix = {arXiv},
eprint={2002.08909},
}
salient_span_wikipedia/câu (cấu hình mặc định)
Mô tả cấu hình : Ví dụ là các câu riêng lẻ có chứa các thực thể.
Kích thước tập dữ liệu :
20.57 GiBChia tách :
| Tách ra | ví dụ |
|---|---|
'train' | 82.291.706 |
- Cấu trúc tính năng :
FeaturesDict({
'spans': Sequence({
'limit': int32,
'start': int32,
'type': string,
}),
'text': Text(shape=(), dtype=string),
'title': Text(shape=(), dtype=string),
})
- Tài liệu tính năng :
| Tính năng | Lớp | Hình dạng | Dtype | Sự miêu tả |
|---|---|---|---|---|
| Tính năngDict | ||||
| nhịp | Sự nối tiếp | |||
| nhịp/giới hạn | tenxơ | int32 | ||
| nhịp/bắt đầu | tenxơ | int32 | ||
| nhịp/loại | tenxơ | chuỗi | ||
| chữ | Chữ | chuỗi | ||
| Tiêu đề | Chữ | chuỗi |
- Ví dụ ( tfds.as_dataframe ):
salient_span_wikipedia/tài liệu
Mô tả cấu hình : Ví dụ về tài liệu đầy đủ.
Kích thước tập dữ liệu :
16.52 GiBChia tách :
| Tách ra | ví dụ |
|---|---|
'train' | 13.353.718 |
- Cấu trúc tính năng :
FeaturesDict({
'sentences': Sequence({
'limit': int32,
'start': int32,
}),
'spans': Sequence({
'limit': int32,
'start': int32,
'type': string,
}),
'text': Text(shape=(), dtype=string),
'title': Text(shape=(), dtype=string),
})
- Tài liệu tính năng :
| Tính năng | Lớp | Hình dạng | Dtype | Sự miêu tả |
|---|---|---|---|---|
| Tính năngDict | ||||
| câu | Sự nối tiếp | |||
| câu/giới hạn | tenxơ | int32 | ||
| câu/bắt đầu | tenxơ | int32 | ||
| nhịp | Sự nối tiếp | |||
| nhịp/giới hạn | tenxơ | int32 | ||
| nhịp/bắt đầu | tenxơ | int32 | ||
| nhịp/loại | tenxơ | chuỗi | ||
| chữ | Chữ | chuỗi | ||
| Tiêu đề | Chữ | chuỗi |
- Ví dụ ( tfds.as_dataframe ):