- Descrição :
Frases da Wikipédia com extensões salientes rotuladas.
Página inicial : https://www.tensorflow.org/datasets/catalog/salient_span_wikipedia
Código -fonte:
tfds.datasets.salient_span_wikipedia.BuilderVersões :
-
1.0.0(padrão): sem notas de versão.
-
Tamanho do download :
Unknown sizeArmazenado em cache automaticamente ( documentação ): Não
Chaves supervisionadas (Consulte
as_superviseddoc ):NoneFigura ( tfds.show_examples ): Não compatível.
Citação :
@article{guu2020realm,
title={REALM: Retrieval-Augmented Language Model Pre-Training},
author={Kelvin Guu and Kenton Lee and Zora Tung and Panupong Pasupat and Ming-Wei Chang},
year={2020},
journal = {arXiv e-prints},
archivePrefix = {arXiv},
eprint={2002.08909},
}
salient_span_wikipedia/sentences (configuração padrão)
Descrição da configuração : Exemplos são sentenças individuais contendo entidades.
Tamanho do conjunto de dados :
20.57 GiBDivisões :
| Dividir | Exemplos |
|---|---|
'train' | 82.291.706 |
- Estrutura de recursos :
FeaturesDict({
'spans': Sequence({
'limit': int32,
'start': int32,
'type': string,
}),
'text': Text(shape=(), dtype=string),
'title': Text(shape=(), dtype=string),
})
- Documentação do recurso:
| Funcionalidade | Aula | Forma | Tipo D | Descrição |
|---|---|---|---|---|
| RecursosDict | ||||
| vãos | Seqüência | |||
| vãos/limite | tensor | int32 | ||
| vãos/início | tensor | int32 | ||
| vãos/tipo | tensor | fragmento | ||
| texto | Texto | fragmento | ||
| título | Texto | fragmento |
- Exemplos ( tfds.as_dataframe ):
salient_span_wikipedia/documentos
Descrição da configuração : Exemplos de documentos completos.
Tamanho do conjunto de dados :
16.52 GiBDivisões :
| Dividir | Exemplos |
|---|---|
'train' | 13.353.718 |
- Estrutura de recursos :
FeaturesDict({
'sentences': Sequence({
'limit': int32,
'start': int32,
}),
'spans': Sequence({
'limit': int32,
'start': int32,
'type': string,
}),
'text': Text(shape=(), dtype=string),
'title': Text(shape=(), dtype=string),
})
- Documentação do recurso:
| Funcionalidade | Aula | Forma | Tipo D | Descrição |
|---|---|---|---|---|
| RecursosDict | ||||
| frases | Seqüência | |||
| sentenças/limite | tensor | int32 | ||
| frases/início | tensor | int32 | ||
| vãos | Seqüência | |||
| vãos/limite | tensor | int32 | ||
| vãos/início | tensor | int32 | ||
| vãos/tipo | tensor | fragmento | ||
| texto | Texto | fragmento | ||
| título | Texto | fragmento |
- Exemplos ( tfds.as_dataframe ):