- Description :
SI-Score (Synthetic Interventions on Scenes for Robustness Evaluation) est un ensemble de données permettant d'évaluer la robustesse des modèles de classification d'images face aux changements de taille, d'emplacement et d'angle de rotation de l'objet.
Dans SI-SCORE, nous prenons des objets et des arrière-plans et faisons systématiquement varier la taille, l'emplacement et l'angle de rotation des objets afin de pouvoir étudier l'effet de la modification de ces facteurs sur les performances du modèle. L'espace d'étiquettes d'image est l'espace d'étiquettes ImageNet (1k classes) pour une évaluation facile des modèles.
Plus d'informations sur l'ensemble de données peuvent être trouvées sur https://github.com/google-research/si-score
Documentation supplémentaire : Explorer sur les articles avec le code
Page d'accueil : https://github.com/google-research/si-score
Code source :
tfds.datasets.siscore.BuilderVersions :
-
1.0.0(par défaut) : version initiale.
-
Mise en cache automatique ( documentation ) : Non
Structure des fonctionnalités :
FeaturesDict({
'dataset_label': ClassLabel(shape=(), dtype=int64, num_classes=1000),
'image': Image(shape=(None, None, 3), dtype=uint8),
'image_id': int64,
'label': ClassLabel(shape=(), dtype=int64, num_classes=1000),
})
- Documentation des fonctionnalités :
| Fonctionnalité | Classe | Forme | Type D | Description |
|---|---|---|---|---|
| FonctionnalitésDict | ||||
| étiquette_ensemble de données | Étiquette de classe | int64 | ||
| image | Image | (Aucun, Aucun, 3) | uint8 | |
| image_id | Tenseur | int64 | ||
| étiquette | Étiquette de classe | int64 |
Clés supervisées (Voir doc
as_supervised) :('image', 'label')Citation :
@misc{djolonga2020robustness,
title={On Robustness and Transferability of Convolutional Neural Networks},
author={Josip Djolonga and Jessica Yung and Michael Tschannen and Rob Romijnders and Lucas Beyer and Alexander Kolesnikov and Joan Puigcerver and Matthias Minderer and Alexander D'Amour and Dan Moldovan and Sylvain Gelly and Neil Houlsby and Xiaohua Zhai and Mario Lucic},
year={2020},
eprint={2007.08558},
archivePrefix={arXiv},
primaryClass={cs.CV}
}
siscore/rotation (configuration par défaut)
Description de la config : facteur de variation : rotation
Taille du téléchargement :
1.40 GiBTaille du jeu de données :
1.40 GiBDivisions :
| Diviser | Exemples |
|---|---|
'test' | 39 540 |
- Figure ( tfds.show_examples ) :

- Exemples ( tfds.as_dataframe ) :
score/taille
Description de la config : facteur de variation : taille
Taille du téléchargement :
3.25 GiBTaille de l'ensemble de données :
3.27 GiBDivisions :
| Diviser | Exemples |
|---|---|
'test' | 92 884 |
- Figure ( tfds.show_examples ) :

- Exemples ( tfds.as_dataframe ) :
score/localisation
Description de la config : facteur de variation : localisation
Taille du téléchargement :
18.21 GiBTaille de l'ensemble de données :
18.31 GiBDivisions :
| Diviser | Exemples |
|---|---|
'test' | 541 548 |
- Figure ( tfds.show_examples ) :

- Exemples ( tfds.as_dataframe ) :