- Description :
(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)
Page d'accueil : https://asimov-benchmark.github.io/
Code source :
tfds.robotics.asimov.AsimovMultimodalManualValVersions :
-
0.1.0(par défaut) : version initiale.
-
Taille du téléchargement :
Unknown sizeTaille de l'ensemble de données :
240.71 MiBMise en cache automatique ( documentation ) : uniquement lorsque
shuffle_files=False(val)Divisions :
| Diviser | Exemples |
|---|---|
'val' | 59 |
- Structure des fonctionnalités :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Documentation des fonctionnalités :
| Fonctionnalité | Classe | Forme | Type D | Description |
|---|---|---|---|---|
| FonctionnalitésDict | ||||
| image | Image | (Aucun, Aucun, 3) | uint8 | |
| instructions | Séquence | |||
| consignes/contexte | Texte | chaîne | ||
| instructions/instructions | Texte | chaîne | ||
| instructions/prompt_with_constitution | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_sans_constitution | Texte | chaîne | ||
| instructions/prompt_sans_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/undesirable_groundtruth_answer | Tenseur | bouffon | ||
| image_originale | Image | (Aucun, Aucun, 3) | uint8 |
Clés supervisées (Voir doc
as_supervised) :NoneFigure ( tfds.show_examples ) : non pris en charge.
Exemples ( tfds.as_dataframe ) :
- Citation :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Description :
(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)
Page d'accueil : https://asimov-benchmark.github.io/
Code source :
tfds.robotics.asimov.AsimovMultimodalManualValVersions :
-
0.1.0(par défaut) : version initiale.
-
Taille du téléchargement :
Unknown sizeTaille de l'ensemble de données :
240.71 MiBMise en cache automatique ( documentation ) : uniquement lorsque
shuffle_files=False(val)Divisions :
| Diviser | Exemples |
|---|---|
'val' | 59 |
- Structure des fonctionnalités :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Documentation des fonctionnalités :
| Fonctionnalité | Classe | Forme | Type D | Description |
|---|---|---|---|---|
| FonctionnalitésDict | ||||
| image | Image | (Aucun, Aucun, 3) | uint8 | |
| instructions | Séquence | |||
| consignes/contexte | Texte | chaîne | ||
| instructions/instructions | Texte | chaîne | ||
| instructions/prompt_with_constitution | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_sans_constitution | Texte | chaîne | ||
| instructions/prompt_sans_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/undesirable_groundtruth_answer | Tenseur | bouffon | ||
| image_originale | Image | (Aucun, Aucun, 3) | uint8 |
Clés supervisées (Voir doc
as_supervised) :NoneFigure ( tfds.show_examples ) : non pris en charge.
Exemples ( tfds.as_dataframe ) :
- Citation :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Description :
(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)
Page d'accueil : https://asimov-benchmark.github.io/
Code source :
tfds.robotics.asimov.AsimovMultimodalManualValVersions :
-
0.1.0(par défaut) : version initiale.
-
Taille du téléchargement :
Unknown sizeTaille de l'ensemble de données :
240.71 MiBMise en cache automatique ( documentation ) : uniquement lorsque
shuffle_files=False(val)Divisions :
| Diviser | Exemples |
|---|---|
'val' | 59 |
- Structure des fonctionnalités :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Documentation des fonctionnalités :
| Fonctionnalité | Classe | Forme | Type D | Description |
|---|---|---|---|---|
| FonctionnalitésDict | ||||
| image | Image | (Aucun, Aucun, 3) | uint8 | |
| instructions | Séquence | |||
| consignes/contexte | Texte | chaîne | ||
| instructions/instructions | Texte | chaîne | ||
| instructions/prompt_with_constitution | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_sans_constitution | Texte | chaîne | ||
| instructions/prompt_sans_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/undesirable_groundtruth_answer | Tenseur | bouffon | ||
| image_originale | Image | (Aucun, Aucun, 3) | uint8 |
Clés supervisées (Voir doc
as_supervised) :NoneFigure ( tfds.show_examples ) : non pris en charge.
Exemples ( tfds.as_dataframe ) :
- Citation :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Description :
(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)
Page d'accueil : https://asimov-benchmark.github.io/
Code source :
tfds.robotics.asimov.AsimovMultimodalManualValVersions :
-
0.1.0(par défaut) : version initiale.
-
Taille du téléchargement :
Unknown sizeTaille de l'ensemble de données :
240.71 MiBMise en cache automatique ( documentation ) : uniquement lorsque
shuffle_files=False(val)Divisions :
| Diviser | Exemples |
|---|---|
'val' | 59 |
- Structure des fonctionnalités :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Documentation des fonctionnalités :
| Fonctionnalité | Classe | Forme | Type D | Description |
|---|---|---|---|---|
| FonctionnalitésDict | ||||
| image | Image | (Aucun, Aucun, 3) | uint8 | |
| instructions | Séquence | |||
| consignes/contexte | Texte | chaîne | ||
| instructions/instructions | Texte | chaîne | ||
| instructions/prompt_with_constitution | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary | Texte | chaîne | ||
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_chain_of_thought_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_with_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/prompt_sans_constitution | Texte | chaîne | ||
| instructions/prompt_sans_constitution_parts | Séquence (Texte) | (Aucun,) | chaîne | |
| instructions/undesirable_groundtruth_answer | Tenseur | bouffon | ||
| image_originale | Image | (Aucun, Aucun, 3) | uint8 |
Clés supervisées (Voir doc
as_supervised) :NoneFigure ( tfds.show_examples ) : non pris en charge.
Exemples ( tfds.as_dataframe ) :
- Citation :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}