asimov_multimodal_manual_val,asimov_multimodal_manual_val,asimov_multimodal_manual_val,asimov_multimodal_manual_val

  • Description :

(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)

Diviser Exemples
'val' 59
  • Structure des fonctionnalités :
FeaturesDict({
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'instructions': Sequence({
        'context': Text(shape=(), dtype=string),
        'instruction': Text(shape=(), dtype=string),
        'prompt_with_constitution': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_without_constitution': Text(shape=(), dtype=string),
        'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'undesirable_groundtruth_answer': bool,
    }),
    'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
  • Documentation des fonctionnalités :
Fonctionnalité Classe Forme Type D Description
FonctionnalitésDict
image Image (Aucun, Aucun, 3) uint8
instructions Séquence
consignes/contexte Texte chaîne
instructions/instructions Texte chaîne
instructions/prompt_with_constitution Texte chaîne
instructions/prompt_with_constitution_chain_of_thought Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_sans_constitution Texte chaîne
instructions/prompt_sans_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/undesirable_groundtruth_answer Tenseur bouffon
image_originale Image (Aucun, Aucun, 3) uint8
  • Citation :
@article{sermanet2025asimov,
  author    = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
  title     = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
  journal   = {arXiv preprint arXiv:2503.08663},
  url       = {https://arxiv.org/abs/2503.08663},
  year      = {2025},
}
,

  • Description :

(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)

Diviser Exemples
'val' 59
  • Structure des fonctionnalités :
FeaturesDict({
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'instructions': Sequence({
        'context': Text(shape=(), dtype=string),
        'instruction': Text(shape=(), dtype=string),
        'prompt_with_constitution': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_without_constitution': Text(shape=(), dtype=string),
        'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'undesirable_groundtruth_answer': bool,
    }),
    'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
  • Documentation des fonctionnalités :
Fonctionnalité Classe Forme Type D Description
FonctionnalitésDict
image Image (Aucun, Aucun, 3) uint8
instructions Séquence
consignes/contexte Texte chaîne
instructions/instructions Texte chaîne
instructions/prompt_with_constitution Texte chaîne
instructions/prompt_with_constitution_chain_of_thought Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_sans_constitution Texte chaîne
instructions/prompt_sans_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/undesirable_groundtruth_answer Tenseur bouffon
image_originale Image (Aucun, Aucun, 3) uint8
  • Citation :
@article{sermanet2025asimov,
  author    = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
  title     = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
  journal   = {arXiv preprint arXiv:2503.08663},
  url       = {https://arxiv.org/abs/2503.08663},
  year      = {2025},
}
,

  • Description :

(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)

Diviser Exemples
'val' 59
  • Structure des fonctionnalités :
FeaturesDict({
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'instructions': Sequence({
        'context': Text(shape=(), dtype=string),
        'instruction': Text(shape=(), dtype=string),
        'prompt_with_constitution': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_without_constitution': Text(shape=(), dtype=string),
        'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'undesirable_groundtruth_answer': bool,
    }),
    'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
  • Documentation des fonctionnalités :
Fonctionnalité Classe Forme Type D Description
FonctionnalitésDict
image Image (Aucun, Aucun, 3) uint8
instructions Séquence
consignes/contexte Texte chaîne
instructions/instructions Texte chaîne
instructions/prompt_with_constitution Texte chaîne
instructions/prompt_with_constitution_chain_of_thought Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_sans_constitution Texte chaîne
instructions/prompt_sans_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/undesirable_groundtruth_answer Tenseur bouffon
image_originale Image (Aucun, Aucun, 3) uint8
  • Citation :
@article{sermanet2025asimov,
  author    = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
  title     = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
  journal   = {arXiv preprint arXiv:2503.08663},
  url       = {https://arxiv.org/abs/2503.08663},
  year      = {2025},
}
,

  • Description :

(Image, contexte, instruction) triplets pris manuellement et écrits par des humains tout en garantissant que l'opportunité de l'instruction ne peut être déterminée qu'en regardant l'image (ensemble de validation)

Diviser Exemples
'val' 59
  • Structure des fonctionnalités :
FeaturesDict({
    'image': Image(shape=(None, None, 3), dtype=uint8),
    'instructions': Sequence({
        'context': Text(shape=(), dtype=string),
        'instruction': Text(shape=(), dtype=string),
        'prompt_with_constitution': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
        'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'prompt_without_constitution': Text(shape=(), dtype=string),
        'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
        'undesirable_groundtruth_answer': bool,
    }),
    'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
  • Documentation des fonctionnalités :
Fonctionnalité Classe Forme Type D Description
FonctionnalitésDict
image Image (Aucun, Aucun, 3) uint8
instructions Séquence
consignes/contexte Texte chaîne
instructions/instructions Texte chaîne
instructions/prompt_with_constitution Texte chaîne
instructions/prompt_with_constitution_chain_of_thought Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary Texte chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_antijailbreak_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_chain_of_thought_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_with_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/prompt_sans_constitution Texte chaîne
instructions/prompt_sans_constitution_parts Séquence (Texte) (Aucun,) chaîne
instructions/undesirable_groundtruth_answer Tenseur bouffon
image_originale Image (Aucun, Aucun, 3) uint8
  • Citation :
@article{sermanet2025asimov,
  author    = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
  title     = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
  journal   = {arXiv preprint arXiv:2503.08663},
  url       = {https://arxiv.org/abs/2503.08663},
  year      = {2025},
}