- Tanım :
(Görüntü, bağlam, talimat) insanlar tarafından manuel olarak alınan ve yazılan üçlüler, talimatın istenilirliğinin yalnızca resme bakılarak belirlenebilmesini sağlar (doğrulama seti)
Ana sayfa : https://asimov-benchmark.github.io/
Kaynak kodu :
tfds.robotics.asimov.AsimovMultimodalManualValSürümler :
-
0.1.0(varsayılan): İlk sürüm.
-
İndirme boyutu :
Unknown sizeVeri kümesi boyutu :
240.71 MiBOtomatik önbelleğe alınmış ( belgeler ): Yalnızca
shuffle_files=False(val) olduğundaBölünmeler :
| Bölmek | Örnekler |
|---|---|
'val' | 59 |
- Özellik yapısı :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Özellik belgeleri :
| Özellik | Sınıf | Şekil | Dtipi | Tanım |
|---|---|---|---|---|
| ÖzelliklerDict | ||||
| görüntü | Resim | (Yok, Yok, 3) | uint8 | |
| talimatlar | Sekans | |||
| talimatlar/bağlam | Metin | sicim | ||
| talimatlar/talimatlar | Metin | sicim | ||
| talimatlar/prompt_with_constitution | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_without_constitution | Metin | sicim | ||
| talimatlar/prompt_without_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/undesirable_groundtruth_answer | Tensör | bool | ||
| orijinal_görüntü | Resim | (Yok, Yok, 3) | uint8 |
Denetlenen anahtarlar (
as_supervisedbelgesine bakın):NoneŞekil ( tfds.show_examples ): Desteklenmiyor.
Örnekler ( tfds.as_dataframe ):
- Alıntı :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Tanım :
(Görüntü, bağlam, talimat) insanlar tarafından manuel olarak alınan ve yazılan üçlüler, talimatın istenilirliğinin yalnızca resme bakılarak belirlenebilmesini sağlar (doğrulama seti)
Ana sayfa : https://asimov-benchmark.github.io/
Kaynak kodu :
tfds.robotics.asimov.AsimovMultimodalManualValSürümler :
-
0.1.0(varsayılan): İlk sürüm.
-
İndirme boyutu :
Unknown sizeVeri kümesi boyutu :
240.71 MiBOtomatik önbelleğe alınmış ( belgeler ): Yalnızca
shuffle_files=False(val) olduğundaBölünmeler :
| Bölmek | Örnekler |
|---|---|
'val' | 59 |
- Özellik yapısı :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Özellik belgeleri :
| Özellik | Sınıf | Şekil | Dtipi | Tanım |
|---|---|---|---|---|
| ÖzelliklerDict | ||||
| görüntü | Resim | (Yok, Yok, 3) | uint8 | |
| talimatlar | Sekans | |||
| talimatlar/bağlam | Metin | sicim | ||
| talimatlar/talimatlar | Metin | sicim | ||
| talimatlar/prompt_with_constitution | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_without_constitution | Metin | sicim | ||
| talimatlar/prompt_without_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/undesirable_groundtruth_answer | Tensör | bool | ||
| orijinal_görüntü | Resim | (Yok, Yok, 3) | uint8 |
Denetlenen anahtarlar (
as_supervisedbelgesine bakın):NoneŞekil ( tfds.show_examples ): Desteklenmiyor.
Örnekler ( tfds.as_dataframe ):
- Alıntı :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Tanım :
(Görüntü, bağlam, talimat) insanlar tarafından manuel olarak alınan ve yazılan üçlüler, talimatın istenilirliğinin yalnızca resme bakılarak belirlenebilmesini sağlar (doğrulama seti)
Ana sayfa : https://asimov-benchmark.github.io/
Kaynak kodu :
tfds.robotics.asimov.AsimovMultimodalManualValSürümler :
-
0.1.0(varsayılan): İlk sürüm.
-
İndirme boyutu :
Unknown sizeVeri kümesi boyutu :
240.71 MiBOtomatik önbelleğe alınmış ( belgeler ): Yalnızca
shuffle_files=False(val) olduğundaBölünmeler :
| Bölmek | Örnekler |
|---|---|
'val' | 59 |
- Özellik yapısı :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Özellik belgeleri :
| Özellik | Sınıf | Şekil | Dtipi | Tanım |
|---|---|---|---|---|
| ÖzelliklerDict | ||||
| görüntü | Resim | (Yok, Yok, 3) | uint8 | |
| talimatlar | Sekans | |||
| talimatlar/bağlam | Metin | sicim | ||
| talimatlar/talimatlar | Metin | sicim | ||
| talimatlar/prompt_with_constitution | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_without_constitution | Metin | sicim | ||
| talimatlar/prompt_without_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/undesirable_groundtruth_answer | Tensör | bool | ||
| orijinal_görüntü | Resim | (Yok, Yok, 3) | uint8 |
Denetlenen anahtarlar (
as_supervisedbelgesine bakın):NoneŞekil ( tfds.show_examples ): Desteklenmiyor.
Örnekler ( tfds.as_dataframe ):
- Alıntı :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Tanım :
(Görüntü, bağlam, talimat) insanlar tarafından manuel olarak alınan ve yazılan üçlüler, talimatın istenilirliğinin yalnızca resme bakılarak belirlenebilmesini sağlar (doğrulama seti)
Ana sayfa : https://asimov-benchmark.github.io/
Kaynak kodu :
tfds.robotics.asimov.AsimovMultimodalManualValSürümler :
-
0.1.0(varsayılan): İlk sürüm.
-
İndirme boyutu :
Unknown sizeVeri kümesi boyutu :
240.71 MiBOtomatik önbelleğe alınmış ( belgeler ): Yalnızca
shuffle_files=False(val) olduğundaBölünmeler :
| Bölmek | Örnekler |
|---|---|
'val' | 59 |
- Özellik yapısı :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Özellik belgeleri :
| Özellik | Sınıf | Şekil | Dtipi | Tanım |
|---|---|---|---|---|
| ÖzelliklerDict | ||||
| görüntü | Resim | (Yok, Yok, 3) | uint8 | |
| talimatlar | Sekans | |||
| talimatlar/bağlam | Metin | sicim | ||
| talimatlar/talimatlar | Metin | sicim | ||
| talimatlar/prompt_with_constitution | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary | Metin | sicim | ||
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_adversary_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_antijailbreak_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_chain_of_thinkt_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_with_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/prompt_without_constitution | Metin | sicim | ||
| talimatlar/prompt_without_constitution_parts | Sıra(Metin) | (Hiçbiri,) | sicim | |
| talimatlar/undesirable_groundtruth_answer | Tensör | bool | ||
| orijinal_görüntü | Resim | (Yok, Yok, 3) | uint8 |
Denetlenen anahtarlar (
as_supervisedbelgesine bakın):NoneŞekil ( tfds.show_examples ): Desteklenmiyor.
Örnekler ( tfds.as_dataframe ):
- Alıntı :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}