- Keterangan :
(Gambar, konteks, instruksi) kembar tiga diambil dan ditulis secara manual oleh manusia sambil memastikan bahwa keinginan instruksi hanya dapat ditentukan dengan melihat gambar (set validasi)
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalManualValVersi :
-
0.1.0(default): Rilis awal.
-
Ukuran unduhan :
Unknown sizeUkuran kumpulan data :
240.71 MiBCache otomatis ( dokumentasi ): Hanya ketika
shuffle_files=False(val)Perpecahan :
| Membelah | Contoh |
|---|---|
'val' | 59 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
| Fitur | Kelas | Membentuk | Tipe D | Keterangan |
|---|---|---|---|---|
| FiturDict | ||||
| gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
| instruksi | Urutan | |||
| instruksi/konteks | Teks | rangkaian | ||
| petunjuk/instruksi | Teks | rangkaian | ||
| instruksi/prompt_with_constitution | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
| instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
| instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
| gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised):NoneGambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Keterangan :
(Gambar, konteks, instruksi) kembar tiga diambil dan ditulis secara manual oleh manusia sambil memastikan bahwa keinginan instruksi hanya dapat ditentukan dengan melihat gambar (set validasi)
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalManualValVersi :
-
0.1.0(default): Rilis awal.
-
Ukuran unduhan :
Unknown sizeUkuran kumpulan data :
240.71 MiBCache otomatis ( dokumentasi ): Hanya ketika
shuffle_files=False(val)Perpecahan :
| Membelah | Contoh |
|---|---|
'val' | 59 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
| Fitur | Kelas | Membentuk | Tipe D | Keterangan |
|---|---|---|---|---|
| FiturDict | ||||
| gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
| instruksi | Urutan | |||
| instruksi/konteks | Teks | rangkaian | ||
| petunjuk/instruksi | Teks | rangkaian | ||
| instruksi/prompt_with_constitution | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
| instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
| instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
| gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised):NoneGambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Keterangan :
(Gambar, konteks, instruksi) kembar tiga diambil dan ditulis secara manual oleh manusia sambil memastikan bahwa keinginan instruksi hanya dapat ditentukan dengan melihat gambar (set validasi)
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalManualValVersi :
-
0.1.0(default): Rilis awal.
-
Ukuran unduhan :
Unknown sizeUkuran kumpulan data :
240.71 MiBCache otomatis ( dokumentasi ): Hanya ketika
shuffle_files=False(val)Perpecahan :
| Membelah | Contoh |
|---|---|
'val' | 59 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
| Fitur | Kelas | Membentuk | Tipe D | Keterangan |
|---|---|---|---|---|
| FiturDict | ||||
| gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
| instruksi | Urutan | |||
| instruksi/konteks | Teks | rangkaian | ||
| petunjuk/instruksi | Teks | rangkaian | ||
| instruksi/prompt_with_constitution | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_think_antijailbreak | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
| instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
| instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
| gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised):NoneGambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- Keterangan :
(Gambar, konteks, instruksi) kembar tiga diambil dan ditulis secara manual oleh manusia sambil memastikan bahwa keinginan instruksi hanya dapat ditentukan dengan melihat gambar (set validasi)
Beranda : https://asimov-benchmark.github.io/
Kode sumber :
tfds.robotics.asimov.AsimovMultimodalManualValVersi :
-
0.1.0(default): Rilis awal.
-
Ukuran unduhan :
Unknown sizeUkuran kumpulan data :
240.71 MiBCache otomatis ( dokumentasi ): Hanya ketika
shuffle_files=False(val)Perpecahan :
| Membelah | Contoh |
|---|---|
'val' | 59 |
- Struktur fitur :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- Dokumentasi fitur :
| Fitur | Kelas | Membentuk | Tipe D | Keterangan |
|---|---|---|---|---|
| FiturDict | ||||
| gambar | Gambar | (Tidak ada, Tidak ada, 3) | uint8 | |
| instruksi | Urutan | |||
| instruksi/konteks | Teks | rangkaian | ||
| petunjuk/instruksi | Teks | rangkaian | ||
| instruksi/prompt_with_constitution | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_think | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_think_antijailbreak | Teks | rangkaian | ||
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_adversary | Teks | rangkaian | ||
| instruksi/prompt_dengan_konstitusi_rantai_pemikiran_antijailbreak_adversary_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_antijailbreak_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_chain_of_ thought_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_with_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/prompt_tanpa_konstitusi | Teks | rangkaian | ||
| instruksi/prompt_without_constitution_parts | Urutan (Teks) | (Tidak ada,) | rangkaian | |
| instruksi/jawaban_dasar_yang tidak diinginkan | Tensor | bodoh | ||
| gambar_asli | Gambar | (Tidak ada, Tidak ada, 3) | uint8 |
Kunci yang diawasi (Lihat dokumen
as_supervised):NoneGambar ( tfds.show_examples ): Tidak didukung.
Contoh ( tfds.as_dataframe ):
- Kutipan :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}