- תיאור :
(תמונה, הקשר, הוראה) שלישיות שצולמו ונכתבו באופן ידני על ידי בני אדם תוך הבטחה שניתן לקבוע את רצונות ההוראה רק על ידי התבוננות בתמונה (ערכת אימות)
דף הבית : https://asimov-benchmark.github.io/
גרסאות :
-
0.1.0(ברירת מחדל): שחרור ראשוני.
-
גודל הורדה :
Unknown sizeגודל מערך נתונים :
240.71 MiBשמור אוטומטי במטמון ( תיעוד ): רק כאשר
shuffle_files=False(val)פיצולים :
| לְפַצֵל | דוגמאות |
|---|---|
'val' | 59 |
- מבנה תכונה :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- תיעוד תכונה :
| תכונה | מַחלָקָה | צוּרָה | Dtype | תֵאוּר |
|---|---|---|---|---|
| FeaturesDict | ||||
| תְמוּנָה | תְמוּנָה | (אין, אין, 3) | uint8 | |
| הוראות | רֶצֶף | |||
| הוראות/הקשר | טֶקסט | חוּט | ||
| הוראות/הדרכה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_anti-jailbreak | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_antijailbreak_adversary | טֶקסט | חוּט | ||
| instruktioner/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_חלקים_antijailbreak | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_חלקי_מחשבה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_ללא_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_ללא_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/תשובה_בלתי רצויה_קרקעית | מוֹתֵחַ | bool | ||
| תמונה_מקורית | תְמוּנָה | (אין, אין, 3) | uint8 |
מפתחות בפיקוח (ראה
as_superviseddoc ):Noneאיור ( tfds.show_examples ): לא נתמך.
דוגמאות ( tfds.as_dataframe ):
- ציטוט :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- תיאור :
(תמונה, הקשר, הוראה) שלישיות שצולמו ונכתבו באופן ידני על ידי בני אדם תוך הבטחה שניתן לקבוע את רצונות ההוראה רק על ידי התבוננות בתמונה (ערכת אימות)
דף הבית : https://asimov-benchmark.github.io/
גרסאות :
-
0.1.0(ברירת מחדל): שחרור ראשוני.
-
גודל הורדה :
Unknown sizeגודל מערך נתונים :
240.71 MiBשמור אוטומטי במטמון ( תיעוד ): רק כאשר
shuffle_files=False(val)פיצולים :
| לְפַצֵל | דוגמאות |
|---|---|
'val' | 59 |
- מבנה תכונה :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- תיעוד תכונה :
| תכונה | מַחלָקָה | צוּרָה | Dtype | תֵאוּר |
|---|---|---|---|---|
| FeaturesDict | ||||
| תְמוּנָה | תְמוּנָה | (אין, אין, 3) | uint8 | |
| הוראות | רֶצֶף | |||
| הוראות/הקשר | טֶקסט | חוּט | ||
| הוראות/הדרכה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_anti-jailbreak | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_antijailbreak_adversary | טֶקסט | חוּט | ||
| instruktioner/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_חלקים_antijailbreak | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_חלקי_מחשבה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_ללא_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_ללא_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/תשובה_בלתי רצויה_קרקעית | מוֹתֵחַ | bool | ||
| תמונה_מקורית | תְמוּנָה | (אין, אין, 3) | uint8 |
מפתחות בפיקוח (ראה
as_superviseddoc ):Noneאיור ( tfds.show_examples ): לא נתמך.
דוגמאות ( tfds.as_dataframe ):
- ציטוט :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- תיאור :
(תמונה, הקשר, הוראה) שלישיות שצולמו ונכתבו באופן ידני על ידי בני אדם תוך הבטחה שניתן לקבוע את רצונות ההוראה רק על ידי התבוננות בתמונה (ערכת אימות)
דף הבית : https://asimov-benchmark.github.io/
גרסאות :
-
0.1.0(ברירת מחדל): שחרור ראשוני.
-
גודל הורדה :
Unknown sizeגודל מערך נתונים :
240.71 MiBשמור אוטומטי במטמון ( תיעוד ): רק כאשר
shuffle_files=False(val)פיצולים :
| לְפַצֵל | דוגמאות |
|---|---|
'val' | 59 |
- מבנה תכונה :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- תיעוד תכונה :
| תכונה | מַחלָקָה | צוּרָה | Dtype | תֵאוּר |
|---|---|---|---|---|
| FeaturesDict | ||||
| תְמוּנָה | תְמוּנָה | (אין, אין, 3) | uint8 | |
| הוראות | רֶצֶף | |||
| הוראות/הקשר | טֶקסט | חוּט | ||
| הוראות/הדרכה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_anti-jailbreak | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_antijailbreak_adversary | טֶקסט | חוּט | ||
| instruktioner/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_חלקים_antijailbreak | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_חלקי_מחשבה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_ללא_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_ללא_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/תשובה_בלתי רצויה_קרקעית | מוֹתֵחַ | bool | ||
| תמונה_מקורית | תְמוּנָה | (אין, אין, 3) | uint8 |
מפתחות בפיקוח (ראה
as_superviseddoc ):Noneאיור ( tfds.show_examples ): לא נתמך.
דוגמאות ( tfds.as_dataframe ):
- ציטוט :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}
- תיאור :
(תמונה, הקשר, הוראה) שלישיות שצולמו ונכתבו באופן ידני על ידי בני אדם תוך הבטחה שניתן לקבוע את רצונות ההוראה רק על ידי התבוננות בתמונה (ערכת אימות)
דף הבית : https://asimov-benchmark.github.io/
גרסאות :
-
0.1.0(ברירת מחדל): שחרור ראשוני.
-
גודל הורדה :
Unknown sizeגודל מערך נתונים :
240.71 MiBשמור אוטומטי במטמון ( תיעוד ): רק כאשר
shuffle_files=False(val)פיצולים :
| לְפַצֵל | דוגמאות |
|---|---|
'val' | 59 |
- מבנה תכונה :
FeaturesDict({
'image': Image(shape=(None, None, 3), dtype=uint8),
'instructions': Sequence({
'context': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'prompt_with_constitution': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary': Text(shape=(), dtype=string),
'prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_antijailbreak_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_chain_of_thought_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_with_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'prompt_without_constitution': Text(shape=(), dtype=string),
'prompt_without_constitution_parts': Sequence(Text(shape=(), dtype=string)),
'undesirable_groundtruth_answer': bool,
}),
'original_image': Image(shape=(None, None, 3), dtype=uint8),
})
- תיעוד תכונה :
| תכונה | מַחלָקָה | צוּרָה | Dtype | תֵאוּר |
|---|---|---|---|---|
| FeaturesDict | ||||
| תְמוּנָה | תְמוּנָה | (אין, אין, 3) | uint8 | |
| הוראות | רֶצֶף | |||
| הוראות/הקשר | טֶקסט | חוּט | ||
| הוראות/הדרכה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_anti-jailbreak | טֶקסט | חוּט | ||
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_antijailbreak_adversary | טֶקסט | חוּט | ||
| instruktioner/prompt_with_constitution_chain_of_thought_antijailbreak_adversary_parts | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_מחשבה_חלקים_antijailbreak | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חוקה_שרשרת_חלקי_מחשבה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_עם_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/הנחיה_ללא_חוקה | טֶקסט | חוּט | ||
| הוראות/הנחיה_ללא_חלקי_חוקה | רצף (טקסט) | (אַף לֹא אֶחָד,) | חוּט | |
| הוראות/תשובה_בלתי רצויה_קרקעית | מוֹתֵחַ | bool | ||
| תמונה_מקורית | תְמוּנָה | (אין, אין, 3) | uint8 |
מפתחות בפיקוח (ראה
as_superviseddoc ):Noneאיור ( tfds.show_examples ): לא נתמך.
דוגמאות ( tfds.as_dataframe ):
- ציטוט :
@article{sermanet2025asimov,
author = {Pierre Sermanet and Anirudha Majumdar and Alex Irpan and Dmitry Kalashnikov and Vikas Sindhwani},
title = {Generating Robot Constitutions & Benchmarks for Semantic Safety},
journal = {arXiv preprint arXiv:2503.08663},
url = {https://arxiv.org/abs/2503.08663},
year = {2025},
}