lbpp

• Keterangan :

Pemrograman Python Kurang Dasar adalah kumpulan dari 161 masalah pemrograman dengan unit test yang menyertainya. Kumpulan data tersebut dibuat dengan tujuan agar lebih segar (tidak bocor pada saat pembuatan) dan lebih sulit dibandingkan kumpulan data serupa (misalnya, HumanEval dan MBPP). Ini dapat berfungsi sebagai pengganti atau pengayaan kumpulan data tersebut karena disusun dengan cara yang setara.

• Beranda : https://aclanthology.org/2024.findings-emnlp.772/

• Kode sumber : tfds.datasets.lbpp.Builder

• Versi :

  • 2.0.0 (default): Tidak ada catatan rilis.

• Cache otomatis ( dokumentasi ): Ya

• Struktur fitur :

FeaturesDict({
    'categories': Sequence(Text(shape=(), dtype=string)),
    'completion': Text(shape=(), dtype=string),
    'instruction': Text(shape=(), dtype=string),
    'language': Text(shape=(), dtype=string),
    'signature': Text(shape=(), dtype=string),
    'task_id': Text(shape=(), dtype=string),
    'test_file': Text(shape=(), dtype=string),
    'test_list': Sequence(Text(shape=(), dtype=string)),
    'test_setup': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})

• Dokumentasi fitur :

• Kunci yang diawasi (Lihat dokumen as_supervised ): None

• Gambar ( tfds.show_examples ): Tidak didukung.

• Kutipan :

@inproceedings{matton-etal-2024-leakage,
    title = "On Leakage of Code Generation Evaluation Datasets",
    author = "Matton, Alexandre  and
      Sherborne, Tom  and
      Aumiller, Dennis  and
      Tommasone, Elena  and
      Alizadeh, Milad  and
      He, Jingyi  and
      Ma, Raymond  and
      Voisin, Maxime  and
      Gilsenan-McMahon, Ellen  and
      Gall{\'e}, Matthias",
    editor = "Al-Onaizan, Yaser  and
      Bansal, Mohit  and
      Chen, Yun-Nung",
    booktitle = "Findings of the Association for Computational Linguistics: EMNLP 2024",
    month = nov,
    year = "2024",
    address = "Miami, Florida, USA",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/2024.findings-emnlp.772/",
    doi = "10.18653/v1/2024.findings-emnlp.772",
    pages = "13215--13223",
}

lbpp/semua (konfigurasi default)

• Deskripsi konfigurasi : LBPP multibahasa

• Ukuran unduhan : 1.78 MiB

• Ukuran kumpulan data : 4.30 MiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/multibahasa

• Deskripsi konfigurasi : LBPP multibahasa

• Ukuran unduhan : 1.78 MiB

• Ukuran kumpulan data : 4.30 MiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/default

• Deskripsi konfigurasi : Python LBPP

• Ukuran unduhan : 279.90 KiB

• Ukuran kumpulan data : 627.04 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/python

• Deskripsi konfigurasi : Python LBPP

• Ukuran unduhan : 279.90 KiB

• Ukuran kumpulan data : 627.04 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/cpp

• Deskripsi konfigurasi : C++ LBPP

• Ukuran unduhan : 314.45 KiB

• Ukuran kumpulan data : 761.87 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/pergi

• Deskripsi konfigurasi : Buka LBPP

• Ukuran unduhan : 317.09 KiB

• Ukuran kumpulan data : 687.23 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/java

• Deskripsi konfigurasi : Java LBPP

• Ukuran unduhan : 337.90 KiB

• Ukuran kumpulan data : 887.40 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/js

• Deskripsi konfigurasi : JavaScript LBPP

• Ukuran unduhan : 303.40 KiB

• Ukuran kumpulan data : 756.69 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/javascript

• Deskripsi konfigurasi : JavaScript LBPP

• Ukuran unduhan : 303.40 KiB

• Ukuran kumpulan data : 756.69 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):

lbpp/karat

• Deskripsi konfigurasi : JavaScript LBPP

• Ukuran unduhan : 272.61 KiB

• Ukuran kumpulan data : 684.31 KiB

• Perpecahan :

• Contoh ( tfds.as_dataframe ):