lbpp

  • 설명 :

Less Basic Python 프로그래밍은 단위 테스트와 함께 제공되는 161개의 프로그래밍 문제 모음입니다. 이는 신선하고(생성 시 유출되지 않음) 유사한 데이터 세트(예: HumanEval 및 MBPP)보다 더 어려운 것을 목표로 만들어졌습니다. 이는 동일한 방식으로 구조화된 해당 데이터 세트를 즉시 대체하거나 강화하는 역할을 할 수 있습니다.

FeaturesDict({
    'categories': Sequence(Text(shape=(), dtype=string)),
    'completion': Text(shape=(), dtype=string),
    'instruction': Text(shape=(), dtype=string),
    'language': Text(shape=(), dtype=string),
    'signature': Text(shape=(), dtype=string),
    'task_id': Text(shape=(), dtype=string),
    'test_file': Text(shape=(), dtype=string),
    'test_list': Sequence(Text(shape=(), dtype=string)),
    'test_setup': Text(shape=(), dtype=string),
    'title': Text(shape=(), dtype=string),
})
  • 기능 문서 :
특징 수업 모양 Dtype 설명
특징Dict
카테고리 시퀀스(텍스트) (없음,) 끈
완성 텍스트 끈
지침 텍스트 끈
언어 텍스트 끈
서명 텍스트 끈
task_id 텍스트 끈
테스트_파일 텍스트 끈
테스트_목록 시퀀스(텍스트) (없음,) 끈
테스트_설정 텍스트 끈
제목 텍스트 끈
@inproceedings{matton-etal-2024-leakage,
    title = "On Leakage of Code Generation Evaluation Datasets",
    author = "Matton, Alexandre  and
      Sherborne, Tom  and
      Aumiller, Dennis  and
      Tommasone, Elena  and
      Alizadeh, Milad  and
      He, Jingyi  and
      Ma, Raymond  and
      Voisin, Maxime  and
      Gilsenan-McMahon, Ellen  and
      Gall{\'e}, Matthias",
    editor = "Al-Onaizan, Yaser  and
      Bansal, Mohit  and
      Chen, Yun-Nung",
    booktitle = "Findings of the Association for Computational Linguistics: EMNLP 2024",
    month = nov,
    year = "2024",
    address = "Miami, Florida, USA",
    publisher = "Association for Computational Linguistics",
    url = "https://aclanthology.org/2024.findings-emnlp.772/",
    doi = "10.18653/v1/2024.findings-emnlp.772",
    pages = "13215--13223",
}

lbpp/all(기본 구성)

  • 구성 설명 : 다국어 LBPP

  • 다운로드 크기 : 1.78 MiB

  • 데이터세트 크기 : 4.30 MiB

  • 분할 :

나뉘다 예
'test' 944

lbpp/다국어

  • 구성 설명 : 다국어 LBPP

  • 다운로드 크기 : 1.78 MiB

  • 데이터세트 크기 : 4.30 MiB

  • 분할 :

나뉘다 예
'test' 944

lbpp/기본

  • 구성 설명 : Python LBPP

  • 다운로드 크기 : 279.90 KiB

  • 데이터세트 크기 : 627.04 KiB

  • 분할 :

나뉘다 예
'test' 162

lbpp/파이썬

  • 구성 설명 : Python LBPP

  • 다운로드 크기 : 279.90 KiB

  • 데이터세트 크기 : 627.04 KiB

  • 분할 :

나뉘다 예
'test' 162

lbpp/cpp

  • 구성 설명 : C++ LBPP

  • 다운로드 크기 : 314.45 KiB

  • 데이터세트 크기 : 761.87 KiB

  • 분할 :

나뉘다 예
'test' 161

lbpp/go

  • 구성 설명 : Go LBPP

  • 다운로드 크기 : 317.09 KiB

  • 데이터세트 크기 : 687.23 KiB

  • 분할 :

나뉘다 예
'test' 161

lbpp/자바

  • 구성 설명 : Java LBPP

  • 다운로드 크기 : 337.90 KiB

  • 데이터세트 크기 : 887.40 KiB

  • 분할 :

나뉘다 예
'test' 158

lbpp/js

  • 구성 설명 : JavaScript LBPP

  • 다운로드 크기 : 303.40 KiB

  • 데이터세트 크기 : 756.69 KiB

  • 분할 :

나뉘다 예
'test' 153

lbpp/자바스크립트

  • 구성 설명 : JavaScript LBPP

  • 다운로드 크기 : 303.40 KiB

  • 데이터세트 크기 : 756.69 KiB

  • 분할 :

나뉘다 예
'test' 153

lbpp/녹

  • 구성 설명 : JavaScript LBPP

  • 다운로드 크기 : 272.61 KiB

  • 데이터세트 크기 : 684.31 KiB

  • 분할 :

나뉘다 예
'test' 149