- 설명 :
Less Basic Python 프로그래밍은 단위 테스트와 함께 제공되는 161개의 프로그래밍 문제 모음입니다. 이는 신선하고(생성 시 유출되지 않음) 유사한 데이터 세트(예: HumanEval 및 MBPP)보다 더 어려운 것을 목표로 만들어졌습니다. 이는 동일한 방식으로 구조화된 해당 데이터 세트를 즉시 대체하거나 강화하는 역할을 할 수 있습니다.
소스 코드 :
tfds.datasets.lbpp.Builder
버전 :
-
2.0.0
(기본값): 릴리스 노트가 없습니다.
-
자동 캐시 ( 문서 ): 예
기능 구조 :
FeaturesDict({
'categories': Sequence(Text(shape=(), dtype=string)),
'completion': Text(shape=(), dtype=string),
'instruction': Text(shape=(), dtype=string),
'language': Text(shape=(), dtype=string),
'signature': Text(shape=(), dtype=string),
'task_id': Text(shape=(), dtype=string),
'test_file': Text(shape=(), dtype=string),
'test_list': Sequence(Text(shape=(), dtype=string)),
'test_setup': Text(shape=(), dtype=string),
'title': Text(shape=(), dtype=string),
})
- 기능 문서 :
특징 | 수업 | 모양 | Dtype | 설명 |
---|---|---|---|---|
특징Dict | ||||
카테고리 | 시퀀스(텍스트) | (없음,) | 끈 | |
완성 | 텍스트 | 끈 | ||
지침 | 텍스트 | 끈 | ||
언어 | 텍스트 | 끈 | ||
서명 | 텍스트 | 끈 | ||
task_id | 텍스트 | 끈 | ||
테스트_파일 | 텍스트 | 끈 | ||
테스트_목록 | 시퀀스(텍스트) | (없음,) | 끈 | |
테스트_설정 | 텍스트 | 끈 | ||
제목 | 텍스트 | 끈 |
감독되는 키 (
as_supervised
doc 참조):None
그림 ( tfds.show_examples ): 지원되지 않습니다.
인용 :
@inproceedings{matton-etal-2024-leakage,
title = "On Leakage of Code Generation Evaluation Datasets",
author = "Matton, Alexandre and
Sherborne, Tom and
Aumiller, Dennis and
Tommasone, Elena and
Alizadeh, Milad and
He, Jingyi and
Ma, Raymond and
Voisin, Maxime and
Gilsenan-McMahon, Ellen and
Gall{\'e}, Matthias",
editor = "Al-Onaizan, Yaser and
Bansal, Mohit and
Chen, Yun-Nung",
booktitle = "Findings of the Association for Computational Linguistics: EMNLP 2024",
month = nov,
year = "2024",
address = "Miami, Florida, USA",
publisher = "Association for Computational Linguistics",
url = "https://aclanthology.org/2024.findings-emnlp.772/",
doi = "10.18653/v1/2024.findings-emnlp.772",
pages = "13215--13223",
}
lbpp/all(기본 구성)
구성 설명 : 다국어 LBPP
다운로드 크기 :
1.78 MiB
데이터세트 크기 :
4.30 MiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 944 |
- 예 ( tfds.as_dataframe ):
lbpp/다국어
구성 설명 : 다국어 LBPP
다운로드 크기 :
1.78 MiB
데이터세트 크기 :
4.30 MiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 944 |
- 예 ( tfds.as_dataframe ):
lbpp/기본
구성 설명 : Python LBPP
다운로드 크기 :
279.90 KiB
데이터세트 크기 :
627.04 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 162 |
- 예 ( tfds.as_dataframe ):
lbpp/파이썬
구성 설명 : Python LBPP
다운로드 크기 :
279.90 KiB
데이터세트 크기 :
627.04 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 162 |
- 예 ( tfds.as_dataframe ):
lbpp/cpp
구성 설명 : C++ LBPP
다운로드 크기 :
314.45 KiB
데이터세트 크기 :
761.87 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 161 |
- 예 ( tfds.as_dataframe ):
lbpp/go
구성 설명 : Go LBPP
다운로드 크기 :
317.09 KiB
데이터세트 크기 :
687.23 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 161 |
- 예 ( tfds.as_dataframe ):
lbpp/자바
구성 설명 : Java LBPP
다운로드 크기 :
337.90 KiB
데이터세트 크기 :
887.40 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 158 |
- 예 ( tfds.as_dataframe ):
lbpp/js
구성 설명 : JavaScript LBPP
다운로드 크기 :
303.40 KiB
데이터세트 크기 :
756.69 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 153 |
- 예 ( tfds.as_dataframe ):
lbpp/자바스크립트
구성 설명 : JavaScript LBPP
다운로드 크기 :
303.40 KiB
데이터세트 크기 :
756.69 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 153 |
- 예 ( tfds.as_dataframe ):
lbpp/녹
구성 설명 : JavaScript LBPP
다운로드 크기 :
272.61 KiB
데이터세트 크기 :
684.31 KiB
분할 :
나뉘다 | 예 |
---|---|
'test' | 149 |
- 예 ( tfds.as_dataframe ):