openai_humaneval

مراجع:

• شفرة
• معانقة

openai_humaneval

استخدم الأمر التالي لتحميل مجموعة البيانات هذه في TFDS:

ds = tfds.load('huggingface:openai_humaneval/openai_humaneval')

• وصف :

The HumanEval dataset released by OpenAI contains 164 handcrafted programming challenges together with unittests to very the viability of a proposed solution.

• الترخيص : معهد ماساتشوستس للتكنولوجيا
• الإصدار : 1.0.0
• الإنشقاقات :

ينقسم	أمثلة
'test'	164

• سمات :

{
    "task_id": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "prompt": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "canonical_solution": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "test": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    },
    "entry_point": {
        "dtype": "string",
        "id": null,
        "_type": "Value"
    }
}