> ML_DATASET // MOSTLY-BASIC-PYTHON-PROBLEMS-MBPP_v1.0
MBPP: Mostly Basic Python Problems (Austin et al. 2021)
Google Research · Introductory Code Synthesis · 974 entry-level Python programming problems crowd-sourced with automated test cases
Introductory Code SynthesisCC-BY-4.0974 entry-level Python programming problems crowd-sourced with automated test casesopen
Veri Profili ve Özellikler
Etiket Tipi:English prompt description, Python code solution, and 3 test assertions
Diller:en, code
Lisans Seviyesi:permissive-open-source
Modaliteler:text, code
Amaçlanan Kullanım (Intended Use)
- Küçük ve orta ölçekli LLM'lerde sıfır vuruşlu temel kod sentezini değerlendirme
Yasaklanan / Kaçınılması Gereken Kullanım
- Kurumsal sistem mimarisi becerilerini değerlendirme
Önyargı, Veri Sızıntısı ve Gizlilik Risk Analizi
Kişisel Veri Riskleri (Privacy Risks):
Kitle kaynaklı temel programlama alıştırmaları; sıfır kişisel veri.
Bilinen Önyargılar (Known Bias):
Temel algoritmalar ve veri yapısı işlemleri.
Veri Sızıntısı Riski (Known Leakage):
Açık kod modelleri genelinde yaygın ezberleme.