> ML_LITERATURE // CLARK-2018-THINK-YOU-HAVE-SOLVED-QUESTION-ANSWERING-ARC_v1.0
Think you have Solved Question Answering? Try ARC, the AI2 Reasoning Challenge
Peter Clark, Isaac Cowhey, Oren Etzioni, Tushar Khot, Ashish Sabharwal, Carissa Schoenick, Oyvind Tafjord · arXiv preprint (2018)
benchmark2018foundationalartifactsAvailable
Temel Katkı (Principal Contribution)
Karmaşık sağduyusal akıl yürütme gerektiren Kolay ve Zorlu kümelere ayrılmış 7.787 ilkokul/ortaokul fen çoktan seçmeli sorusundan oluşan ARC Challenge kümesini oluşturdu.
Operasyonel ve Mühendislik Uygunluğu
task-question-answering için yetkili teorik ve ampirik referans olarak hizmet eder.
Temel Varsayımlar (Assumptions)
- Matematiksel dışbükeylik, düzenlilik ve ampirik tutarlılık problem konfigürasyonlarında geçerlidir
Kısıtlar ve Sınırlamalar (Limitations)
- Teorik sınırlar ve kıyaslama doygunluk özellikleri model mimarileri ve eğitim ölçekleri arasında farklılık gösterir
Bağlantılı Algoritmalar, Mimariler ve Kütüphaneler
İlgili Algoritmalar:
İlgili Mimariler:
Uygulayıcı Kütüphaneler: