> ML_LITERATUR_v1.0
Araştırma Literatürü Atlası
Temel istatistiksel öğrenmeden modern akıl yürüten LLM'lere (DeepSeek-R1, Llama 3) uzanan 253 doğrulanmış literatür kaydı: doğrulanmış DOI, arXiv bağlantıları ve orijinal iki dilli sentezler.
DeepSeekMath: Pushing the Limits of Mathematical Reasoning in Open Language Models
LLM akıl yürütme hizalamasında muazzam GPU belleği tasarrufu sağlayan ve daha sonra DeepSeek-R1'e güç veren temel pekiştirmeli öğrenme makalesi.
Chain-of-Thought Prompting Elicits Reasoning in Large Language Models
Düşünce Zinciri (CoT) istemini keşfederek doğal dil üretimini açık hesaplamalı müzakereye dönüştüren dönüm noktası Google Brain makalesi.
Self-Consistency Improves Chain of Thought Reasoning in Language Models
Stokastik yol örneklemesi ve mutabakat birleştirmesi yoluyla matematik ve akıl yürütme kıyaslama doğruluğunu %15'e kadar artıran dönüm noktası akıl yürütme topluluk tekniği.
ReAct: Synergizing Reasoning and Acting in Language Models
ReAct döngülerini kurarak modellerin dinamik yürütme sırasında API sorgulamasına, veritabanı aramasına ve kendi kendini düzeltmesine olanak tanıyan temel otonom ajan makalesi.
Tree of Thoughts: Deliberate Problem Solving with Large Language Models
24 Oyunu ve Bulmaca gibi karmaşık planlama görevlerini çözmek için klasik sezgisel aramayı LLM öz değerlendirmesiyle birleştiren etkili çerçeve.
Reflexion: Language Agents with Verbal Reinforcement Learning
Yinelemeli hata ayıklama yoluyla HumanEval kodlama performansını %68'den %91'e çıkaran sözlü öz yansıtma ve epizodik belleği gösteren etkili ajan makalesi.
Toolformer: Language Models Can Teach Themselves to Use Tools
Dil modellerinin manuel araç ek açıklamaları olmadan harici API'leri ne zaman ve nasıl çağıracağını otonom öğrenebileceğini gösteren dönüm noktası Meta makalesi.
Retrieval-Augmented Generation for Knowledge-Intensive NLP Tasks
Geri Çağırma ile Zenginleştirilmiş Üretim (RAG) kavramını ortaya atan ve LLM'leri harici bilgilere dayandırmak için kurumsal paradigmayı kuran dönüm noktası makale.
Dense Passage Retrieval for Open-Domain Question Answering (DPR)
Soru yanıtlama için yoğun vektör erişimini kurarak modern vektör veritabanı ve anlamsal arama endüstrisini başlatan dönüm noktası Facebook AI makalesi.
Precise Zero-Shot Dense Retrieval without Relevance Labels (HyDE)
Kısa sorular ile uzun hedef belgeler arasındaki anlamsal uçurumu kapatan Varsayımsal Belge Gömme (HyDE) tekniğini icat eden etkili ACL makalesi.
LoRA: Low-Rank Adaptation of Large Language Models
Sıfır çıkarım gecikmesiyle milyarlarca parametreli modelleri ince ayarlamak için küresel endüstri standardı haline gelen LoRA makalesi.
QLoRA: Efficient Finetuning of Quantized LLMs
Tüketici sınıfı ve tek kurumsal GPU'ların devasa temel modelleri ince ayarlamasına olanak tanıyarak LLM eğitimini demokratikleştiren anıtsal NeurIPS makalesi.
GPTQ: Accurate Post-Training Quantization for Generative Pre-trained Transformers
Kaynak kısıtlı GPU'larda yüksek verimli LLM dağıtımını sağlayan eğitim sonrası ağırlık kuantalaması için standart yöntem GPTQ'yu kuran makale.
AWQ: Activation-aware Weight Quantization for LLM Compression and Acceleration
Ultra düşük gecikmeli kurumsal LLM sunumu için vLLM, TensorRT-LLM ve TGI genelinde yaygın olarak uygulanan AWQ'yu kuran MIT araştırması.
SmoothQuant: Accurate and Efficient Post-Training Quantization for Large Language Models
LLM'ler için 8-bit ağırlık ve 8-bit aktivasyon kuantalamasını mümkün kılarak sunum verimini iki katına çıkaran ve bellek ayak izini yarıya indiren ICML makalesi.
RoFormer: Enhanced Transformer with Rotary Position Embedding
Kusursuz bağlam genişletmesi için neredeyse tüm modern LLM'ler tarafından benimsenen RoPE konumsal kodlamasını kuran temel makale.
Fast Transformer Decoding: One Write-Head is All You Need
Transformer kod çözmenin bellek bant genişliği darboğazını tespit eden ve KV önbellek boyutunu başlık sayısı kadar küçülten MQA'yı öneren Noam Shazeer makalesi.
GQA: Training Generalized Multi-Query Transformer Models from Multi-Head Checkpoints
Optimal sunum verimi için üretim LLM'leri genelinde evrensel olarak benimsenen GQA'yı kuran dönüm noktası EMNLP makalesi.