Büyükler için
Yapay Zekâ Atölyesi
Yapay zekâ mühendisliğinin temel fikirlerini kendin dene: token ve BPE, sonraki kelime olasılığı ve sıcaklık, metin benzerliği, RAG hattı, ajan döngüsü, prompt denetimi, prompt injection, eval ve halüsinasyon. Her şey tarayıcında çalışır; dış servis ya da anahtar yok. Hesaplar gerçektir, bir modelin yerini tutan adımlar ise açıkça "simülasyon" diye etiketlidir.
Yazının token'lara nasıl bölündüğünü ve bağlam penceresini gör.
Tamamen yerel. Bu araç tarayıcında çalışır; dış servise bağlanmaz, anahtar istemez. Hesaplar gerçektir; ancak bir dil modelinin yerini tutan her adım "simülasyon" ya da "şablon" olarak açıkça etiketlenmiştir.
Token'lar
- Karakter: 28
- Token: 34
- Token / karakter: 1.21
- UTF-8 bayt: 36
· işareti kelime başıdır. Birleştirme 0 iken her karakter ayrı token olur. Bu küçük bir BPE'dir: yalnız seçtiğin mini derlemden öğrenir (gerçek modeller çok büyük veriyle ve bayt düzeyinde eğitilir). Üstü çizili token'lar bağlam penceresine sığmadığı için "unutulur".