BPE: parçalar nasıl öğrenilir?
Merak
Parçalayıcı, hangi parçaların "sık" olduğunu nereden biliyor? Biri ona tek tek söylemedi. Bir derlemde en sık yan yana gelen iki parçayı sürekli birleştirmek yeterli: bu sıkıştırma kuralı, kelime parçalarını kendiliğinden ortaya çıkarır.
Klavyede ← → tuşlarıyla adımlar arasında gezebilirsin.