Perplexity ve Burstiness Nedir? AI Metnin Matematiği

Dil Modellerinin Çalışma Mantığı

ChatGPT ve benzeri modeller bir sonraki kelimeyi tahmin ederek metin üretiyor. Her adımda binlerce kelime arasından en olası olanı seçiyorlar. İşte bu seçim süreci perplexity'i doğuruyor.

Perplexity: Sadeliğin Matematiksel İfadesi

Perplexity, bir metnin dil modeli tarafından ne kadar iyi tahmin edilebildiğini ölçüyor. Formülü karmaşık ama sezgisi basit: düşük perplexity = tahmin edilebilir metin = muhtemelen AI.

İnsan metni okuyun: "Sabahleyin kahvemi içerken aklıma geldi ki, belki de hiç gitmemeliydim." Bu cümledeki kelime seçimleri bir dil modeli için şaşırtıcı. "aklıma geldi" sonrası "ki" gelmesi tahmin edilebilir ama "belki de hiç gitmemeliydim" beklenmedik. Perplexity yüksek.

Burstiness: Ritmin Ölçümü

Burstiness cümle uzunluklarındaki varyasyonu ölçüyor. İnsan yazılarında cümle uzunlukları dramatik biçimde değişiyor. Kısa. Ve sonra çok daha uzun, karmaşık yapıda, birden fazla yan cümle barındıran bir cümle geliyor.

AI metinlerde ise cümleler ortalama 15-20 kelimede sabitlenme eğiliminde. Bu monotonluk burstiness'ı düşürüyor.

Pratikte Ne Anlama Geliyor?

Metninizin tespit araçlarından geçmesi için hem perplexity'i artırmanız hem de burstiness'ı yükseltmeniz gerekiyor. Bunu manuel yapabilirsiniz ya da Temiz Metin'e bırakabilirsiniz.