Yapay zekâ cevapları rastgeledir: aynı soruya aynı model iki farklı cevap verir. Bu yüzden ölçümü değil, ölçüm yöntemini sabitliyoruz. Bu sayfa yürürlükteki yöntemin tamamıdır ve sürümlenir.
Her raporun künyesinde hangi sürümle, hangi tarihte ve hangi prompt setiyle üretildiği yazar. Ağırlıkları değiştirirsek eski raporlar hangi kurala göre üretildiğini taşımaya devam eder.
Toplam skor bu dört bileşenin ağırlıklı ortalamasıdır
Yapay zekânın gerçek alıcı prompt'larında markayı ne sıklıkla ve kaçıncı sırada andığı. Yapay zekâlara sorularak ölçülür.
Yapay zekânın anlattığı işin, müşterinin yazılı beyanıyla örtüşüp örtüşmediği. Yapay zekâlara sorularak ölçülür.
robots.txt, llms.txt, şema, sunucu tarafı render dâhil 14 otomatik kontrol. Soru sormadan ölçülür.
Wikidata kaydı, üçüncü taraf dizinler, künye ve uzmanlık sinyalleri. Soru sormadan ölçülür.
Mor iki bileşen yapay zekâlara hiç soru sormadan hesaplanır; ücretsiz taramada gördüğünüz kısım tam olarak bu ikisi, toplam ağırlığın %45'i. Yapay zekâdan bağımsız oldukları için her pakette tam hesaplanırlar. Yeşil ikisi için paketinizdeki yapay zekâlara sektörünüzün prompt'larını sormak gerekir.
Ölçümü tekrarlanabilir kılan şey bunlar
Sektörünüz için yazılan prompt'lar ilk taramada kilitlenir ve izlemedeki her yeniden ölçümde aynısı sorulur. Prompt değişirse öncesi–sonrası karşılaştırması geçersizdir; "her seferinde tazelenen prompt" bir pazarlama cümlesidir, ölçüm değil.
Tek cevaba bakmak zar atmaktır. Skor, tekrarların anılma oranıdır ve raporda her zaman salınım aralığıyla gösterilir: 71 değil, 71 ± 4.
Çıkış yapılmış oturum, hafıza kapalı, sabit konum. Aksi hâlde ölçtüğünüz şey yapay zekânın cevabı değil, ölçen kişinin geçmişidir.
Aynı taramada, hiçbir şey yapmayan 2–3 rakip de ölçülür. Hep birlikte yükseldiyse model değişmiştir; yalnız siz yükseldiyseniz iş işe yaramıştır. Nedenselliği ayırt etmenin tek dürüst yolu bu.
Kaç yapay zekâda ölçüleceğini paket belirler · her yapay zekâ kendi raporunu alır
Yapay zekâların hepsini tek bir ortalamaya sıkıştırmıyoruz. ChatGPT'nin markanızı anmama sebebi indeks tarafında olabilirken Gemini'ninki Google Business ya da Wikidata kaydınızın yokluğu, Claude'unki sitenizin sunucu tarafında render edilmemesi olabilir. Ayrı sebepler ayrı raporlanır, yol haritası da buna göre sıralanır.
FTP erişimi verirseniz ne yapar, ne yapmayız
Yalnızca kök dizine dosya yüklenir; sitenizin içeriğine ve koduna dokunulmaz. FTP erişimi verilmezse rapor eksiksiz teslim edilir, kurulum hakkı 90 gün saklı kalır. Sitenizin görünen yüzüne dokunmadığımız için kurulum, teslim süresini uzatmaz ve içeriğinizle ilgili bir onay süreci gerektirmez.
Ölçmediğimiz ve söz veremediğimiz şeyler
Yapay zekâlar indekslerini ve cevap politikalarını haber vermeden değiştiriyor; kimsenin bu sonucu garanti edebilecek kontrolü yok. Verdiğimiz söz şu: ölçüm öncesi ve sonrası aynı yöntemle, aynı prompt'larla yapılır ve sonuç ne çıkarsa olduğu gibi raporlanır. Skor düşerse de yazarız.
Yapay zekâ cevapları operatör tarafından temiz oda koşullarında sorulup panele kaydediliyor. Puanı operatör vermiyor: anılma, sıra ve rakipler sistem tarafından hesaplanıyor, böylece operatör değişse de ölçüm tutarlı kalıyor.
Üçüncü taraf dizinleri tarayıp "kayıtlı mısınız" diye sormuyoruz; bu hem o sitelerin kurallarını çiğnemek hem de güvenilmez sonuç üretmek olurdu. Ölçtüğümüz şey, sitenizin beyan ettiği dizin bağlantılarıdır.
Standart olma yolunda ama yapay zekâların okuduğu kanıtlanmadı. Ölçüyoruz çünkü maliyeti tek dosya; ama Yapı bileşenindeki ağırlığı bilerek düşük tutuluyor.
Cümle uzunluğu, paragraf yapısı ve liste/tablo kullanımına bakılıyor. Daha zeki bir ölçüt için dil modeli gerekirdi ve o noktada kural açıklanabilir olmaktan çıkardı.
Bu sayfa yöntemin kendisidir, özeti değil. Değiştiğinde sürüm numarası artar ve eski raporlar kendi sürümlerini taşımaya devam eder.