Görünürlük nasıl ölçülür?

Ölçümün birimi ne?

Klasik sıralama takibinde birim nettir: bir anahtar kelime, bir sıra numarası. Model cevaplarında ise ortada bir sıra listesi yok; akıcı bir metnin içinde geçen ya da geçmeyen marka adları var. Bu yüzden ölçümün birimi “sıra” değil, “yanıt” olur. Bir yanıt, tek bir sorunun tek bir çalıştırılmasından elde edilen metindir.

Her yanıt üç açıdan işaretlenir: marka adı geçti mi, geçtiyse metinde kaçıncı marka olarak anıldı, hangi gerekçeyle anıldı. Bu üç işaret, yüzlerce yanıt üzerinde toplandığında istatistiksel bir tablo oluşturur. Tek bir yanıt hiçbir şey söylemez; iki yüz yanıt bir eğilim söyler.

Ölçüm çıktısının bir güven aralığı gibi okunması gerekir. “Puanınız 71” cümlesi, “aynı koşullarda tekrarlanan ölçümlerde bu civarda bir sonuç bekleniyor” demektir. Bu yüzden iki puanlık oynamalar gürültüdür, on puanlık hareket ise sinyaldir.

Anahtar kelime seçimi: marka mı, kategori mi?

İlk karar, neyin ölçüleceğidir. Marka sorgusu, adınızın nasıl anlatıldığını gösterir: model sizi doğru sektörde mi biliyor, hangi sıfatları kullanıyor, olumsuz bir çekince ekliyor mu? Bu ölçüm itibar tarafını açar.

Kategori sorgusu ise satın alma niyetine daha yakındır. Sizi tanımayan bir kullanıcı markanızı değil, ihtiyacını yazar. “İstanbul’da saç ekimi”, “küçük işletme için muhasebe programı”, “Ankara’da kurumsal İngilizce eğitimi” gibi sorgular, modelin kimi önerdiğini gösterir. Yeni müşteri kazanımı bu sorgularda kazanılır ya da kaybedilir.

İyi bir ölçüm planı ikisini birlikte yürütür: bir marka sorgusu, üç ila beş kategori sorgusu. Kategori sorgularını seçerken gerçek satış verinizi kullanın; en çok gelir getiren hizmetinizin sorgusu, en çok aranan sorgudan daha değerlidir.

Soru seti nasıl kurulur?

Soru seti, ölçümün en kritik parçasıdır; çünkü modeli siz yönlendirirsiniz. Üç tip soru birlikte kullanılır. Doğrudan öneri soruları (“en iyi hangisi?”) modelin kendiliğinden kimi saydığını gösterir. Karşılaştırma soruları (“X mi Y mi?”) iki marka yan yana konduğunda kurulan gerekçeyi açar. Koşullu sorular (“bütçesi kısıtlı biri için?”, “yurt dışından gelen biri için?”) hangi koşulda öne çıktığınızı ortaya koyar.

Soruların dili sabit tutulmalıdır. Türkçe sorulan bir soru ile İngilizce sorulan aynı soru farklı markalar döndürebilir; ikisini karıştırmak ölçümü bozar. Aynı şekilde soru metnini sonradan değiştirmek, önceki ölçümlerle karşılaştırmayı imkânsız kılar. Soru setini bir kez kurun, sürüm numarası verin ve değiştirdiğinizde bunu rapora not düşün.

Sorularda marka adınızı geçirmemek de bir kuraldır. “YZRanking iyi mi?” diye sorarsanız model zaten sizden bahsedecektir; ölçmek istediğiniz şey, siz sormadan anılıp anılmadığınızdır.

Tekrar sayısı ve kararlılık

Modeller olasılıksal çalıştığı için aynı soru farklı sonuçlar verir. Bu nedenle her soru birden çok kez çalıştırılır ve sonuçların dağılımına bakılır. Tek çalıştırmada “çıktım” sonucu ile beş çalıştırmanın üçünde çıkmak arasında büyük fark vardır; ikincisi ölçülebilir, birincisi şanstır.

Kararlılık da ayrı bir gösterge olarak raporlanabilir. Beş denemenin beşinde anılıyorsanız model sizi güçlü biçimde ilişkilendiriyordur. Beşte birinde anılıyorsanız, markanız modelin aday listesinde var ama öne çıkmıyordur. İkisi farklı işler gerektirir: ilkinde konumu korumak, ikincisinde gerekçe üretmek.

Tekrar sayısı maliyetle doğrudan ilgilidir; her tekrar bir model çağrısıdır. Pratikte soru başına üç ila beş tekrar, gürültüyü bastırmak için yeterli olur. Daha yüksek tekrar, kritik kategorilerde tercih edilir.

Yanıtların ayrıştırılması

Toplanan metinlerden veri çıkarmak, ölçümün görünmeyen ama en emek isteyen kısmıdır. Marka adları farklı yazımlarla geçebilir: kısaltma, ek almış hâl, yanlış yazım. Ayrıştırma katmanı bu varyasyonları tek bir varlığa bağlar; aksi hâlde kendi markanızı kaçırırsınız.

Sıra bilgisi, markanın metindeki ilk geçiş konumundan çıkarılır. Modelin listeyi numaralandırdığı durumlarda bu kolaydır; akıcı bir paragrafta ise cümle sırası esas alınır. Ayrıca aynı yanıtta kaç marka sayıldığı kaydedilir, çünkü üç markalı bir listede ikinci olmak ile on markalı listede ikinci olmak farklıdır.

Gerekçe, yanıtın markayla aynı cümlede kullandığı niteleyicilerden çıkarılır. “Uygun fiyatlı”, “deneyimli ekip”, “yurt dışı hasta kabul eden” gibi ifadeler, modelin sizi hangi kutuya koyduğunu gösterir. Bu veriler zamanla kendi kategori sözlüğünüzü oluşturur.

Puan formülü

Puan üç bileşenin birleşimidir. Birincisi bahsedilme oranı: kaç yanıtta geçtiğiniz. Bu, puanın gövdesidir. İkincisi sıra ağırlığı: ilk anılan marka olmak tam ağırlık alır, sonraki sıralar kademeli olarak azalır. Üçüncüsü gerekçe niteliği: olumlu ve somut bir gerekçe küçük bir artı, belirsiz ya da çekinceli bir ifade küçük bir eksi getirir.

Bu bileşenler model bazında ayrı ayrı hesaplanır, sonra ağırlıklı ortalamaya dönüşür. Ağırlıklar sabittir; aksi hâlde puan, formül değiştiği için yükselir gibi görünür. Formülün sabit kalması, ölçümün tarih boyunca karşılaştırılabilir olmasını sağlar.

Puanın kendisi mutlak bir gerçek değildir; aynı sektördeki rakiplerle birlikte okunduğunda anlam kazanır. 71 puanın iyi mi kötü mü olduğu, kategori liderinin 86 mı yoksa 74 mü olduğuna bağlıdır.

Hangi modeller ölçülmeli?

Model seçimi, hedef kitlenizin nereden soru sorduğuna bağlıdır. Genel tüketiciye satıyorsanız ChatGPT ve Gemini ağırlık taşır; araştırma yapan, kaynak arayan bir kitleniz varsa Perplexity kritik hâle gelir. Kurumsal alıcıların Claude kullandığı senaryolar da yaygındır.

Model sayısını artırmak ölçümü otomatik olarak iyileştirmez; maliyeti artırır ve raporu kalabalıklaştırır. İki modelle başlayıp, kategori rekabeti sıkılaştıkça genişletmek daha sağlıklıdır. Önemli olan, seçtiğiniz modelleri her ölçümde sabit tutmaktır.

Ağırlıklandırma da bir tercihtir. Tüm modelleri eşit saymak en şeffaf yoldur; kitlenizin dağılımını biliyorsanız modellere farklı ağırlık verebilirsiniz. Hangi yolu seçerseniz seçin, ağırlıkları raporun başında yazın ki puanın nasıl oluştuğu tartışmaya açık kalmasın.

Rakip listesi nasıl belirlenir?

Çoğu marka, rakip listesini kendi kafasındaki oyuncularla doldurur. Oysa ölçümün en değerli çıktılarından biri, modelin sizinle birlikte saydığı isimlerdir. Bu liste çoğu zaman beklenenden farklıdır: içerik üretimi güçlü, bilinirliği yüksek ama satış hacmi küçük markalar model cevaplarında öne çıkabilir.

Bu yüzden rakip listesi ölçümle birlikte güncellenir. Her ölçümde yanıtlarda geçen markalar sayılır; belirli bir eşiği aşanlar takip listesine eklenir. Böylece rekabeti siz değil, modelin gördüğü pazar tanımlar.

Listeyi dar tutmak da bir hatadır. En az beş marka izleyin: iki lider, iki yakın rakip ve bir yükselen isim. Yükselen ismin puanındaki hızlı artış, genellikle sizin de uygulayabileceğiniz bir içerik hamlesinin işaretidir.

Bir ölçümün anatomisi

Somut bir örnek üzerinden bakalım. Kategori sorgusu “İstanbul’da saç ekimi”, modeller ChatGPT ve Gemini, soru seti beş soru, tekrar sayısı üç. Toplam otuz yanıt toplanır.

Bu otuz yanıtta markanız on dokuz kez geçtiyse bahsedilme oranı yaklaşık üçte ikidir. Geçtiği yanıtların çoğunda ikinci sırada anılıyorsanız sıra ağırlığı orta seviyede kalır. Gerekçelerde “uygun fiyatlı” ifadesi öne çıkıyor, “deneyim” hiç geçmiyorsa, model sizi fiyat kutusuna koymuş demektir.

Aksiyon buradan çıkar: deneyim ve kapsam bilgisini metne yazmak, hasta sayısı yerine doğrulanabilir somut bilgileri sayfada açıkça belirtmek. Bir sonraki ölçümde gerekçe dağılımının değişip değişmediğine bakılır. Puan aynı kalsa bile gerekçenin değişmesi, doğru yönde ilerlediğinizi gösterir.

Ölçüm maliyeti ve sıklığı

Her ölçüm, model başına birden çok çağrı demektir. Beş soru, üç tekrar ve iki model otuz çağrı eder; beş kategori izliyorsanız haftada yüz elli çağrıya çıkarsınız. Maliyet buradan doğar ve plan seçimini belirleyen asıl değişken budur.

Sıklık konusunda pratik kural şudur: aktif çalıştığınız kategorilerde haftalık, izlemek istediğiniz ikincil kategorilerde aylık ölçüm. İçerik değişikliği yaptığınız hafta ek bir ölçüm almak, etkiyi izole etmeyi kolaylaştırır.

Ölçümü gereğinden sık çalıştırmak da bilgi üretmez. Model cevapları günlük olarak değişse de bu değişimlerin çoğu gürültüdür; haftalık aralık, sinyali yakalamak için yeterli çözünürlüğü verir.

Yöntem hakkında üç yaygın soru

Sonuçlar kişiye göre değişir mi? Aynı hesapla, aynı ayarlarla çalıştırılan sorgular karşılaştırılabilir. Kullanıcının kendi sohbet geçmişi cevabı etkileyebildiği için ölçümler temiz oturumlarda yapılır.

Modelin internete bakması sonucu değiştirir mi? Evet, ciddi biçimde. Arama destekli cevaplarda güncel kaynaklar öne çıkar; bu yüzden arama açık ve kapalı ölçümler ayrı raporlanır, karıştırılmaz.

Puanı rakibimle doğrudan kıyaslayabilir miyim? Aynı soru seti ve aynı dönemde ölçülmüşse evet. Farklı sorularla alınmış iki puanı yan yana koymak, iki farklı sınavın notunu karşılaştırmaya benzer.

Türkçe ölçümün kendine özgü tarafı

Türkçe sorgularda modellerin davranışı İngilizceden farklılaşır. Kaynak havuzu daha dar olduğu için model, az sayıda güçlü kaynağa daha fazla yaslanır. Bu, Türkçe içerik üreten markalar için avantaj demektir: iyi yazılmış tek bir sayfa, İngilizcede olduğundan daha görünür olabilir.

Dil bilgisi de ayrıştırmayı zorlaştırır. Marka adları ek alır, büyük-küçük harf kullanımı değişir, Türkçe karakterler farklı yazılır. Ayrıştırma katmanının bu varyasyonları tek varlığa bağlaması gerekir; yoksa ölçüm markanızı olduğundan daha az görür.

Bir başka fark coğrafi niyettir. Türkçe sorguların büyük kısmı şehir içerir: “İstanbul’da”, “Ankara’da”. Şehir bilgisini sayfa metninde açıkça geçirmek, bu sorgularda anılma ihtimalini doğrudan etkiler.

Raporu saklamak ve sürümlemek

Her ölçüm bir kayıt olarak saklanmalıdır: tarih, model sürümü, soru seti sürümü, tekrar sayısı ve ham yanıtlar. Bu beşi olmadan geçmiş bir sonucu yeniden yorumlayamazsınız.

Sürümleme özellikle soru setinde önemlidir. Yeni bir soru eklediğinizde eski ölçümlerle kıyaslama kırılır; bu yüzden değişiklikler sürüm numarasıyla işaretlenir ve grafikte bir çizgiyle gösterilir. Böylece puandaki sıçramanın gerçek mi yoksa yöntem değişikliği mi olduğu anlaşılır.

Ham yanıtları saklamanın ikinci faydası, yeni bir metrik eklemek istediğinizde geçmişe dönük hesaplayabilmektir. Bugün ölçmediğiniz bir şeyi, kayıtlı yanıtlar sayesinde altı ay sonra geriye dönük çıkarabilirsiniz.

Ölçümün geçerliliği: nelere dikkat etmeli?

Ölçüm bozulmasının en yaygın üç sebebi var. Birincisi soru setinin sessizce değişmesi. İkincisi model sürümünün güncellenmesi; sağlayıcı modeli yenilediğinde cevaplar topluca kayabilir, bu yüzden ölçüm tarihiyle birlikte model sürümü de kaydedilmelidir.

Üçüncüsü kategori kaymasıdır. “Saç ekimi” sorgusu zamanla “saç ekimi fiyatları” ya da “yurt dışında saç ekimi” gibi alt kategorilere ayrılabilir. Kullanıcı niyetindeki bu kayma, sizin puanınızı değiştirmeden pazarınızı değiştirir. Bu yüzden soru setini yılda bir gözden geçirmek gerekir.

Bir de yanlış okuma riski var: puan düştüğünde ilk refleks “bir şey bozuldu” olur. Ham yanıtlara bakmadan bu sonuca varmayın. Çoğu zaman düşüşün sebebi, rakibin yeni bir içerik yayımlaması ya da modelin kaynak seçimini değiştirmesidir.

Ölçümü kendi ekibinizde kurmak

İsterseniz bu yöntemi elle de uygulayabilirsiniz. Bir tablo açın, beş soru yazın, iki modele üçer kez sorun ve sonuçları işaretleyin. Bu, bir öğleden sonra sürer ve size başlangıç ölçümünüzü verir. Yöntemin mantığını anlamak için iyi bir egzersizdir.

Elle ölçümün sınırı ölçeklenmedir. Beş soru, iki model ve üç tekrar otuz çağrı demektir; bunu her hafta beş kategori için yapmak yüzlerce çağrıya çıkar. Ayrıca ayrıştırmayı elle yapmak, sıra ve gerekçe verilerini kaybetmenize yol açar.

Otomatik ölçümün asıl faydası tutarlılıktır: aynı sorular, aynı koşullar, aynı formül ve saklanan ham yanıtlar. Ölçüm ne kadar sıkıcı ve tekrarlı olursa, sonucu o kadar güvenilir olur.

Sonuçları aksiyona çevirmek

Raporun sonunda üç soruya cevap verebiliyor olmalısınız: hangi modelde zayıfım, neden zayıfım, bu hafta ne yapacağım? Bu üçü yoksa rapor bir gösterge panosundan ibaret kalır.

Pratikte en sık çıkan üç aksiyon şunlardır: somut bilgiyi metne taşımak (fiyat aralığı, süre, kapsam), kullanıcıların modele sorduğu soruları sayfaya başlık olarak eklemek ve bağımsız kaynaklarda görünürlüğü artırmak. Bu üç iş, ölçümdeki hareketin büyük kısmını açıklar.

Değişikliği yaptıktan sonra en az iki ölçüm dönemi bekleyin. Bir haftalık fark, modelin gürültüsü olabilir; üç haftalık istikrarlı yükseliş, yaptığınız işin karşılığıdır.

Özet

Ölçüm dört şeyden oluşur: doğru anahtar kelime, sabit bir soru seti, yeterli tekrar ve değişmeyen bir formül. Bu dördü yerindeyse puan, rakiplerle karşılaştırılabilir ve zaman içinde okunabilir bir gösterge olur.

YZRanking bu adımları otomatikleştirir; ham yanıtları saklar, formülü sabit tutar ve sonucu model bazında ayırır. Yöntemi merak ediyorsanız bir anahtar kelimeyle başlayın: ölçümü çalıştırın, ham yanıtları okuyun ve modelin kurduğu cümleyi kendi gözünüzle görün.

Yöntemin sınırları

Bu yöntem, modelin cevabında görünürlüğü ölçer; satışa dönüşü ölçmez. Bir kullanıcının modelden aldığı öneriyle satın alma yapıp yapmadığını bilemezsiniz. Görünürlük bir öncü göstergedir: satışın kendisi değil, satışa giden yolun önündeki eşiktir.

İkinci sınır kapsamdır. Ölçüm, sizin tanımladığınız sorularla sınırlıdır. Kullanıcıların gerçekte sorduğu soruların tamamını kapsamaz; bu yüzden soru setini müşteri görüşmelerinden ve destek kayıtlarından beslemek gerekir.

Üçüncü sınır zamandır. Bugünün ölçümü bugünün modelini anlatır. Sağlayıcılar modelleri sık günceller; bu yüzden tek bir ölçüme dayanarak uzun vadeli strateji kurmak yerine, eğilimi izleyip düzenli aralıklarla doğrulamak gerekir.