SocialOptima Karşılaştırması: Müşteri Adayı Tespitinde %94,48 ve %49,68

Özet: SEOİlan’ın SocialOptima projesinde kullanılan mevcut mesaj sınıflandırma yaklaşımı, 308 örnekten 291’ini doğru etiketledi (%94,48). Aynı büyüklükteki test kümesinde Solar Decide Flash 153 doğru kararla %49,68’de kaldı. İki sonuç arasındaki fark 138 mesaj ve 44,80 yüzde puanıdır.

Bir iş fırsatını reklamdan ayırmak neden zor?

Telegram topluluklarında her mesaj gerçek bir satın alma niyeti taşımaz. “Logo yaptırmak istiyorum” diyen kişi potansiyel müşteri olabilir; “logo tasarımı yapıyorum” diyen kişi hizmet satıcısıdır. “Bana özelden yazın” çağrısı ise tek başına müşteri ihtiyacını doğrulamaz. SocialOptima’nın temel görevi, bu ayrımı mümkün olduğunca güvenilir yaparak SEOİlan tarafındaki fırsat incelemesini kolaylaştırmaktır.

İş fırsatı keşif sistemlerinde iki hata birbirinden farklı maliyet yaratır. Yanlış negatif, gerçek bir müşterinin gözden kaçmasıdır. Yanlış pozitif ise satıcı ilanının müşteri talebi sanılmasıdır. Birincisi potansiyel kazanç kaybı; ikincisi gereksiz inceleme, zaman kaybı ve düşük güven anlamına gelir. Başarı yalnızca yüksek bir toplam doğruluk yüzdesiyle değil, bu iki hata türünün dengesiyle ölçülmelidir.

308 mesajlık karşılaştırmanın özeti

Testin kapsamı ve yöntemi

14 Ekim 2026 tarihinde SocialOptima projesinin Telegram mesajlarını ayırmak için kullandığı 308 örnekten oluşan etiketli test kümesinde Upstage Solar Decide Flash modeli OpenRouter SystemOne uç noktası üzerinden değerlendirildi. Test üç karar sınıfına odaklandı: müşteri adayı, satıcı veya reklam, belirsiz / manuel inceleme. API yanıtları gerçek çağrılardan elde edildi. Bu bir genel amaçlı yapay zekâ sıralaması değil; tek veri kümesi, belirli istem ve etiket eşlemesiyle yürütülen görev odaklı bir denemedir.

308 çağrının tamamı HTTP 200 ile yanıtlandı. Doğru karar sayısı 153, yanlış karar sayısı 155 oldu. Doğruluk %49,68; toplam raporlanan API maliyeti 0,0077956 ABD doları; ortalama yanıt süresi 0,713 saniye olarak kaydedildi. Testte yanlış elenen müşteri sayısı bir olarak raporlandı. Ayrıntılı karışıklık matrisi bu özette yer almadığından yanlış pozitif müşteri adaylarının sayısı kesin olarak belirtilmemektedir.

Ölçüm tablosu

Mevcut motor neden korunuyor?

Karşılaştırma, bu belirli testte mevcut SocialOptima yaklaşımının çok daha iyi performans verdiğini gösteriyor. Üretimde çalışan kuralların ve kontrol mekanizmalarının yerine, yalnızca düşük API maliyeti nedeniyle başka bir karar modeli koymak rasyonel değil. 138 ek doğru karar, özellikle ilan kalitesini korumak isteyen bir platform için anlamlı bir farktır.

Solar Decide Flash testinde yalnızca bir gerçek müşterinin yanlış elendiği raporlandı. Bu sayı önemlidir ancak tek başına iyi bir fırsat filtresi kurulduğunu kanıtlamaz. Modelin ne kadar çok satıcı veya reklam mesajını yanlışlıkla müşteri adayı saydığı, sınıf bazlı karışıklık matrisi incelenmeden kesinleştirilemez. Ayrıca 153 doğru kararın tamamı müşteri adayı değildir; bu sayı tüm sınıflardaki doğru kararların toplamıdır.

Maliyet avantajı neden tek başına yeterli değil?

308 mesajın 0,0077956 dolara değerlendirilmesi son derece düşük bir API giderine işaret ediyor. Ortalama yanıt 0,713 saniye ve tüm istekler HTTP 200 oldu. Yüksek hacimli mesaj taramasında bunlar cazip teknik özelliklerdir. Ancak yanlış fırsatların inceleme kuyruğuna düşmesi, API ücretinden çok daha büyük operasyonel maliyet oluşturabilir.

Örneğin bir fırsat kartını değerlendiren kişi, mesajın bağlamını açmak, gerçekten müşteri olup olmadığını anlamak ve grup kurallarına uygunluğunu kontrol etmek zorundadır. Yanlış sınıflandırmalar arttığında bu iş yükü büyür. Bu nedenle bir AI modelinin ekonomik değeri, istek başı fiyattan ziyade doğru fırsat başına toplam maliyetle ölçülmelidir. Bu testte iş gücü maliyeti ölçülmediğinden parasal tasarruf iddiasında bulunmuyoruz.

SEOİlan için sonraki adım

Öncelik mevcut SocialOptima filtrelerinin kararlılığını korumak, yanlış elenen gerçek müşteri örneklerini incelemek ve sınıf bazlı raporlamayı geliştirmektir. Solar Decide Flash ancak ayrı bir deney ortamında, örneğin mevcut motorun kararsız bulduğu mesajlarda ikinci görüş sağlayan yardımcı katman olarak yeniden denenebilir. Bu öneri henüz doğrulanmış bir iyileştirme değildir.

Yeni bir karşılaştırmada veri kümesinin etiketleri sabit tutulmalı, istem değişiklikleri kayıt altına alınmalı ve hiçbir yeni model canlı Telegram gönderimine otomatik bağlanmamalıdır. Onay mekanizmaları, grup kuralları, sessiz saatler ve mevcut zamanlayıcılar aynen korunmalıdır. Gerçek müşteriyi yakalama hedefi kadar yanlış ilanı eleme hedefi de önemlidir.

Fırsat kartlarında kalite kontrolünün rolü

Bir Telegram mesajını müşteri adayı olarak işaretlemek, o kişiye otomatik olarak satış mesajı gönderilmesi gerektiği anlamına gelmez. Mesajın güncelliği, grup kuralları, kullanıcı niyeti ve ilgili hizmet kategorisi ayrıca kontrol edilmelidir. SocialOptima yaklaşımında sınıflandırma, fırsat keşif zincirinin yalnızca bir adımıdır. Sonraki adımlardaki güvenlik ve onay kontrollerinin korunması, yanlış pozitiflerin etkisini sınırlamak açısından önem taşır.

Bu yüzden test sonucunu yeni bir otomasyonun gerekçesi olarak değil, mevcut motorun neden korunması gerektiğini gösteren bir karşılaştırma olarak değerlendiriyoruz. Gelecek denemelerde karar eşiği, manuel inceleme oranı ve doğrulanmış fırsat sayısı birlikte raporlandığında sistemin ticari değeri daha net anlaşılacaktır.

Sık sorulan sorular

SocialOptima’nın mevcut doğruluğu kaç?

Bu 308 örnekli çevrimdışı testte 291 doğru kararla %94,48 ölçüldü.

Solar Decide Flash daha ucuz olduğu için kullanılacak mı?

Hayır. Bu testte doğruluğu %49,68 olduğundan mevcut sınıflandırma motorunun yerini almıyor.

Yanlış elenen müşteri sayısı neydi?

Solar Decide Flash test özeti bir yanlış negatif müşteri bildirdi; yanlış pozitiflerin ayrıntılı dağılımı ayrıca incelenmelidir.

Bu karşılaştırma canlı sistemi değiştirdi mi?

Hayır. Test üretim motorunu, kuyrukları veya cron görevlerini değiştirmedi.

Kaynaklar ve şeffaflık

Birincil veri: SocialOptima çevrimdışı değerlendirme özeti, 14 Ekim 2026 (308 mesaj). Ürün ve API ayrıntıları: OpenRouter model listing; Upstage documentation. Fiyatlar ve API davranışı değişebilir.