Applebot-Extended Nedir? Apple Intelligence İçin Opt-Out Rehberi
Kısaca: Applebot, Apple'ın Siri ve Spotlight arama sonuçlarını besleyen tarayıcısıdır ve robots.txt kurallarına uyar. Applebot-Extended ise Apple Intelligence ve temel model eğitimi için içerik toplayan ayrı bir belirteçtir; bunu robots.txt'de engellemek Siri/Spotlight aramasını etkilemez, yalnızca AI model eğitiminden çıkarır.
Applebot ve Applebot-Extended Arasındaki Temel Fark
Apple, 2024 yılında iki farklı tarayıcı belirteci kullanmaya başladı ve bu ayrım site sahipleri için kritik öneme sahip:
Applebot: Apple'ın geleneksel arama tarayıcısıdır. Siri, Spotlight ve Safari'deki arama önerilerini besleyen içeriği toplar. Bu bot engellendiğinde siteniz Apple'ın arama ekosisteminde görünmez hale gelir.
Applebot-Extended: Özellikle Apple Intelligence, temel dil modelleri ve üretken AI özelliklerinin eğitimi için kullanılan belirteçtir. Bu bot engellendiğinde yalnızca AI model eğitiminden çıkarsınız; normal arama işlevleri etkilenmez.
Bu ayrım, Google'ın Google-Extended yaklaşımına benzer şekilde, site sahiplerine arama görünürlüğünden ödün vermeden AI eğitimi konusunda kontrol sağlar.
robots.txt ile Applebot-Extended Engelleme
Applebot-Extended'ı engellemek için robots.txt dosyanıza aşağıdaki kuralları ekleyin:
# Apple Intelligence ve AI model eğitimini engelle
User-agent: Applebot-Extended
Disallow: /
# Normal Apple arama tarayıcısına izin ver
User-agent: Applebot
Allow: /
Bu yapılandırma, sitenizin Siri ve Spotlight'ta görünmeye devam etmesini sağlarken AI eğitimi için kullanılmasını engeller.
Kısmi Engelleme Senaryoları
Tüm siteyi değil belirli bölümleri AI eğitiminden çıkarmak isterseniz:
# Yalnızca premium içeriği AI eğitiminden çıkar
User-agent: Applebot-Extended
Disallow: /premium/
Disallow: /uye-icerigi/
# Genel içeriğe izin ver
User-agent: Applebot-Extended
Allow: /blog/
User-agent: Applebot
Allow: /
Farklı User-agent grupları arasına boş satır bırakmayı unutmayın; bu, robots.txt sözdiziminde netlik sağlar.
Siri ve Spotlight Aramasına Etkisi
Applebot-Extended'ı engellemek, Apple'ın arama hizmetlerini etkilemez. Doğrulanmış bilgi şudur:
- Siri arama sonuçları: Applebot tarafından beslenir, Applebot-Extended tarafından değil
- Spotlight önerileri: Yine Applebot'un sorumluluğundadır
- Safari arama: Applebot indeksini kullanır
- Apple Intelligence özellikleri: Applebot-Extended verilerini kullanır (Writing Tools, Siri'nin gelişmiş yanıtları vb.)
Örnek senaryo: Bir haber sitesi, makalelerinin Siri'de aranabilir olmasını istiyor ancak Apple'ın dil modellerini eğitmek için kullanılmasını istemiyor. Bu durumda Applebot-Extended'ı engelleyip Applebot'a izin vererek her iki amacı da gerçekleştirebilir.
Doğrulama ve İzleme
robots.txt değişikliklerinizi kontrol etmek için:
- Dosyanızın
https://siteniz.com/robots.txtadresinden erişilebilir olduğunu doğrulayın - Sözdizimi hatalarını kontrol edin (büyük/küçük harf duyarlılığı önemlidir: "Applebot-Extended" doğru, "applebot-extended" yanlış)
- Apple'ın resmi dokümantasyonunda güncel User-agent isimlerini teyit edin
Önemli not: robots.txt bir nezaket protokolüdür, güvenlik mekanizması değildir. Uymayan botlar için sunucu veya WAF seviyesinde IP bazlı engelleme gerekebilir. Apple'ın resmi IP aralıkları için dokümantasyonlarına başvurun.
Diğer AI Botlarla Karşılaştırma
| Platform | Arama Botu | AI Eğitim Botu/Belirteci |
|---|---|---|
| Apple | Applebot | Applebot-Extended |
| Googlebot | Google-Extended (belirteç) | |
| OpenAI | OAI-SearchBot | GPTBot |
| Anthropic | Claude-SearchBot | ClaudeBot |
Bu ayrım, endüstri genelinde bir standart haline gelmiştir. Site sahipleri artık arama görünürlüğü ile AI eğitimi arasında seçim yapmak zorunda değildir.
Telif Hakkı ve Yasal Boyut
Applebot-Extended'ı engellemek, içeriğinizin AI eğitiminde kullanılmasını önlemenin teknik yoludur, ancak yasal koruma sağlamaz. Telif hakkı ihlali endişeleriniz varsa hukuki danışmanlık almanız önerilir.
robots.txt engelleme, içeriğinizin zaten toplanmış olabileceği geçmiş eğitim setlerini etkilemez; yalnızca gelecekteki taramayı kontrol eder. Apple'ın mevcut modellerinde sitenizin kullanılıp kullanılmadığını doğrulamak için resmi kanallardan bilgi almanız gerekir.
Sık Sorulan Sorular
Applebot-Extended'ı engellemek SEO'mu etkiler?
Hayır. Applebot-Extended yalnızca AI model eğitimi içindir; Apple'ın arama sıralamasını veya Siri/Spotlight sonuçlarını etkilemez. SEO açısından risk taşımayan bir opt-out mekanizmasıdır. Normal Applebot'a izin verdiğiniz sürece Apple ekosistemindeki görünürlüğünüz korunur.
robots.txt değişikliği ne kadar sürede etkili olur?
Apple'ın tarayıcıları robots.txt dosyasını her ziyarette kontrol eder, ancak değişikliğin tam etkisi tarama döngüsüne bağlıdır. Genellikle birkaç gün içinde yeni kurallar uygulanır. Acil engelleme gerekiyorsa sunucu seviyesinde IP engelleme daha hızlı sonuç verir, ancak Apple'ın IP aralıklarını resmi dokümantasyondan doğrulamanız gerekir.
Applebot-Extended'ı engelledikten sonra geri dönebilir miyim?
Evet. robots.txt'den ilgili satırları kaldırarak veya "Disallow: /" yerine "Allow: /" yazarak istediğiniz zaman AI eğitimine izin verebilirsiniz. Ancak bu, geçmişte toplanan verileri silmez; yalnızca gelecekteki taramaya izin verir. Daha önce engellediğiniz içeriğin model eğitiminde kullanılması için Apple'ın yeni bir tarama döngüsü başlatması gerekir.
Hem Applebot hem de Applebot-Extended'ı engellemek mantıklı mı?
Bu, sitenizi Apple ekosisteminden tamamen çıkarır: Siri, Spotlight ve Safari'de aranabilir olmaz, ayrıca AI eğitiminde de kullanılmaz. Yalnızca Apple trafiğine hiç ihtiyaç duymayan veya alternatif dağıtım kanallarına sahip siteler için mantıklıdır. Çoğu B2B ve içerik sitesi için Applebot'a izin verip yalnızca Applebot-Extended'ı engellemek daha dengeli bir yaklaşımdır.