OpenAI neden web tarayıcıları kullanır?
ChatGPT’de reklam olarak gönderilen web sayfalarının güvenliğini doğrulamak için tarayıcılar kullanırız. Bir reklam gönderdiğinizde OpenAI, politikalarımıza uygun olduğundan emin olmak için açılış sayfasını ziyaret edebilir. Reklamın kullanıcılara ne zaman en alakalı şekilde gösterileceğini belirlemek için açılış sayfasındaki içerikten de yararlanabiliriz.
Hangi OpenAI tarayıcılarına izin vermelisiniz?
OAI-AdsBot’a izin vermeniz gerekir. Hem OAI-AdsBot’a hem de OAI-SearchBot’a izin vermenizi öneririz.
OpenAI tarayıcıları web sitemi tarayamıyor. Ne yapmalıyım?
Çoğu web sitesinde, bir tarayıcının bir web sayfasına başarıyla erişebilmesi için aşması gereken birden fazla koruma katmanı bulunur. OpenAI tarayıcılarının aşağıdaki katmanların her birinden geçebildiğini doğrulamak için mühendislik veya güvenlik ekibinizle birlikte çalışın.
1. robots.txt
robots.txt dosyası, tarayıcılara web sitenizin belirli bölümlerine erişim izni olup olmadığını bildirir. OpenAI tarayıcıları bu kurallara uyar. robots.txt içinde erişime izin verilmiyorsa tarama hemen durur.
robots.txt yapılandırmanızı gözden geçirin ve OpenAI tarayıcılarının ilgili sayfalara ve yollara erişimine açıkça izin verildiğini doğrulayın. Örneğin: User-agent: OAI-SearchBot Allow: / User-agent: OAI-AdsBot Allow: /
2. Web koruması ve bot önleme
Birçok web sitesi, DDoS saldırılarına, scraping’e ve yetkisiz trafiğe karşı korunmak için Cloudflare, Akamai veya diğer web koruma sağlayıcıları gibi hizmetler kullanır. Bu sistemler meşru tarayıcıları yanlışlıkla engelleyebilir ve çoğu zaman 403 Forbidden hataları döndürür. OpenAI tarayıcıları otomatik trafik örüntülerine benzeyebildiğinden, özellikle izin verilenler listesine eklenmedikçe erişimleri reddedilebilir.
Web koruma veya güvenlik duvarı yapılandırmanızı gözden geçirin ve mümkün olduğunda, ideal olarak tarayıcı user agent’larımızı temel alarak OpenAI tarayıcı trafiğini izin verilenler listesine ekleyin. Mühendislik veya altyapı ekibiniz, yanlış pozitifleri tetikliyor olabilecek otomatik bot önleme kurallarını da incelemelidir.
3. İnsan doğrulama ve bot karşıtı mantık
Bazı web siteleri, ziyaretçinin insan olduğunu doğrulamak için CAPTCHA’lar, JavaScript sorgulamaları, davranış analizi veya oturum doğrulama gibi ek uygulama düzeyi kontroller uygular. OpenAI tarayıcıları otomatik sistemler olduğundan, tarayıcı önceki katmanlardan başarıyla geçse bile bu kontroller erişimi engelleyebilir.
Uygulamanızda bulunan insan doğrulama veya otomasyon karşıtı mantığı gözden geçirin ve uygun olduğunda, ideal olarak tarayıcı user agent’larımızı izin verilenler listesine ekleyerek OpenAI tarayıcılarının muaf tutulduğundan emin olun.
Sabit IP aralıkları hakkında not
Bazı güvenlik sistemleri, tarayıcı trafiğinin güvenilir şekilde izin verilenler listesine eklenebilmesi için sabit ve herkese açık olarak belgelenmiş IP aralıklarından gelmesini gerektirir. Tarayıcı altyapısı zaman içinde değişebileceğinden, mühendislik ekibiniz günlüklerdeki kısa vadeli IP gözlemlerine tek başına güvenmekten kaçınmalıdır. Bunun yerine trafiği user-agent tanımlaması, desteklendiği durumlarda doğrulanmış bot programları, güvenlik duvarı izin listeleri, robots.txt davranışı ve sağlayıcı düzeyindeki bot doğrulama sistemlerinin birleşimiyle doğrulayın.
Sabit bir IP aralıkları listesine izin vermeniz gerekiyorsa https://openai.com/searchbot.json ve https://openai.com/adsbot.json adreslerini referans alın.
Kullanım limiti hakkında not
Büyük toplu yüklemeler veya tarayıcı trafiğindeki ani artışlar bazen otomatik kullanım limiti ya da bot koruma sistemlerini tetikleyebilir.
Kullanım limiti uygulandığından şüpheleniyorsanız mühendislik ekibinizden, tarayıcının erişim denediği zaman civarındaki HTTP yanıt kodlarını, özellikle 429 Too Many Requests’i, güvenlik duvarı veya CDN günlüklerini, bot önleme olaylarını, istek kısıtlama kurallarını ve trafik analizlerini incelemesini isteyin. Bu, isteklerin altyapı korumaları tarafından kasıtlı olarak yavaşlatılıp yavaşlatılmadığını veya engellenip engellenmediğini belirlemeye yardımcı olabilir.
Reklamları daha küçük gruplar halinde, daha uzun bir süreye yayarak yüklemeyi de düşünebilirsiniz.
Cloudflare hakkında not
OAI-AdsBot, Cloudflare tarafından resmi olarak doğrulanmış ve izin verilenler listesine eklenmiştir.
Tarayıcı ve açılış sayfası SSS
Reklam incelemesi için hangi tarayıcı gereklidir?
ChatGPT Ads açılış sayfası doğrulaması ve incelemesi için OAI-AdsBot gereklidir. OAI-SearchBot, OpenAI’ın herkese açık web içeriğini anlamasına yardımcı olabileceği için önerilir; ancak reklamverenlerin reklam hazırlığı için öncelik vermesi gereken tarayıcı OAI-AdsBot’tur.
Destek ekibi tarayıcı doğrulamasını manuel olarak atlayabilir mi?
Manuel atlamaya güvenmeyin. robots.txt, WAF, CDN, bot önleme, kimlik doğrulama ve kullanım limiti engellerini düzelterek açılış sayfasını OAI-AdsBot tarafından taranabilir hale getirin. Açılış sayfası erişilebilir hale geldikten sonra reklamların yeniden yüklenmesi veya inceleme için yeniden gönderilmesi gerekebilir.
Mühendislik ekibim önce neyi kontrol etmeli?
Açılış sayfasının OAI-AdsBot’a başarılı bir HTTP yanıtı döndürüp döndürmediğini, robots.txt’nin ilgili yola izin verip vermediğini ve WAF, CDN, bot önleme, JavaScript sorgulamaları, CAPTCHA’lar, kimlik doğrulama veya coğrafi kuralların otomatik erişimi engelleyip engellemediğini kontrol edin.
Uygulama mağazası bağlantıları, derin bağlantılar veya web dışı hedefler açılış sayfası olarak destekleniyor mu?
Mümkün olduğunda doğrudan erişilebilir bir web açılış sayfası kullanın. Uygulama mağazası bağlantıları, derin bağlantılar, belgeler veya bir uygulama, oturum açma, bölgeye özel erişim ya da desteklenmeyen yönlendirmeler gerektiren hedefler, doğrulama veya inceleme için yeterli taranabilir içerik sağlamayabilir.
Ne zaman yeniden yükleme yapmalı veya tekrar inceleme istemeliyim?
Tarayıcı erişimini düzelttikten sonra, durum kendiliğinden güncellenmezse etkilenen reklamları yeniden yükleyin veya yeniden gönderin. Toplu yüklenen reklamlarda, ekibiniz düzeltmeyi doğrularken daha küçük gruplar kullanım limiti veya bot koruma tetikleyicilerini azaltabilir.