Maxay OpenAI u isticmaashaa gurguurayaasha webka?
Waxaan isticmaalnaa gurguurayaal si aan u xaqiijino badbaadada bogagga webka ee loo soo gudbiyo xayeysiis ahaan ChatGPT. Markaad soo gudbiso xayeysiis, OpenAI waxay booqan kartaa bogga degitaanka si ay u hubiso inuu waafaqsan yahay siyaasadayada. Waxaan sidoo kale isticmaali karnaa nuxurka bogga degitaanka si aan u go’aamino goorta ay ugu habboon tahay in xayeysiiska loo tuso isticmaalayaasha.
Gurguurayaasha OpenAI kee ayaad oggolaanaysaa?
Waa inaad oggolaataa OAI-AdsBot. Waxaan kugula talinaynaa inaad oggolaato labadaba OAI-AdsBot iyo OAI-SearchBot.
Gurguurayaasha OpenAI kuma guulaysanayaan inay gurguurtaan mareegahayga. Maxaan sameeyaa?
Mareegaha badankoodu waxay leeyihiin lakabyo badan oo ilaalin ah ka hor inta uusan gurguurte si guul leh u geli karin bog web. La shaqee kooxdaada injineernimada ama amniga si loo xaqiijiyo in gurguurayaasha OpenAI ay ka gudbi karaan mid kasta oo ka mid ah lakabyada soo socda.
1. robots.txt
Faylka robots.txt wuxuu gurguurayaasha u sheegaa haddii loo oggol yahay inay galaan qaybo gaar ah oo ka mid ah mareegahaaga. Gurguurayaasha OpenAI way ixtiraamaan xeerarkan. Haddii gelitaanka lagu diido robots.txt, gurguurashadu isla markiiba way istaagi doontaa.
Dib u eeg qaabayntaada robots.txt oo xaqiiji in gurguurayaasha OpenAI si cad loogu oggol yahay inay galaan bogagga iyo waddooyinka khuseeya. Tusaale ahaan: User-agent: OAI-SearchBot Allow: / User-agent: OAI-AdsBot Allow: /
2. Ilaalinta webka iyo yaraynta bot-yada
Mareego badan ayaa isticmaala adeegyo sida Cloudflare, Akamai, ama bixiyeyaasha kale ee ilaalinta webka si ay isaga difaacaan weerarrada DDoS, xog-xoqidda, iyo taraafikada aan la oggolayn. Nidaamyadani waxay si qalad ah u xannibi karaan gurguurayaal sharci ah, badanaa iyagoo soo celinaya khaladaadka 403 Forbidden. Maadaama gurguurayaasha OpenAI ay u ekaan karaan qaababka taraafikada otomaatiga ah, waa la diidi karaa haddii aan si gaar ah loogu darin liiska la oggol yahay.
Dib u eeg qaabaynta ilaalinta webka ama firewall-kaaga, kuna dar taraafikada gurguurayaasha OpenAI liiska la oggol yahay halka ay suurtagal tahay, sida ugu habboon adigoo ku salaynaya user agents-ka gurguurayaashayada. Kooxdaada injineernimada ama kaabayaasha waa inay sidoo kale eegtaa xeerar kasta oo otomaatig ah oo yaraynta bot-yada ah oo keeni kara digniino been ah.
3. Xaqiijinta bini’aadamka iyo habka ka-hortagga bot-yada
Mareegaha qaarkood waxay hirgeliyaan hubinno dheeraad ah oo heerka abka ah si loo xaqiijiyo in booqdaha uu yahay bini’aadam, sida CAPTCHA-yada, caqabadaha JavaScript, falanqaynta hab-dhaqanka, ama xaqiijinta fadhiga. Maadaama gurguurayaasha OpenAI ay yihiin nidaamyo otomaatig ah, hubinnadani waxay xannibi karaan gelitaanka xitaa haddii gurguurtuhu si guul leh uga gudbo lakabyadii hore.
Dib u eeg hab kasta oo xaqiijin bini’aadam ama ka-hortag otomaatig ah oo lagu hirgeliyay abkaaga, kana hubi in gurguurayaasha OpenAI laga dhaafo halka ay ku habboon tahay, sida ugu fiican adigoo ku daraya user agents-ka gurguurayaashayada liiska la oggol yahay.
Qoraal ku saabsan xuduudaha IP-ga ee deggan
Nidaamyada amniga qaarkood waxay u baahan yihiin in taraafikada gurguurayaasha ay ka timaaddo xuduudo IP oo deggan oo si guud loo diiwaangeliyay ka hor inta aan si la isku halleyn karo loogu darin liiska la oggol yahay. Maadaama kaabayaasha gurguurayaasha ay isbeddeli karaan waqti ka dib, kooxdaada injineernimada waa inay ka fogaataa inay ku tiirsanaato oo keliya kormeerro IP oo muddada-gaaban ah oo laga helo log-yada. Taa beddelkeeda, ku xaqiiji taraafikada isku-dar ah aqoonsiga user-agent, barnaamijyada bot-yada la xaqiijiyay halka la taageero, liisaska la oggol yahay ee firewall-ka, hab-dhaqanka robots.txt, iyo nidaamyada xaqiijinta bot-yada ee heer bixiye.
Haddii ay khasab kugu tahay inaad oggolaato liis deggan oo xuduudaha IP-ga ah, tixraac https://openai.com/searchbot.json iyo https://openai.com/adsbot.json.
Qoraal ku saabsan xaddidaadda heerka
Soo-gelinta tiro badan ama koror kedis ah oo ku yimaadda taraafikada gurguurayaasha ayaa mararka qaarkood kicin kara xaddidaadda heerka ee otomaatigga ah ama nidaamyada ilaalinta bot-yada.
Haddii aad ka shakisan tahay in xaddidaadda heerka ay dhacayso, weydii kooxdaada injineernimada inay dib u eegto koodhadhka jawaabta HTTP, gaar ahaan 429 Too Many Requests, log-yada firewall ama CDN, dhacdooyinka yaraynta bot-yada, xeerarka gaabinta codsiyada, iyo falanqaynta taraafikada agagaarka waqtigii gurguurtuhu isku dayay gelitaanka. Tani waxay kaa caawin kartaa in la ogaado in codsiyada si ula kac ah loo gaabinayo ama ay xannibayaan ilaalinnada kaabayaasha.
Waxaad sidoo kale ka fiirsan kartaa inaad xayeysiisyada ku soo geliso muddo dheer adigoo adeegsanaya qaybo yaryar.
Qoraal ku saabsan Cloudflare
OAI-AdsBot waxaa si rasmi ah u xaqiijisay oo liiska la oggol yahay ugu dartay Cloudflare.
Su’aalaha badanaa la isweydiiyo ee ku saabsan gurguuraha iyo bogga degitaanka
Gurguurte kee ayaa looga baahan yahay dib-u-eegista xayeysiisyada?
OAI-AdsBot ayaa looga baahan yahay xaqiijinta iyo dib-u-eegista bogga degitaanka ee Xayeysiisyada ChatGPT. OAI-SearchBot waa lagu talinayaa maxaa yeelay wuxuu OpenAI ka caawin karaa inay fahanto nuxurka webka dadweynaha, laakiin OAI-AdsBot waa gurguurtaha ay xayaysiiyeyaashu mudnaanta siinayaan si xayeysiisyadu diyaar u noqdaan.
Taageeradu ma si gacanta ah bay uga boodi kartaa xaqiijinta gurguuraha?
Ha ku tiirsanaan ka-boodis gacanta ah. Ka dhig bogga degitaanka mid uu OAI-AdsBot gurguuran karo adigoo hagaajinaya xannibaadaha robots.txt, WAF, CDN, yaraynta bot-yada, xaqiijinta aqoonsiga, iyo xaddidaadda heerka. Xayeysiisyada waxaa laga yaabaa in mar kale la soo geliyo ama dib loogu gudbiyo dib-u-eegis ka dib marka bogga degitaanka la geli karo.
Maxay kooxda injineernimadaydu marka hore hubisaa?
Hubi in bogga degitaanka uu OAI-AdsBot u soo celiyo jawaab HTTP oo guul ah, in robots.txt uu oggol yahay waddada khuseysa, iyo in WAF, CDN, yaraynta bot-yada, caqabadaha JavaScript, CAPTCHA-yada, xaqiijinta aqoonsiga, ama xeerarka juqraafiyeed ay xannibaan gelitaanka otomaatiga ah iyo in kale.
Xiriiriyeyaasha app-store, deep links, ama meelaha aan web ahayn ma loo taageeraa bogag degitaan ahaan?
Isticmaal bog degitaan web oo si toos ah loo gaari karo mar kasta oo ay suurtagal tahay. Xiriiriyeyaasha app-store, deep links, dukumentiyada, ama meelaha u baahan ab, gelitaan, marin gobol gaar ah, ama wareejinno aan la taageerin waxaa laga yaabaa inaysan bixin nuxur ku filan oo la gurguuran karo si loo xaqiijiyo ama dib loogu eego.
Goormaan mar kale soo geliyaa ama dib u codsadaa dib-u-eegis?
Ka dib markaad hagaajiso gelitaanka gurguuraha, mar kale soo geli ama dib u gudbi xayeysiisyada ay saameysay haddii xaaladdu iskeed isu cusboonaysiin weydo. Xayeysiisyada tiro badan lagu soo geliyay, qaybo yaryar ayaa yareyn kara kiciyeyaasha xaddidaadda heerka ama ilaalinta bot-yada inta kooxdaadu xaqiijinayso hagaajinta.