.htaccess vasitəsilə saxta Googlebotları aşkarlayıb bloklama, saytınıza Googlebot kimi təqdim olunan zərərli botları istifadəçi agenti, IP yoxlaması və giriş qeydlərinə əsaslanaraq ayırmaq və həqiqi Google tarayıcılarını təsir etmədən 403 cavabı ilə dayandırmaq prosesidir. Ən etibarlı üsul yalnız User-Agent dəyərinə güvənməyib, Google-ın rəsmi IP diapazonlarını və ya tərs DNS yoxlamasını referans götürmək, əvvəlcə qeydə almaq, sonra isə nəzarətli .htaccess qaydaları ilə bloklamaqdır.
Bir çox hücum edən botlar, təhlükəsizlik divarlarını və sadə bot filtrlərini keçmək üçün özünü Googlebot, Google-InspectionTool, AdsBot-Google və ya Googlebot-Image kimi təqdim edir. Çünki sayt sahibləri adətən Google taramasını bloklamaq istəmirlər. Bu boşluq məzmun oğurluğu, yüksək resurs istehlakı, saxta trafik, forma spamları, giriş cəhdləri və SEO məlumatlarının pozulması kimi problemlərə səbəb olur. Xüsusilə paylaşılan hostinglər, WordPress, WooCommerce, xəbər saytları və tez-tez yenilənən bloqlarda bu trafik qısa müddətdə CPU, RAM və I/O limitlərini sıxışdıra bilər. Bu bələdçi sizə saxta Googlebot davranışlarını necə təhlil etməyi, Apache .htaccess ilə necə təhlükəsiz qaydalar yazmağı və həqiqi Googlebotu yanlışlıqla bloklamamaq üçün hansı yoxlamaları etməli olduğunuzu addım-addım izah edəcək. Veb saytınız üçün təhlükəsiz, sürətli və miqyaslana bilən infrastruktur istəyirsinizsə, Hostragons veb hosting həlləri və SSL sertifikatı qurulması məzmunlarını planınıza əlavə edə bilərsiniz.
Sahte Googlebot Nədir və Niyə Təhlükəlidir?
Sahte Googlebot, HTTP sorğusunda User-Agent sahəsini Googlebot kimi göstərən, lakin Google-a aid olmayan IP ünvanlarından gələn avtomatlaşdırılmış tarayıcıdır. User-Agent, istifadəçinin özünü təqdim etdiyi sadə bir mətn sahəsidir; yəni texniki cəhətdən hər kəs sorğusuna Googlebot yazaraq özünü təqdim edə bilər. Buna görə yalnız User-Agent yoxlaması təhlükəsizlik baxımından kifayət deyil.
Gerçək Googlebot-un məqsədi saytınızı taramaq, indeksə əlavə etmək, səhifə yenilənmələrini aşkar etmək və axtarış nəticələri üçün keyfiyyət siqnalları toplamaqdır. Sahte Googlebot isə çox vaxt fərqli məqsədlərlə fəaliyyət göstərir. Məsələn, məhsul qiymətlərini çəkmək, məzmununuzu kopyalamaq, idarəetmə paneli URL-lərini yoxlamaq, axtarış səhifələrinizə yüklənmə yaratmaq və zəif plugin boşluqları üçün tarama aparmaq kimi. Bəzi hücumçular saniyədə onlarla sorğu göndərərək kiçik bir saytda belə performans azalmasına səbəb ola bilərlər.
Praktikada saxta botları ən çox aşağıdakı əlamətlərlə görürük:
- Qısa müddətdə yüzlərlə 404, 403 və ya 500 cavabı verən sorğular.
- wp-login.php, xmlrpc.php, admin, phpmyadmin, backup.zip kimi həssas yol və faylların taranması.
- User-Agent Googlebot kimi göstərilsə də, IP ünvanının Google ASN və ya rəsmi IP diapazonlarında olmaması.
- Robots.txt qaydalarına riayət etmədən filtr, axtarış, səbət və hesab səhifələrinin gəzinməsi.
- Normal Googlebot-dan fərqli olaraq, eyni URL-lərin çox yüksək tezliklə sorğulanması.
Niyə Yalnız User-Agent Yoxlaması Kifayət Etmir?
Bir botun HTTP başlığında Googlebot yazması onun Google-a aid olduğunu sübut etmir. Məsələn, komanda sətrindən tək bir curl sorğusu ilə User-Agent asanlıqla təqlid edilə bilər. Buna görə .htaccess-də yalnız Googlebot ifadəsini tutub bütün sorğuları bloklamaq və ya buraxmaq səhv olar. Birincisi, həqiqi Googlebot-un taramasını kəsə bilər, ikincisi isə hücumçulara açıq qapı yaradar.
2024-2026 SEO və təhlükəsizlik yanaşmasında düzgün strategiya üç qatlıdır: iddia olunan kimliyi yoxlamaq, IP və ya DNS ilə doğrulamaq, anormal davranışları loglarla izləmək. Bu yanaşma həm Google görünürlüğünüzü qoruyur, həm də server resurslarınızı lazımsız botlardan təmizləyir.
Həqiqi Googlebot Necə Doğrulanır?
Google, həqiqi tarayıcılarını yoxlamaq üçün iki əsas üsul təklif edir: tərs DNS yoxlaması və rəsmi IP diapazonları. Tərs DNS üsulunda sorğunu edən IP ünvanının domeni googlebot.com və ya google.com ilə bitməli, sonra həmin domen təkrar həmin IP-yə həll olunmalıdır. Bu iki istiqamətli yoxlama yalnız saxta PTR qeydi ilə aldatılmanın qarşısını alır.
İkinci üsul, Google-ın yayımladığı rəsmi IP diapazonlarından istifadə etməkdir. Googlebot üçün xüsusi tarayıcılar və istifadəçi tetikleməli botlar üçün fərqli JSON siyahıları mövcuddur. Xüsusilə dinamik siyahılar zamanla dəyişə biləcəyi üçün istehsal mühitində əl ilə yazılmış köhnə IP siyahılarına uzun müddət güvənmək düzgün deyil. VPS və ya server idarəçiliyi sizdədirsə, bu siyahıları müəyyən aralıqlarla çəkib firewall və ya Apache include faylı kimi yeniləmək ən sağlam yanaşmadır. Paylaşılan hosting istifadəçiləri isə idarəetmə panelindəki giriş qeydləri, .htaccess və varsa təhlükəsizlik modulundan nəzarətli şəkildə istifadə edə bilərlər.
.htaccess ilə Saxta Googlebotların Bloklanması Prinsipi
.htaccess, Apache veb serverində qovluq səviyyəsində qaydalar təyin etməyə imkan verir. URL yönləndirmə, giriş nəzarəti, sıxılma, keşləmə və əsas təhlükəsizlik məhdudiyyətləri üçün istifadə olunur. Saxta Googlebotların bloklanmasında .htaccess-in vəzifəsi gələn sorğunu müəyyən şərtlərlə qiymətləndirib şübhəli olanı 403 Forbidden cavabı ilə dayandırmaqdır.
Amma vacib bir məhdudiyyət var: Standart .htaccess təkbaşına real vaxt tərs DNS sorğusu etmək üçün ideal deyil. Apache-də HostnameLookups performans səbəbindən adətən deaktiv olur. Buna görə .htaccess-də ən praktik üsul User-Agent sahəsində Googlebot olduğunu iddia edən sorğuları IP allowlist ilə müqayisə etmək və ya şübhəli yolları daha sərt filtrləməkdir. Daha inkişaf etmiş yoxlama üçün WAF, server firewall, CDN və ya loglardan alimentasiya olunan avtomatlaşdırma istifadə olunur. CDN nədir və veb saytının performansına təsiri məzmunu bu qatmanı planlamaqda kömək edə bilər.
Addım-addım Təlimat: Saxta Googlebotları Aşkarlayıb Bloklama
1. Giriş Qeydlərini Yoxlayın
Bloklama qaydası yazmazdan əvvəl ən azı 24-72 saatlıq access logları incələyin. Trafikiniz yüksəkdirsə, bir saatlıq loglar belə kifayət qədər siqnal verə bilər. Diqqət etməli olduğunuz sahələr IP ünvanı, tarix, soruşulan URL, HTTP status kodu, byte ölçüsü, referer və User-Agent məlumatıdır. Məsələn, eyni IP 10 dəqiqədə 800 sorğu göndərir, çoxu 404 cavabı alır və özünü Googlebot kimi təqdim edirsə, bu güclü şübhə siqnalıdır.
cPanel və ya oxşar idarəetmə panellərində Raw Access Logs bölməsindən logları yükləyə bilərsiniz. SSH girişiniz varsa, Googlebot iddialı sorğuları grep, awk və sort kimi alətlərlə IP əsaslı sıxlığı müəyyən edə bilərsiniz. Məqsəd Googlebot yazan hər sorğunu deyil, bu iddiaya sahib IP-lərin davranışını izləməkdir.
2. Googlebot İddialı IP-ləri Doğrulayın
Şübhəli IP-ləri müəyyən etdikdən sonra tərs DNS və irəli DNS yoxlaması aparın. Bir IP üçün PTR qeydi crawl-66-249-66-1.googlebot.com kimi görünürsə, ilkin mərhələ keçilir. Sonra həmin domen təkrar həll edilərək eyni IP-yə qayıtmalıdır. Əgər PTR qeydi yoxdursa, fərqli domenə gedirsə və ya irəli həll eyni IP-ni vermirsə, həmin IP həqiqi Googlebot sayılmamalıdır.
Bu yoxlama, xüsusilə SEO baxımından kritik saytlarda səhv bloklamanın qarşısını alır. Çünki həqiqi Googlebot-un bloklanması yeni məzmunların gec aşkar olunmasına, indeks yeniliyinin azalmasına, Google Search Console-da tarama səhvlərinə və orqanik trafikin itirilməsinə səbəb ola bilər. Buna görə bloklama qərarını təkcə User-Agent qaydası ilə deyil, doğrulama prosesi ilə vermək lazımdır.
3. Əvvəlcə Qeydə Alın, Sonra Bloklayın
Təhlükəsiz əməliyyatlarda birbaşa bloklama yerinə qısa müşahidə mərhələsi tövsiyə olunur. İlk mərhələdə şübhəli IP-ləri və User-Agent-ları qeyd edin. İkinci mərhələdə yalnız açıq şəkildə zərərli davranış göstərən yolları məhdudlaşdırın. Üçüncü mərhələdə Googlebot iddiasında olub Google IP diapazonunda olmayan sorğuları bloklayın.
Bu yanaşma xüsusilə e-ticarət saytları üçün vacibdir. Çünki səhv qayda ödəniş, səbət, məhsul variantları və ya stok inteqrasiyası kimi kritik axınları poza bilər. Əgər saytınız yüksək trafik alırsa, əvvəlcə test mühitində yoxlayın. WordPress sayt köçürməsi və test mühiti yaratma kimi proseslər təhlükəsizlik qaydası dəyişikliklərini daha risksiz edir.
Təhlükəsiz .htaccess Qaydası Nümunələri
Aşağıdakı nümunələr istehsal mühitinə birbaşa əlavə edilməzdən əvvəl serverinizin Apache versiyası, aktiv modullar və hosting icazələri baxımından test edilməlidir. Apache 2.4 və mod_rewrite geniş yayılmışdır; lakin bəzi paylaşılan mühitlərdə bəzi direktivlər məhdudlaşdırıla bilər. .htaccess faylını dəyişməzdən əvvəl mütləq ehtiyat nüsxəsini alın. Fayldakı kiçik sintaksis səhvi saytınızda 500 Internal Server Error yarada bilər.
Sadə Davranış Filtri: Həssas Yollarda Saxta Botları Dayandırmaq
Bu yanaşma Googlebot kimi görünən botların idarəetmə və hücum məqsədli fayllara girişini əngəlləyir. Həqiqi Googlebot-un wp-login.php, phpmyadmin və ya ehtiyat zip fayllarını taraması lazım deyil. Bu səbəbdən yanlış pozitiv riski azdır.
- RewriteEngine On
- RewriteCond %{HTTP_USER_AGENT} (Googlebot|Google-InspectionTool|AdsBot-Google|Mediapartners-Google) [NC]
- RewriteCond %{REQUEST_URI} (wp-login[.]php|xmlrpc[.]php|phpmyadmin|adminer|backup|[.]sql|[.]zip) [NC]
- RewriteRule ^ - [F,L]
Bu qayda özünü Googlebot kimi təqdim edən istifadəçinin həssas yollara girişinə 403 qaytarır. SEO taramasına təsiri azdır, çünki bu yolların Google indeksinə daxil olması adətən istənilmir. Yenə də WordPress istifadə edirsinizsə, təhlükəsizlik pluginləri, XML-RPC ehtiyacı və uzaq yayım xidmətləri baxımından yoxlama aparmaq lazımdır.
IP Allowlist Yanaşması: Googlebot İddiasını Rəsmi Diapazonlarla Müqayisə Etmək
Daha güclü üsul Googlebot olduğunu iddia edən sorğunu yalnız etibarlı IP diapazonlarından gəlirsə buraxmaqdır. Aşağıdakı nümunə prinsipini göstərir; IP diapazonlarını Google-ın aktual rəsmi siyahısına görə hazırlamalısınız. Köhnə və ya natamam siyahı həqiqi Googlebot-u səhvən bloklaya bilər.
- RewriteEngine On
- RewriteCond %{HTTP_USER_AGENT} (Googlebot|Googlebot-Image|Googlebot-News|Google-InspectionTool|AdsBot-Google) [NC]
- RewriteCond expr "! ( %{REMOTE_ADDR} -ipmatch '66.249.64.0/19' || %{REMOTE_ADDR} -ipmatch '64.233.160.0/19' || %{REMOTE_ADDR} -ipmatch '72.14.192.0/18' )"
- RewriteRule ^ - [F,L]
Buradakı IP diapazonları nümunə üçündür. İstehsal mühitində Google-ın rəsmi googlebot IP JSON siyahısından avtomatik yaradılmış diapazonlar istifadə edilməlidir. Əgər Apache ifadəsi və ya -ipmatch serverinizdə dəstəklənmirsə, hosting təminatçınızdan Apache 2.4 ifadə dəstəyini təsdiqləyin. Alternativ olaraq, CDN/WAF qatında IP siyahısı ilə qayda yarada bilərsiniz.
Şübhəli Sorğu Sürətinin Azaldılması
.htaccess birbaşa inkişaf etmiş rate limit üçün ən yaxşı vasitə deyil; amma bəzi pis davranışları erkən kəsməkdə faydalıdır. Həqiqi sürət limiti üçün mod_evasive, mod_security, CDN sürət məhdudlaşdırması və ya tətbiq səviyyəli qoruma istifadə olunmalıdır. Xüsusilə saniyədə 5-10-dan çox davamlı sorğu göndərən botlar, kiçik saytlarda belə verilənlər bazası sorğularını artırır. WordPress kimi dinamik sistemlərdə axtarış səhifəsi, filtrli kateqoriya və etiket səhifələri botlar tərəfindən istismar edilə bilər. Bu sahələrdə robots.txt, canonical, noindex və təhlükəsizlik qaydaları birlikdə düşünülməlidir. WordPress sürət optimizasiyası bələdçisi performans tərəfini tamamlayır.
Müqayisə Cədvəli: Hansı Metod Nə Zaman İstifadə Olunmalıdır?
| Metod | Güclü Tərəfi | Zəif Tərəfi | Tövsiyə Olunan İstifadə |
|---|---|---|---|
| Yalnız User-Agent yoxlaması | Quraşdırılması çox asandır | Asanlıqla təqlid olunur, səhv qərar riski yüksəkdir | Tək başına tövsiyə edilmir; yalnız ilkin filtr kimi istifadə olunur |
| Tərs DNS yoxlaması | Həqiqi Googlebot-un yoxlanmasında etibarlıdır | .htaccess-də praktik deyil, avtomatlaşdırma tələb edir | Log analizi, WAF və ya server tərəfində yoxlamada istifadə olunur |
| Google IP allowlist | Sürətli və tətbiq oluna bilən bloklama təmin edir | List yenilənməzsə səhv pozitivlər yaranır | Apache, firewall və ya CDN qaydalarında idealdır |
| Davranış əsaslı bloklama | Həssas yolları və hücum nümunələrini qoruyur | Kimlik doğrulaması etmir | wp-login, xmlrpc, ehtiyat fayllar və admin taramalarında effektivdir |
| CDN/WAF qoruması | Rate limit, bot skoru və mərkəzi qayda idarəetməsi təklif edir | Səhv konfiqurasiya halında real istifadəçiləri təsir edə bilər | Yüksək trafik, e-ticarət və korporativ saytlarda tövsiyə olunur |
Həqiqi Googlebot-u Səhvən Bloklamamaq üçün Yoxlama Siyahısı

Saxta Googlebotları bloklayarkən ən böyük risk həqiqi Google tarayıcılarını da bloklamaqdır. Bu riski azaltmaq üçün hər dəyişiklikdən sonra qısa yoxlama siyahısını tətbiq edin:
- Google Search Console Tarama Statistikaları hesabatında ani azalma və ya 403 artımı olub-olmadığını yoxlayın.
- Server qeydlərində həqiqi Google IP-lərindən gələn sorğulara 200, 301 və ya uyğun status kodlarının qaytarıldığını araşdırın.
- robots.txt faylınızın Googlebot-a bağlı olan kritik qovluqlar istisna olmaqla giriş icazəsi vermədiyinə əmin olun.
- .htaccess dəyişikliklərindən əvvəl və sonra sayt xəritəsi, ana səhifə, kateqoriya və əsas məhsul səhifələrini test edin.
- İstifadə etdiyiniz IP siyahısının mənbəyini və yenilənmə tarixini sənədləşdirin.
Texniki SEO baxımından 403 cavabı güclü siqnal hesab olunur. Həqiqi Googlebot vacib səhifələrdə təkrar 403 görərsə, həmin URL-lərin taranması azala bilər. Buna görə 403 yalnız mütləq istəmədiyiniz botlara və həssas yollara tətbiq edilməlidir. Baxım, müvəqqəti yüksək yüklənmə və ya sürət limiti kimi hallarda 429 Too Many Requests bəzi hallarda daha uyğun ola bilər; lakin .htaccess ilə sadə bot bloklamada 403 daha geniş yayılmış və aydın cavabdır.
WordPress və E-Ticarət Saytları üçün Əlavə Tədbirlər
WordPress saytlarında saxta Googlebot trafiki əsasən xmlrpc.php, wp-login.php, REST API son nöqtələri, axtarış URL-ləri və müəllif arxivləri üzərində cəmləşir. E-ticarət saytlarında isə filtr parametrləri, stok sorğuları, səbət son nöqtələri və məhsul variantları hədəflənir. Buna görə yalnız Googlebot təqlidi edənləri deyil, ümumi bot gigiyenasını da nəzərə almalısınız.
- Giriş səhifəsi üçün iki faktorlu doğrulama və cəhd limiti tətbiq edin.
- İstifadə etmədiyiniz XML-RPC funksiyalarını bağlayın və ya məhdudlaşdırın.
- Axtarış və filtr URL-lərində noindex, canonical və robots.txt strategiyalarını birlikdə planlaşdırın.
- Aktual PHP versiyası, yenilənmiş tema və etibarlı pluginlərdən istifadə edin.
- SSL sertifikatınızı aktiv saxlayın; təhlükəsiz sessiya və forma ötürülməsi üçün HTTPS zəruridir. Hostragons SSL sertifikatları
- Domaininizin DNS qeydlərini müntəzəm yoxlayın; səhv DNS və zəif e-poçt qeydləri təhlükəsizlik riskini artırır. domain sorğulama və DNS idarəsi
Performans Təsiri: Bot Trafiki Server Resurslarını Necə İstifadə Edir?
Bot trafiki yalnız təhlükəsizlik problemi deyil, həm də hosting performans problemi yaradır. Statik bir şəkil sorğusu az resurs tələb edir, amma WordPress axtarış nəticəsi və ya WooCommerce filtr sorğusu verilənlər bazası sorğusu yaradaraq server yükünü artırır. Saxta Googlebot dəqiqədə 300 dinamik sorğu göndərirsə, keşlənməyən səhifələrdə PHP işçiləri dolur, verilənlər bazası bağlantıları artır və real istifadəçilər gecikmə yaşayır.
Sadə misal: Bir məhsul filtr səhifəsi orta hesabla 250 ms PHP emal vaxtı sərf edirsə, dəqiqədə 600 bot sorğusu 150 saniyəlik emal yükü yaradır. Bu paralel işlədikdə CPU limitinə yaxınlaşır və TTFB dəyərləri yüksəlir. Core Web Vitals baxımından yavaş server cavabı dolayı yolla istifadəçi təcrübəsi və dönüşüm nisbətlərinə mənfi təsir göstərir. Buna görə botların bloklanması yalnız təhlükəsizlik komandası üçün deyil, həm də SEO və performans optimizasiyasının vacib hissəsidir.
Test Etmə: Qaydalarınız İşləyirmi?
.htaccess qaydasını əlavə etdikdən sonra üç test aparın. Birincisi, adi brauzerlə saytınızın ana səhifəsini, əsas kateqoriya səhifələrini və giriş axınlarını yoxlayın. İkincisi, Google Search Console URL Yoxlama alətində vacib URL-ləri canlı test edin. Üçüncüsü, loglarda Googlebot User-Agent ilə gələn şübhəli IP-lərin 403 aldığını, həqiqi Google doğrulamasından keçən IP-lərin isə bloklanmadığını yoxlayın.
Komanda sətrindən test aparırsınızsa, özünüzü Googlebot kimi təqdim edə bilərsiniz; amma bu test həqiqətən Googlebot olduğunuzu təsdiqləməz, yalnız User-Agent hissəsinin tetiklenib tetiklenmədiyini göstərir. Əsas yoxlama IP və DNS vasitəsilə aparılmalıdır. Testdən sonra 500 xətası alırsınızsa, .htaccess faylınızda sintaksis səhvi ola bilər. Belə halda son əlavə etdiyiniz sətirləri geri alın, xəta qeydlərini yoxlayın və serverinizin dəstəklədiyi Apache direktivlərini təsdiqləyin.
Baxım Planı: Qaydalar Nə Qədər Tez Yenilənməlidir?
Bot bloklaması təkcə bir dəfə edilən iş deyil. Google IP diapazonları dəyişə bilər, hücumçuların User-Agent nümunələri yenilənə bilər və saytınızın URL strukturu zamanla dəyişə bilər. Aşağı trafikli saytlarda ayda bir log yoxlaması kifayət edir. Yüksək trafikli xəbər, e-ticarət və kampaniya saytlarında isə həftəlik yoxlama daha faydalıdır. Böyük layihələrdə avtomatik xəbərdarlıq sistemi qurmaq ən yaxşı yanaşmadır; məsələn, Googlebot User-Agent-ı daşıyan amma doğrulanmayan IP-lərdən gələn sorğu sayı müəyyən həddi keçdikdə bildiriş yaradıla bilər.
Həmçinin .htaccess faylınızı versiyalaşdırın. Sadəcə tarixli ehtiyat nüsxə saxlamaq belə problem yarandıqda geri dönüşü sürətləndirir. Məsələn htaccess-2024-06-15.bak kimi fayl adları ilə dəyişiklik tarixçəsi saxlaya bilərsiniz. Əgər bir neçə adam sayt idarə edirsə, qayda əlavə edən şəxs nəyi niyə əlavə etdiyini qısa qeydlərlə sənədləşdirməlidir ki, mümkün fasilələr azalsın.
Nəticə
.htaccess ilə saxta Googlebotları aşkarlayıb bloklamaq düzgün tətbiq edildikdə həm SEO görünürlüğünüzü qoruyur, həm də server resurslarınızı zərərli botlardan təmizləyir. Əsas prinsip aydındır: User-Agent tək sübut deyil; IP, DNS, davranış analizi və log yoxlaması birlikdə dəyərləndirilməlidir. Əvvəl müşahidə edin, sonra az riskli yolları məhdudlaşdırın, ən sonunda isə aktual Google IP siyahıları ilə doğrulama əsaslı bloklama tətbiq edin.
Hostragons infrastrukturunda saytınızı yerləşdirərkən təhlükəsiz hosting, aktual SSL, düzgün DNS və müntəzəm ehtiyat nüsxə kimi qatları birlikdə planlamaq uzunmüddətli daha stabil veb təcrübəsi təmin edir. İstəsəniz mövcud saytınızın bot trafiyini analiz etməklə başlaya, ehtiyac olduqda Hostragons Hosting Paketləri vasitəsilə daha güclü və təhlükəsiz quruluş seçə bilərsiniz.
Tez-tez Verilən Suallar
Saxta Googlebot həqiqi Google sıralamamı təsir edirmi?
Dolayı yolla bəli. Saxta Googlebot server resurslarını sərf edərsə, həqiqi istifadəçilər və Googlebot daha gec cavab alar. Həmçinin log və analiz məlumatlarını çirkləndirərək SEO qərarlarınızı yanıltmaq riski var. Düzgün bloklama tarama büdcəsini və performansı qorumağa kömək edir.
.htaccess ilə bütün Googlebot User-Agent-larını bloklamaq düzgündürmü?
Xeyr. Bu yanaşma həqiqi Googlebot-u da bloklaya bilər və indeksləşdirmə problemlərinə səbəb olar. Googlebot yazan sorğular əvvəlcə IP və ya DNS ilə təsdiqlənməli, saxta olduğu müəyyən edilənlər bloklanmalıdır. Ən etibarlı üsul allowlist və davranış əsaslı qaydaların birlikdə istifadəsidir.
Googlebot IP siyahılarını nə qədər tez-tez yeniləməliyəm?
Yüksək trafikli saytlar üçün həftəlik, daha kiçik saytlar üçün aylıq yoxlama tövsiyə olunur. Ən yaxşı yol Google-ın rəsmi IP JSON mənbələrindən avtomatik siyahı çıxarmaqdır. Əl ilə yazılmış köhnə IP diapazonları zamanla natamam qalır və həqiqi Googlebot-un səhvən bloklanmasına səbəb olur.
.htaccess qaydası əlavə etdikdən sonra 500 xətası aldım, nə etməliyəm?
500 xətası adətən sintaksis səhvi, dəstəklənməyən Apache direktivi və ya səhv qaçış xarakterindən qaynaqlanır. Son əlavə etdiyiniz qaydaları geri alın, xəta qeydlərini yoxlayın və hosting mühitinizin Apache 2.4, mod_rewrite və ifadə dəstəyini təsdiqləyin. Dəyişiklikdən əvvəl .htaccess ehtiyat nüsxəsi almaq çox vacibdir.
CDN və ya WAF istifadə edirəmsə, .htaccess qaydasına ehtiyac varmı?
CDN və WAF bot filtrləmə üçün güclü qatdır; amma .htaccess hələ də ehtiyat və tətbiqə yaxın qoruma təmin edə bilər. Ən yaxşı nəticə CDN/WAF üzərində rate limit və bot yoxlaması, serverdə isə həssas yollar üçün .htaccess məhdudiyyətləri birlikdə tətbiq edildikdə alınır.