"Bot musunuz" ekranı səhifələri Google-dan silə bilər | SEO

"Bot musunuz" ekranı (bot-yoxlama və ya CAPTCHA ekranı) botları süzgəcdən keçirmək üçün göstərilən aralıq səhifədir. Əgər Google botu bu ekranı gerçək məzmun kimi indeksləyirsə, saytınızın əsl kontenti indeksdən düşə və başqa sayt kanonik seçilə bilər.

"Bot musunuz" ekranı nədir?

"Bot musunuz" ekranı avtomatlaşdırılmış trafiki və zərərli botları bloklamaq üçün istifadə olunan aralıq təsdiq səhifəsidir. Adətən CAPTCHA, JavaScript problemi və ya təhlükəsizlik provayderinin (məsələn CDN səviyyəsində) yoxlama mərhələsi kimi görünür. İnsan istifadəçi üçün bu tez keçən mərhələ olsa da, Google-un tarayıcısı üçün ciddi problem yarada bilər.

Google-dan John Mueller izah edib ki, əgər Googlebot səhifəyə daxil olduqda gerçək məzmun əvəzinə bu yoxlama ekranını görürsə, məhz həmin ekranın mətni indekslənə bilər. Nəticədə saytın əsl dəyərli məzmunu axtarış nəticələrində görünmür.

Bu problem SEO-ya necə zərər verir?

Ən böyük risk kanonik seçimlə bağlıdır. Eyni "bot musunuz" mətni yüzlərlə fərqli saytda göstərildiyi üçün Google bu təkrarlanan məzmunu duplikat kimi qəbul edə bilər. Bu zaman Google bir mənbəni kanonik seçir və çox güman ki, bu mənbə sizin saytınız olmayacaq.

• Googlebot əsl HTML əvəzinə yoxlama ekranının mətnini indeksləyir.
• Eyni ekran mətni bir çox saytda təkrarlandığı üçün duplikat məzmun problemi yaranır.
• Google başqa saytı kanonik URL kimi seçə bilər, sizin səhifə isə indeksdən düşür.
• Trafik və reytinq düşür, çünki gerçək məzmun axtarış nəticəsində yoxdur.
• Problemi aşkarlamaq çətindir, çünki brauzerdə sayt normal görünür.

Problemi necə aşkarlamaq olar?

Bu vəziyyətin ən təhlükəli tərəfi onun gizli qalmasıdır. İstifadəçi saytı adi brauzerdə açanda hər şey qaydasında görünür, çünki yoxlama ekranı yalnız şübhəli və ya avtomatlaşdırılmış sorğular üçün işə düşür. Ancaq Googlebot bəzən bu ekranla üzləşir.

Aşkarlamaq üçün Google Search Console-da URL Inspection alətindən istifadə edin və Google-un gördüyü render olunmuş HTML-ə baxın. Əgər orada gerçək məzmun əvəzinə "bot musunuz" və ya təhlükəsizlik təsdiqi mətni görürsünüzsə, problem məhz budur.

• Search Console-da URL Inspection ilə render olunmuş HTML-i yoxlayın.
• Googlebot user-agent ilə səhifəni test edərək yoxlama ekranının çıxıb-çıxmadığını görün.
• CDN və təhlükəsizlik provayderinin bot qaydalarını nəzərdən keçirin.
• Server loglarında Googlebot-a verilən cavab kodlarını izləyin.

Bu vəziyyəti necə həll etmək olar?

Həll yolu Googlebot-un təsdiqlənmiş və qanuni tarayıcı kimi tanınmasını təmin etməkdir. Təhlükəsizlik sistemlərində Google-un rəsmi bot diapazonlarını (IP və user-agent əsaslı) ağ siyahıya salmaq lazımdır ki, tarayıcı yoxlama ekranı ilə deyil, birbaşa əsl məzmunla üzləşsin.

• Googlebot-u DNS və IP əsaslı təsdiqlə ağ siyahıya salın.
• Aqressiv bot bloklama qaydalarını yalnız zərərli botlara yönəldin.
• JavaScript əsaslı yoxlamaların axtarış motorlarını bloklamamasına diqqət edin.
• Dəyişikliklərdən sonra Search Console-da yenidən indekslənməni tələb edin.

Tez-tez verilən suallar

"Bot musunuz" ekranı bütün saytlara zərər verirmi?

Xeyr. Problem yalnız o zaman yaranır ki, Googlebot əsl məzmun əvəzinə yoxlama ekranını görsün. Əgər tarayıcı düzgün tanınır və ekran ona göstərilmirsə, indeksləmə normal davam edir.

Bu problemi Google avtomatik həll edirmi?

Xeyr, Google avtomatik həll etmir. Sayt sahibi təhlükəsizlik konfiqurasiyasını düzəltməli və Googlebot-un məzmuna sərbəst çıxışını təmin etməlidir. Sonra yenidən indeksləmə tələb olunur.

Yoxlama ekranı indeksləndiyini necə bilə bilərəm?

Search Console-un URL Inspection alətində render olunmuş HTML-ə baxın. Orada gerçək məzmun deyil, təhlükəsizlik təsdiqi mətni görünürsə, ekran indekslənib deməkdir.

Saytpro ilə texniki SEO auditindən keçin və indeksləmə problemlərini həll edin: 1300 AZN-dən, Birkart/Tamkart ilə 0% faizlə, 6 aya qədər. Pulsuz məsləhət al.