
Jurnal
Google NotebookLM, istifadəçinin tələbi ilə işə düşən (user-triggered fetcher) süni intellekt alətidir. İstifadəçi bir URL əlavə etdikdə Google-Notebook adlı agent həmin veb səhifənin məzmununu oxuyur və heç bir keçid attributu vermədən analiz üçün istifadə edə bilir.
Search Engine Journal-ın xəbərinə görə, Google öz istifadəçi-tetikli fetçerlərinin (user-triggered fetchers) siyahısını NotebookLM ad dəyişikliyini əks etdirmək üçün yeniləyib. Bu o deməkdir ki, əvvəllər köhnə user-agent adını robots.txt faylında və ya server konfiqurasiyasında sabit (hardcoded) qeyd etmiş sayt sahibləri üçün cəmi bir neçə həftəlik keçid müddəti (grace period) qalır. Bu müddət bitdikdən sonra köhnə user-agent işləməyəcək və sayt sahibləri idarəetməni itirə bilər.
NotebookLM fetçeri Google-un istifadəçi əməliyyatı nəticəsində aktivləşən məzmun oxuma agentidir. Adi crawler-lərdən fərqli olaraq bu agent avtomatik indeksləmə üçün deyil, istifadəçi konkret bir mənbə əlavə edəndə işə düşür. Nəticədə sizin məzmununuz AI cavablarında istinadsız (zero attribution) istifadə oluna bilər.
Əgər siz robots.txt faylında və ya firewall qaydalarında köhnə user-agent adını sabit qeyd etmisinizsə, ad dəyişikliyindən sonra qaydanız artıq tanınmayacaq. Bu, iki fərqli risk yaradır: biri məzmununuzun istəmədiyiniz halda AI tərəfindən oxunması, digəri isə əvvəllər qoyduğunuz məhdudiyyətlərin işləməz hala gəlməsidir.
Bakıda fəaliyyət göstərən korporativ saytlar və onlayn satış platformaları üçün bu, xüsusilə vacibdir. Unikal məzmun, məhsul təsvirləri və bloq yazıları rəqəmsal aktivdir və onların necə istifadə olunduğuna nəzarət brend dəyərinin qorunması deməkdir.
İdarəetmə üçün ilk addım robots.txt faylınızı yeniləmək və yeni Google-Notebook user-agent adını daxil etməkdir. Ancaq bunun texniki nüansları var, çünki user-triggered fetçerlər bəzi hallarda standart crawl qaydalarından fərqli davranır.
Ənənəvi Googlebot səhifələri indeksləyir və axtarış nəticələrində keçid göstərir, yəni siz trafik qazanırsınız. AI fetçerlər isə məzmunu birbaşa cavab formalaşdırmaq üçün oxuya bilər və istifadəçini sizin sayta yönləndirmədən nəticə təqdim edə bilər. Bu, məzmun sahibləri üçün trafik itkisi mənasına gəlir.
Bəli, robots.txt faylında yeni Google-Notebook user-agent adı üçün disallow qaydası əlavə edərək girişi məhdudlaşdıra bilərsiniz. Lakin user-triggered fetçerlər üçün əlavə server səviyyəli qorumalar tövsiyə olunur.
Google bir neçə həftəlik keçid müddəti təyin edib. Bu müddət bitdikdən sonra köhnə ad tanınmayacaq, ona görə də qaydalarınızı indi yeniləmək lazımdır.
Birbaşa axtarış reytinqinə təsir etmir, çünki bu fetçer indeksləmə üçün deyil. Ancaq məzmununuzun AI cavablarında istinadsız istifadəsi uzunmüddətli trafik strategiyanıza təsir göstərə bilər.
Saytpro ilə saytınızı AI skreypinqinə qarşı düzgün konfiqurasiya edin və SEO-fokuslu memarlıq qurun: 1300 AZN-dən, Birkart/Tamkart ilə 0% faizlə, 6 aya qədər. Pulsuz məsləhət al.

Tehran Bayramov
Təsisçi, SaytPro