Robots.txt və sitemap.xml cavablarını yoxlayın
Saytın əsas ünvanında /robots.txt və /sitemap.xml fayllarının HTTP statusunu və mətnindən ilkin hissəni görün. Bu baxış tarama qaydalarını və xəritə ünvanlarını əl ilə nəzərdən keçirməyə kömək edir.
Saytın ictimai HTTP və ya HTTPS ünvanını daxil edin.
Alət /robots.txt və /sitemap.xml cavablarını sorğulayır.
Hər fayl üçün HTTP statusu və 12000 simvoladək mətn önbaxışı göstərilir.
Önbaxış avtomatik sintaksis yoxlaması və ya bütün URL-lərin taranması deyil.
Alt sitemap faylları ayrıca açılmır; mövcudluq indekslənmə qərarını müəyyən etmir.
Robots.txt giriş qoruması deyil; nəticə beş dəqiqə keşdə qala bilər.
Sorğu parametrləri, fraqment və giriş məlumatları olmayan açıq URL daxil edin.
Yalnız açıq HTTP/HTTPS ünvanları yoxlanılır. Vaxt, cavab ölçüsü və yönləndirmə sayı məhduddur. Nəticə zəmanət deyil.
Qaydalar və URL siyahısı ayrı vəzifələrdir
Robots.txt robotlar üçün tarama qaydaları verir. Sitemap isə səhifə ünvanlarını və ya digər xəritələrin ünvanlarını təqdim edə bilər. Faylların mətninə baxmaq saytın nəzərdə tutulan qaydaları yayımlayıb-yayımlamadığını anlamağa kömək edir.
Önbaxışda əl ilə nəyə baxmaq olar?
- HTTP cavabı və qaytarılmış faylın məzmunu
- User-agent, Allow və Disallow sətirləri
- Robots.txt daxilində xəritəyə istinadlar
- Sitemap-in URL siyahısı, yoxsa xəritə indeksi olması
Tez-tez verilən suallar
Sitemap başqa XML xəritələrinə keçid verirsə, onlar da yoxlanırmı?
Bu alət əsas /sitemap.xml mətnini göstərir və oradakı alt xəritələri avtomatik açmır. İndeksdə göstərilən xəritələri və onların səhifələrini ayrıca nəzərdən keçirmək lazımdır. Məxfi bölmələrin qorunması isə autentifikasiya ilə təşkil olunur.
Nə etmək istəyirsiniz?
Qısa təsvir və əlaqə məlumatınız başlamaq üçün kifayətdir.
info@siteman.az ↗+994 70 270 58 00