Robots.txt & Sitemap Generator
Create and download robots.txt rules and sitemap.xml in a few clicks.
robots.txt
User-agent: *
Allow: /
Disallow: /wp-admin/
Disallow: /cart
Disallow: /checkout
Sitemap: https://ornek.com/sitemap.xmlRobots.txt & Sitemap Generatoru nədir?
Bu alət axtarış sistemlərinə saytınızın hansı hissələrini tarayacaqlarını bildirən robots.txt faylını və bütün vacib səhifələrinizi sadalayan sitemap.xml faylını bir neçə kliklə yaradır. Düzgün konfiqurasiya tarama büdcənizi səmərəli istifadə etməyə kömək edir.
Necə istifadə olunur?
- 1Robots.txt üçün icazəli/qadağan yolları və sitemap ünvanını daxil edin.
- 2Sitemap üçün səhifə ünvanlarınızı (hər sətirə bir URL) əlavə edin.
- 3Yaranan robots.txt və sitemap.xml fayllarını yükləyib saytınızın kök qovluğuna qoyun.
Nəticəni necə oxumalı?
Nə vaxt istifadə etməli?
Fərdi Sistemli Sayt Buraxılışı
WordPress kimi hazır modulları olmayan xüsusi saytlarda axtarış botlarının kök qovluğu və səhifələri ilk gündən düzgün indeksləməsini təmin etmək üçün istifadə olunur.
E-ticarətdə Tarama Büdcəsi
Süzgəclər, axtarış nəticələri və səbət kimi dəyərsiz səhifələri robots.txt ilə bağlayaraq, yalnız əsas məhsul URL-lərini sitemap vasitəsilə Google-a ötürməyə kömək edir.
Canlı Yayıma Keçid Səhvləri
Test serverindən əsas domənə köçürülən layihələrdə unudulmuş Disallow kodunu vaxtında təmizləyərək saytın axtarış sistemlərindən tamamilə silinmə təhlükəsinin qarşısını dərhal alır.
Tez-tez edilən səhvlər
CSS və JS Bloklamaq
Robots.txt daxilində skript və dizayn qovluqlarını bağlamaq Google-un səhifəni vizual render etməsinə mane olur. Botların üslub və skript fayllarına girişinə icazə verməlisiniz.
Xətalı URL-ləri Xəritəyə Salmaq
Sitemap içinə 404 xətası verən, yönləndirilən və ya noindex qoyulmuş səhifələri yazmayın. Xəritədə yalnız indekslənməli olan 200 status kodlu kanonik URL-lər yer almalıdır.
Çəp Xəttin Nəzərdən Qaçması
Disallow: /bloq yazdıqda bloq-yazisi kimi URL-lər də bloklanır. Yalnız həmin qovluğu bağlamaq üçün qaydanın sonuna mütləq çəp xətt əlavə edin: Disallow: /bloq/.
Tez-tez verilən suallar
Robots.txt nəyə yarayır?
Robots.txt axtarış botlarına saytınızın hansı hissələrini taraya biləcəklərini bildirir; lazımsız və ya şəxsi səhifələri bloklamaq tarama büdcəsini qoruyur.
Sitemap niyə lazımdır?
Sitemap bütün vacib səhifələrinizi axtarış sistemlərinə bir faylda təqdim edir; xüsusən yeni və ya az linklənmiş səhifələrin daha tez kəşf olunmasına kömək edir.
Faylları hara yükləməliyəm?
Hər iki fayl kök qovluqda olmalıdır: site.com/robots.txt və site.com/sitemap.xml. Sitemap-i Search Console-a da əlavə edin.
Bir XML xəritəsinə ən çox neçə səhifə əlavə etmək olar?
Tək bir sitemap.xml faylı maksimum 50.000 URL və sıxılmamış vəziyyətdə 50 MB həcm tuta bilər. Əgər saytınızda səhifə sayı bu həddi aşırsa, URL-ləri bir neçə xəritəyə bölməli və onları ümumi sitemap_index.xml faylında birləşdirməlisiniz.
Robots.txt faylında edilən dəyişikliklər nə vaxt qüvvəyə minir?
Dəyişikliklər adətən axtarış botları faylı yenidən oxuduqda, yəni bir neçə saatdan bir neçə günədək müddətdə aktivləşir. Google Search Console-un daxilindəki yoxlama aləti vasitəsilə yeni faylı dərhal sınaqdan keçirib tətbiq olunma prosesini sürətləndirə bilərsiniz.