Robots.txt ellenőrzés
Adja meg webhelye URL-jét, és azonnal megtudja, hogy a robots.txt megfelelően van-e beállítva, és nem akadályozza-e a keresőmotorokat a fontos oldalak indexelésében.
Mit ellenőriz az eszköz
- A robots.txt fájl megléte és elérhetősége
- Allow / Disallow szabályok és a botokat blokkoló szakaszok
- Főbb botok hozzáférése (Googlebot, Bingbot, stb.)
- XML sitemapra mutató hivatkozás a robots.txt-ben
- Gyakori hibák: véletlenül blokkolt teljes webhely vagy CSS/JS fájlok
Miért fontos
A robots.txt az első fájl, amelyet a keresőmotor egy webhelyen olvas be. Egyetlen hibás szabály, például a „Disallow: /”, képes az egész webhelyet kizárni az indexből. A sitemapra mutató hivatkozás hiánya viszont lelassítja az új oldalak felfedezését. A helyes beállítás megkíméli a crawl budgetet, és a megfelelő irányba tereli a botokat.
Részletes útmutató a súgóbanGyakori kérdések
Mi az a robots.txt?
Egy szöveges fájl a webhely gyökerében (pl. example.com/robots.txt), amely megmondja a keresőrobotoknak, hogy a webhely mely részeit szabad bejárniuk és melyeket nem.
Kizárhatja a robots.txt a webhelyet a Google-ból?
Igen. A „Disallow: /” szabály megtiltja az egész webhely bejárását. Az érintett oldalak általában kiesnek az indexből, vagy nem frissülnek.
Kötelező a sitemapra hivatkozni a robots.txt-ben?
Nem kötelező, de ajánlott. A „Sitemap: https://example.com/sitemap.xml” sor segít a keresőmotoroknak gyorsabban megtalálni az összes oldalt.
Értékelje ezt az eszközt
Kapcsolódó eszközök
Szeretne teljes SEO + GEO webelemzést?
Futtassa le mind a 20 ellenőrzést egyszerre, kövesse a pozíciókat a Google-ön és a Seznamon, és kapjon fejlesztési javaslatokat.
Teljes elemzés indítása