Z hľadiska SEO je mimoriadne dôležité nakonfigurovať súbor Magento 2 robots.txt pre váš web. Súbor robots.txt určuje, ktoré stránky webovej lokality by mali indexovať a analyzovať webové prehľadávače. Veľkú úlohu v SEO hrá súbor robots.txt.
SEO je o odosielaní správnych signálov vyhľadávacím nástrojom – a súbor robots.txt pre Magento 2 je jedným z najlepších spôsobov, ako oznámiť vyhľadávacím nástrojom svoje preferencie prehľadávania.
Čo je to Robots.txt?
Súbory robots.txt v podstate informujú prehľadávače vyhľadávacích nástrojov, ku ktorým adresám URL na vašom webe majú prístup. Ide hlavne o to, aby ste zabránili preťaženiu vašich stránok požiadavkami. Súbory Robots.txt sú určené hlavne na riadenie činností dobrých robotov, pretože zlé roboty pravdepodobne nebudú postupovať podľa pokynov. Ak chcete zabrániť prehľadávaniu webovej stránky, zablokujte ju pomocou noindex alebo chrániť stránku alebo web heslom.
Prečo je súbor Robots.txt dôležitý?
Okrem toho, že vám pomôže odkloniť prehľadávače vyhľadávacích nástrojov preč od menej dôležitých stránok na vašom webe, súbor robots.txt pre Magento 2 môže poskytnúť aj nasledujúce výhody.
- Môže to pomôcť zabrániť výskytu duplicitného obsahu. Niekedy môže vaša webová lokalita vyžadovať viac ako jednu kópiu obsahu. Ak napríklad vytvoríte verziu obsahu určenú na tlač, môžete mať dve rôzne verzie. Google má známy trest za duplicitný obsah. To vám umožní vyhnúť sa tomu.
- Pomocou Magento 2 robots.txt môžete skryť stránky vo vývoji pred indexovaním skôr, ako budú pripravené.
- Na vašom webe môžu byť aj stránky, ktoré nechcete, aby verejnosť videla – napríklad ste pridali iba jednoduchý produkt. Ďalším príkladom by mohla byť stránka s poďakovaním po tom, čo niekto nakúpil alebo sa zaregistroval. Tieto stránky by sa nemali zobrazovať vo vyhľadávači, takže pre Google alebo iné vyhľadávače je zbytočné ich indexovať.
Ako nakonfigurovať Robots.txt pre Magento 2
Ak chcete nakonfigurovať súbor robots.txt v Magento 2, postupujte podľa nasledujúcich krokov.
Krok 1: Prihláste sa do svojho Panel správcov.
Krok 2: Ísť do Obsah > Dizajn > Konfigurácia.
Krok 3: V otvorenej mriežke nájdite čiaru globálnekliknite na Upraviť odkaz a otvorte Roboty vyhľadávacích nástrojov tab.
Krok 4: Teraz si vyberte čo Predvolené roboty potrebujete z nasledujúceho:
- INDEX, SLEDOVAŤ: Vyhľadávače budú pravidelne indexovať vaše stránky a kontrolovať zmeny.
- NOINDEX, SLEDOVAŤ: Robot vyhľadávacieho nástroja nebude indexovať vašu webovú stránku, ale stále bude sledovať zmeny.
- INDEX, NOFOLLOW: Vyhľadávací robot raz indexuje váš obchod, ale nikdy sa nevráti, aby sledoval zmeny.
- NOINDEX, NOFOLLOW: Toto nastavenie skryje váš obchod pred robotmi vyhľadávacích nástrojov.
Krok 5: Riadok Upraviť vlastnú inštrukciu v riadku Súbor robots.txt vám umožňuje napísať vlastné pokyny. Ak chcete obnoviť predvolené nastavenia, kliknite na Obnoviť pôvodné nastavenia tlačidlo, ktoré odstráni všetky vaše prispôsobené pokyny
Krok 6: Kliknite na Uložiť konfiguráciu aplikujte zmeny.
Príklady vlastných pokynov pre Magento 2 Robots.txt
Ako sme uviedli vyššie, môžete definovať vlastné pokyny pre konfigurácie robot.txt Magento 2. Tu je niekoľko príkladov:
Povoliť úplný prístup
User-agent:*
Disallow:
Zakázať prístup ku všetkým priečinkom
User-agent:*
Disallow: /
Blokujte robota Google z priečinka
User-agent: Googlebot
Disallow: /podpriečinok/
Blokovať robota Google zo stránky
User-agent: Googlebot
Disallow: /subfolder/page-url.html
Predvolené pokyny
Disallow: /lib/
Disallow: /pkginfo/
Disallow: /report/
Disallow: /var/
Disallow: /katalóg/
Disallow: /zákazník/
Disallow: /recenzia/
Disallow: /*.php$
Obmedziť stránky Checkout a používateľské účty
Disallow: /checkout/
Disallow: /onestepcheckout/
Disallow: /zákazník/
Disallow: /customer/account/
Disallow: /customer/account/login/
Obmedziť stránky vyhľadávania v katalógu
Disallow: /catalogsearch/
Disallow: /catalog/product_compare/
Disallow: /catalog/category/view/
Disallow: /catalog/product/view/
Zakázať duplicitný obsah
Disallow: /tag/
Disallow: /recenzia/
Ako pridať súbor Sitemap do súboru Robots.txt v Magento 2
Sitemap je súbor XML, ktorý obsahuje zoznam všetkých webových stránok na vašom webe, ako aj metadáta (metadáta sú informácie, ktoré sa týkajú každej adresy URL). Rovnako ako funguje súbor robots.txt, mapa stránok umožňuje vyhľadávacím nástrojom prehľadávať index všetkých webových stránok na vašom webe na jednom mieste.
Umožniť Odoslať do súboru Robots.txt v Magento 2 musíte postupovať podľa týchto krokov:
Krok 1: Prihláste sa do svojho Panel správcov.
Krok 2. Prejdite na Obchody > Nastavenia > Konfigurácia a vyberte si XML Sitemap v Katalóg tab.
3. Otvorte Nastavenia odoslania vyhľadávača kartu a nastavte Áno v Povoliť odosielanie do súboru Robots.txt rozbaľovacia ponuka.
4. Kliknite na Uložiť konfiguráciu tlačidlo.
Ak chcete, aby bola táto možnosť povolená automaticky, prejdite na a v poli Upraviť vlastný pokyn súboru robot.txt nastavte pokyny na pridanie mapy lokality nasledovne:
Mapa stránok: https://magefan.com/pub/sitemaps/sitemap.xml
Mapa stránok: https://magefan.com/pub/sitemaps/blog_sitemap.xml
Mapa stránok: https://magefan.com/pub/sitemaps/sitemap_ua.xml
Mapa stránok: https://magefan.com/pub/sitemaps/blog_sitemap_ua.xml
Pre vyhľadávače to bude jednoduchšie, ak budete mať súbor robots.txt, ktorý špecifikuje najnovšiu mapu webu, namiesto toho, aby ste prehľadávali každú stránku webu a potom ich hľadali o niekoľko dní neskôr. Ak vaša stránka nefunguje dobre a webové stránky nie sú správne indexované, vaša pozícia vo výsledkoch vyhľadávača je ohrozená. Pre výkon vášho webu je tiež veľmi dôležité udržiavať web optimalizovaný a tento článok o optimalizácii rýchlosti Magento 2 vám môže ďalej pomôcť.
Teraz viete
Teraz viete, ako vytvoriť súbor Magento 2 Robots.txt pre váš web.
Ak používate Magento, zvážte plne spravovaný hosting Magento od Hostinger. Naše plány zahŕňajú lak, PHP 7+, integrovaný CDN a kompresiu obrazu pre špičkový výkon.
Využite našu bezplatnú migráciu stránok Magento a prejdite na Hostinger ešte dnes.
Ak chcete začať, preskúmajte naše plne spravované plány Magento.
