Úprava súboru robots.txt.liquid

Vyhľadávače, ako napríklad Google, neustále prehľadávajú internet a hľadajú nové údaje ako zdroj pre svoje výsledky vyhľadávania. Súbor robots.txt hovorí botom vyhľadávačov (známym ako prehľadávače), ktoré stránky vášho online obchodu si majú vyžiadať na zobrazenie. Všetky obchody Shopify majú predvolený súbor robots.txt, ktorý je optimálny pre optimalizáciu pre vyhľadávače (SEO).

Vašu mapu stránok používajú vyhľadávače na umiestnenie vášho online obchodu do výsledkov vyhľadávania. Zistite, ako nájsť a odoslať svoju mapu stránok.

Na tejto stránke

Rozdiel medzi prehľadávaním a indexovaním

Pri práci so súborom robots.txt je dôležité pochopiť rozdiel medzi prehľadávaním a indexovaním:

Prehľadávanie: Keď boty vyhľadávačov (napríklad Googlebot) preskúmajú všetok obsah a kód na vašich stránkach a analyzujú ho
Indexovanie: Keď sa stránky stanú oprávnenými zobrazovať sa vo výsledkoch vyhľadávania

Tieto procesy sa navzájom nevylučujú – vyhľadávače môžu indexovať stránku bez toho, aby ju prehľadali, ak ju objavia iným spôsobom.

Dôležité informácie

Predvolený súbor robots.txt funguje pre väčšinu obchodov. Ak chcete súbor robots.txt prispôsobiť, musíte najprv v editore kódu pridať súbor robots.txt.liquid do priečinka templates (šablóny) svojej témy a následne prispôsobiť obsah tohto súboru. Môžete vykonať nasledujúce úpravy:

Povoliť alebo zakázať prehľadávanie určitých adries URL.
Pridať pravidlá oneskorenia prehľadávania pre určité prehľadávače.
Pridať ďalšie adresy URL máp stránok.
Blokovať určité prehľadávače.

Súbor robots.txt sa nachádza v koreňovom adresári primárneho názvu domény vášho obchodu Shopify. Napríklad: example.com/robots.txt.

Úprava súboru robots.txt.liquid

Ak chcete upraviť súbor robots.txt.liquid, mali by ste spolupracovať s Partnerom Shopify alebo mať odborné znalosti v oblasti úprav kódu a SEO.

Pomocou jazyka Liquid môžete pridať alebo odstrániť direktívy zo šablóny robots.txt.liquid. Tento spôsob zachováva schopnosť služby Shopify udržiavať súbor v budúcnosti automaticky aktualizovaný a je odporúčaný. Celého sprievodcu úpravou tohto súboru nájdete na stránke pre vývojárov Shopify v časti Prispôsobenie súboru robots.txt.liquid.

Pred úpravou súboru robots.txt.liquid odstráňte všetky predchádzajúce prispôsobenia alebo riešenia, ako napríklad použitie služby tretej strany, napríklad Cloudflare.

Postup:

V administrátorovi Shopify prejdite na Online obchod > Témy.
Pri príslušnej téme kliknite na … > Upraviť kód.
Kliknite na Pridať novú šablónu a potom vyberte možnosť robots.
Kliknite na Vytvoriť šablónu.
Vykonajte požadované zmeny v predvolenej šablóne. Ďalšie informácie o premenných jazyka Liquid a bežných prípadoch použitia nájdete na stránke pre vývojárov Shopify v časti Prispôsobenie súboru robots.txt.liquid.
Uložte zmeny súboru robots.txt.liquid vo svojej publikovanej téme.

Zmeny sú okamžité, ale prehľadávače nie vždy reagujú hneď. Zmeny môžete otestovať pomocou nástroja na testovanie súborov robots.txt od Googlu.

Obsah šablóny môžete tiež odstrániť a nahradiť ho pravidlami v obyčajnom texte. Táto metóda sa dôrazne neodporúča, pretože pravidlá môžu zastarať. Ak si vyberiete tento spôsob, spoločnosť Shopify nemôže zaručiť, že sa na váš súbor robots.txt budú v priebehu času uplatňovať osvedčené postupy v oblasti SEO, ani v ňom nebude môcť vykonávať zmeny pri budúcich aktualizáciách.

Význam správ „Indexované, hoci blokované“

V službe Google Search Console sa adresy URL môžu zobrazovať ako „indexované, aj keď sú zablokované súborom robots.txt“. Ide o normálne správanie, ktoré zvyčajne nie je dôvodom na obavy.

Prečo k tomu dochádza

Mnoho stránok je z dôvodu optimalizácie SEO úmyselne blokovaných súborom robots.txt. Touto správou vám Google dáva vedieť, že objavil blokovaný obsah pre prípad, že by išlo o neúmyselné zablokovanie. Všetko, čo sa nachádza v predvolenom súbore robots.txt v službe Shopify, je tam z určitého dôvodu a má to pomôcť vašej stratégii SEO.

Ak sa štandardná stránka na vašom webe (napríklad vaša domovská stránka) zobrazuje ako „Indexované, hoci blokované“, zvyčajne to znamená, že údaje spoločnosti Google o vašom obchode sú neaktuálne. Môže trvať dni, týždne alebo mesiace, kým Google do svojej databázy zavedie najnovšie zmeny akejkoľvek webovej stránky.

Čo by ste mali urobiť

Vo väčšine prípadov nie sú potrebné žiadne kroky. Toto správanie sa očakáva pri stránkach, ktorých prehľadávanie by malo byť zablokované, no aj napriek tomu sa môžu indexovať prostredníctvom iných metód zisťovania.

Riadenie prístupu prehľadávačov s umelou inteligenciou

Ak predávate prostredníctvom agentných webových obchodov, ako sú napríklad ChatGPT alebo Microsoft Copilot, vaše produktové údaje sa do týchto kanálov syndikujú prostredníctvom služby Shopify Catalog nezávisle od súboru /robots.txt. Prehľadávače s umelou inteligenciou môžu k vášmu obchodu pristupovať aj priamo cez otvorený web. Prístup prehľadávačov má nasledujúce dve vrstvy riadenia:

Sieťová vrstva: Správa botov sa pre obchody v službe Shopify zabezpečuje priamo a z vašej strany nie sú potrebné žiadne kroky. Spoločnosť Shopify neodporúča konfiguráciu proxy servera pred platformou Shopify a k takémuto nastaveniu neposkytuje podporu.
Vrstva /robots.txt: Môžete povoliť alebo zablokovať prehľadávače s konkrétnym používateľským agentom tým, že prispôsobíte šablónu obchodu robots.txt.liquid. Pravidlá, ktoré nastavíte v súbore /robots.txt, sú orientačné a odporúčacie, pričom nie je zaručené, že sa nimi budú riadiť všetky prehľadávače.

Blokovanie prehľadávačov s umelou inteligenciou v súbore /robots.txt alebo na sieťovej vrstve ovplyvňuje iba dohľadateľnosť na otvorenom webe. Nezabráni to odosielaniu vašich produktových údajov zo služby Shopify Catalog do agentových webových obchodov, ktoré ste si aktivovali. Ak chcete spravovať, čo služba Shopify Catalog zdieľa s agentovými webovými obchodmi, pozrite si časť Informácie o nastaveniach agentových webových obchodov.

Predvolený súbor robots.txt v službe Shopify

Predvolený súbor robots.txt služby Shopify obsahuje špecifické pravidlá na optimalizáciu SEO vášho obchodu. Tu sú uvedené funkcie niekoľkých kľúčových záznamov:

Disallow: /admin – Zabraňuje prehľadávaniu stránok administrátora, pretože boty k nim aj tak nemajú prístup.
Disallow: /cart – Stránky košíka sa nemusia indexovať, pretože sú pre každého zákazníka jedinečné.
Disallow: /checkout – Stránky pokladne sa nemusia prehľadávať ani indexovať.
Disallow: /collections/*+* – Zabraňuje indexovaniu filtrovaných stránok kolekcie, čím by mohli vznikať problémy s duplicitným obsahom.
Disallow: /search – Stránky s výsledkami vyhľadávania sa nemusia prehľadávať.
Disallow: /policies/ – Automaticky generované stránky zásad sú v obchodoch podobné a nepotrebujú sa indexovať.

Tieto pravidlá pomáhajú vyhľadávačom zamerať sa na jedinečný a hodnotný obsah, a nie na administratívne alebo duplicitné stránky.

Odstrániť prispôsobenia súboru robots.txt.liquid

Ak chcete znova použiť predvolený súbor robots.txt, môžete odstrániť svoj vlastný súbor robots.txt.liquid.

Postup:

V administrátorovi Shopify prejdite na Online obchod > Témy.
Kliknite na > Upraviť kód.
Kliknite pravým tlačidlom myši na robots.txt.liquid a v rozbaľovacej ponuke vyberte možnosť Natrvalo odstrániť.
Kliknite na Odstrániť.

Súbor robots.txt.liquid môžete v budúcnosti kedykoľvek upraviť. Ak ste si uložili minulé prispôsobenia, môžete svoje zmeny zopakovať tak, že skopírujete svoje predchádzajúce uložené prispôsobenia.