Pentru a activa Submission to Robots.txt in Magento 2, trebuie sa urmati acesti pasi:
- Autentificati-va in panoul de administrare (Admin Panel)
- Accesati Stores > Settings > Configuration si selectati XML Sitemap in fila Catalog
- Deschideti fila Search Engine Submission Settings si setati Yes in meniul dropdown Enable Submission to Robots.txt
- Click pe butonul Save Config
Configurarea Robots.txt in Magento 2
Accesati Content > Design> Configuration
In grila deschisa, gasiti linia Global, faceti click pe linkul Edit si deschideti fila Search Engine Robots
Alegeti ce Default Robots aveti nevoie din urmatoarele:
- INDEX, FOLLOW: Motoarele de cautare va vor indexa periodic paginile si vor verifica modificarile
- NOINDEX, FOLLOW: Robotii motoarelor de cautare nu va vor indexa website-ul dar va monitoriza in continuare modificarile
- INDEX, NOFOLLOW: Robotii va vor indexa magazinul o data, insa nu se vor mai intoarce pentru a urmari modificarile
- NOINDEX, NOFOLLOW: Aceasta setare va ascunde magazinul dvs. de robotii motoarelor de cautare
- In linia Edit custom instruction of robots.txt File puteti scrie instructiunile personalizate necesare. Cititi mai departe pentru a afla mai multe despre optiune.
- Daca doriti sa resetati setarile implicite, trebuie sa faceti click pe butonul Reset To Default, care va elimina toate instructiunile personalizate.
- Click pe Save Configuration pentru a aplica modificarile.
Instructiuni personalizate pentru Magento 2 robots.txt
Dupa cum am mentionat deja, puteti adauga instructiuni personalizate la configuratiile robot.txt. Mai jos, oferim exemple pe care le puteti utiliza pentru nevoile dvs.
Permiteti acces complet (Allow Full Access)
User-agent:*
Disallow:Interziceti accesul la toate folderele (Disallow Access to All Folders)
User-agent:*
Disallow: /Instructiuni implicite (Default Instructions)
Disallow: /lib/
Disallow: /*.php$
Disallow: /pkginfo/
Disallow: /report/
Disallow: /var/
Disallow: /catalog/
Disallow: /customer/
Disallow: /sendfriend/
Disallow: /review/
Disallow: /*SID=Restrictionati contul de utilizator si paginile de plata (Restrict User Account & Checkout Pages)
Disallow: /checkout/
Disallow: /onestepcheckout/
Disallow: /customer/
Disallow: /customer/account/
Disallow: /customer/account/login/Nu permiteti paginile de cautare in catalog (Disallow Catalog Search Pages)
Disallow: /catalogsearch/
Disallow: /catalog/product_compare/
Disallow: /catalog/category/view/
Disallow: /catalog/product/view/
Disallow URL Filter Searches
Disallow: /*?dir*
Disallow: /*?dir=desc
Disallow: /*?dir=asc
Disallow: /*?limit=all
Disallow: /*?mode*Restrictionarea directoarelor CMS (Restrict CMS Directories)
Disallow: /app/
Disallow: /bin/
Disallow: /dev/
Disallow: /lib/
Disallow: /phpserver/
Disallow: /pub/Nu permiteti continutul duplicat
Disallow: /tag/
Disallow: /review/Pentru a uita de erorile din indexarea Google, generati automat sitemap-urile site-ului dvs. XML. Ca urmare, veti obtine o indexare mai rapida a continutului, veti exclude paginile irelevante de la indexare, veti defini frecventa actualizarilor pentru pagini si veti obtine pozitii mai ridicate in SERP-uri.
HostX ofera cel mai bun hosting Magento si va poate asista in rezolvarea problemelor dvs., oferind servicii de gazduire sigure si de incredere. Contactati-ne pentru a afla cum solutiile noastre de gazduire Magento va pot ajuta in atingerea obiectivelor dvs.
