Ako odstrániť stránky alebo jej fragmenty z indexu Google

Podľa koncepcie indexovanie prijatého Googlu, predstavovali pre úplnosť, objektívnosť informácií a ich zhody s vyhľadávacím dotazom pri vydávaní výsledkov. V prípade, že index klesne webové stránky s nelegálnym obsahom, alebo zdroj pre spam, stránky tohto webu nebudú označená v spoločnom vyhľadávači databáze. Pre nás je dôležité naučiť sa , ako odstrániť stránky z vydávania výsledkov vyhľadávací server.

Varianty nulovej indexovanie Google

Akonáhle do vyhľadávacieho robota - program na zhromažďovanie informácií o nových zdrojov - bude skenovať stránku webu po stránke, potom, keď v súlade s požiadavkami politiky spoločnosti Google pre analýzu, bude indexované. Ale tiež ukážeme, ako odstrániť vaše stránky alebo fragmenty pre vyhľadávače cez robots.txt - index a hľadať zároveň doraz.

Vyradiť z vydanie prostriedku ako celku, v koreňovom priečinku servera, na ktorom sa nachádza miesto, vytvára určitú textovú oblasť - povedal robots.txt. Táto zóna je zaobchádzané s vyhľadávačov a konať v súlade s pokynmi pre čítanie.

Majte na pamäti, že indexy Google vyhľadávač stránky, aj v prípade, že používateľ má prístup k zobrazenie zakázané. Keď prehliadač reaguje s 401 alebo 403 "Prístup je neplatná", sa vzťahuje len na návštevníkov, skôr než programy, ktoré sa zhromažďujú v tomto vyhľadávači.

Aby sme pochopili, ako odstrániť stránky z indexovanie vyhľadávače, musí ukazovateľ textu zadajte nasledujúce riadky:

User-agent: Googlebot

Disallow: /

To znamená, aby prehľadávač indexovať zákaz všetkého obsahu na webe. Tu je , ako odstrániť stránky Google, takže tento neukladá do vyrovnávacej pamäte na zdroj v zozname zistených.

Vykonanie testu pre rôzne protokoly

Ak potrebujete vypísať jednotlivé komunikačné štandardy, pre ktoré chcete použiť osobitné pravidlá pre indexovanie Googlu, napríklad zvlášť pre hypertextové protokoly HTTP / HTTPS, je nutné sa zaregistrovať na robots.txt v nasledujúcom spôsobom (príklad).

(Http://yourserver.com/robots.txt) - názov domény vášho webu (akýkoľvek)

User-agent: * - ľubovoľný vyhľadávač

Allow: / - umožniť plnú valorizácii

Ako odstrániť stránky z emisie úplne protokol https

(Https://yourserver.com/robots.txt):

User-agent: *

Zakázať: / úplný zákaz indexovanie

Urýchlené odstránenie URL- prostriedku adresy z Google SERPs

Ak nechcete čakať na opätovné indexáciu, a stránky, ktoré chcete skryť, ako, odporúčam najskôr použiť servisný http://services.google.com/urlconsole/controller ako je to možné. Pre robots.txt musí byť umiestnený v koreňovom adresári servera. Mala by sa stanoviť príslušná inštrukcie.

Ak ukazovateľ z nejakého dôvodu nemožno upravovať v koreňovom adresári, vytvorte ju dosť v zložke s cieľmi, pre ktoré chcete skryť z vyhľadávačov. Akonáhle to urobíte, a odkazujú na službu automaticky odstraňuje hypertextové adresy, Google nebude skenovať zložky, ktoré detailne vysvetlené chybu v súbore robots.txt.

Doba tohto neviditeľnosti je stanovená na 3 mesiace. Po uplynutí tejto doby je adresár stiahnutý z problému bude opäť spracované serverom Google.

J a na odstránenie stránky pre skenovanie čiastočne

Pri vyhľadávaní topánok čítaní obsahu súboru robots.txt, že niektoré rozhodnutia sa prijímajú na základe jeho obsahu. Povedzme, že chcete vylúčiť zo zobrazovania celý adresár s názvom anatóm. To je dosť, aby predpísať dopĺňa:

User-agent: Googlebot

Zakázať: / anatóm

Alebo napríklad, že chcete nie je index všetky typy obrázkov GIF. Ak chcete urobiť, pridajte nasledujúci zoznam:

User-agent: Googlebot

Zakázať: /*.gif$

Tu je ďalší príklad. Nech sú odstránené z analýze informácií o dynamicky generovaných stránok, zatiaľ čo pridá k typu záznamu index:

User-agent: Googlebot

Disallow: / *?

To je asi, a vysvetľuje pravidlá pre vyhľadávačov. Ďalšia vec je, že je oveľa pohodlnejšie jednoducho používať túto značku META. A webmasteri často používajú práve takéto normy upravujúce fungovanie vyhľadávačov. Ale my budeme diskutovať v ďalších článkoch.