Како да уклоните сајт или њене фрагменте из Гоогле индекса

Према концепту индексирања усвојила Гоогле, чини потпуност, објективност информација и њене сагласности за упит за претрагу у издавање резултата. Ако је индекс падне сајт са илегалног садржаја, или ресурса за спам, странице овог сајта неће бити обележен у заједничкој бази података претраживача. За нас је важно да научите како да уклоните сајт са издавањем резултата сервера претрагу.

Варијанте нула индексирање Гоогле

Када за претрагу робота - програм за прикупљање информација о новим ресурсима - ће скенирати сајта страницу по страницу, а затим, када је под Гоогле захтева смерница за рашчлањивање, то ће бити индексиране. Али ми вам показују како да уклоните свој сајт или фрагменте за претраживаче кроз роботс.ткт - индекс и тражи истовремено станици.

Да искључи из издавање ресурса у целини, у основном директоријуму сервера на којем се налази локација, ствара одређени текст област - рекао је датотека роботс.ткт. Ова зона је третиран са претраживача и делују у складу са упутствима читају.

Имајте на уму да су индекси Гоогле претраживач стране, чак и ако корисник има приступ да видите забрањен. Када је претраживач реагује са 401 или 403 "Приступ је неважећи", то се односи само на посетиоце, а не програме који окупљају за овај претраживач.

Да бисте разумели како да уклоните сајт са индексирање претраживача, текст показивач да унесете следеће редове:

Усер-агент:

Дисаллов: /

То указује на пописивач да индекса забрану свих садржаја на сајту. Ево како да уклоните сајт Гоогле, тако да она не кешира ресурс на листи од детектује.

Остварења скенирање за различите протоколе

Ако треба да листу појединачних стандарде комуникације, за које желите да примените посебна правила за индексирање на Гоогле, на пример, посебно за хипертекстуалних протокола ХТТП / ХТТПС, потребно је да се региструју у роботс.ткт на следећи начин (пример).

(Хттп://иоурсервер.цом/роботс.ткт) - назив домена вашег сајта (било који)

Усер-агент: * - било претраживач

Аллов: / - дозволити пуну индексацију

Како да уклоните сајт са питањем потпуно протоколу хттпс

(Хттпс://иоурсервер.цом/роботс.ткт):

Усер-агент: *

Дисаллов: / потпуну забрану индексирање

Убрзани уклањање УРЛ- ресурса адресе из Гоогле СЕРПс

Ако не желите да чекате на поновно индексирање, а сајт желите да сакријете као, препоручујем да ускоро користити услуге хттп://сервицес.гоогле.цом/урлцонсоле/цонтроллер могуће. Ауто датотеке роботс.ткт мора да се стави у роот директоријуму сајта сервера. Потребно је прописати одговарајуће инструкције.

Ако се показивач из неког разлога не могу да се мењају у основном директоријуму, креирајте га довољно у фасцикли са циљевима за које желите да сакријете од претраживача. Када то урадите, а односе се на услуге аутоматско уклањање хипертекстуалне адресе, Гоогле неће скенира фасцикле које написане од ману у роботс.ткт.

Период ове невидљивости је постављен за 3 месеца. Након овог периода, директоријум повучен из емисије, поново ће бити обрађен од стране Гоогле сервер.

Х ов уклонити сајт делимично скенирање

Када је претрага бот читање садржаја роботс.ткт, да одређене одлуке доносе на основу његовог садржаја. Рецимо да желите да искључите из приказује читав директоријум под називом Анатом. Довољно је да се прописати такве прописе:

Усер-агент:

Дисаллов: / анатом

Или, на пример, желите да не индекса све врсте слика .гиф. Да бисте то урадили, додајте следеће листе:

Усер-агент:

Дисаллов: /*.гиф$

Ево још једног примера. Нека се брише из разбора информације о динамички генерисане странице, додавши да тип ставке индекса:

Усер-агент:

Дисаллов: / *?

То је отприлике, а наводе се правила за претраживаче. Друга ствар је да је много једноставније да само користите овај МЕТА таг. И вебмастери често користе управо такав стандард регулише рад претраживача. Али ћемо то расправити у будућим члановима.