Почему сайт индексируется

[justmary31]

-1

Здравствуйте! Хотела проверить, есть ли мой сайт в поиске Яндекс. В поисковой строке вбила url:yugbiznes.com*. В роботс.тхт у меня закрыт сайт от индексации.(User-agent: * Disallow: /), а в яндексе выдает следующий результат.(2 строки в поиске) Что это значит? Почему он проиндексировался? Что сделать, чтобы он перестал индексироваться? Или так и должно быть?

[lokdown]

Доброго вечера. Директива в robots.txt у вас указана корректная. Яндекс мог подтянуть 2 страницы вашего сайта в момент когда эта директива ещё не была выставлена в robots.txt

На данный момент ничего делать для удаления страницы из индекса не требуется, т.к раз директива на данный момент стоит то повторного обхода данного урла роботом не произойдет.
По прошествии какого-то времени её просто вымоет из индекса и все.

Поддомен который вы представили в фотографии на данный момент не находится в индексе поисковой системы. Просто подождите какое-то время (Около месяца) , и он должен удалится из кеша поиска.

[justmary31]

Доброго вечера. Директива в robots.txt у вас указана корректная. Яндекс мог подтянуть 2 страницы вашего сайта в момент когда эта директива ещё не была выставлена в robots.txt

На данный момент ничего делать для удаления страницы из индекса не требуется, т.к раз директива на данный момент стоит то повторного обхода данного урла роботом не произойдет.
По прошествии какого-то времени её просто вымоет из индекса и все.

Поддомен который вы представили в фотографии на данный момент не находится в индексе поисковой системы. Просто подождите какое-то время (Около месяца) , и он должен удалится из кеша поиска.

Спасибо)А как Вы определили, что он не индексируется? Или я Вас не так поняла? Т.е. домен индексируется, а поддомен, который второй в поиске не индексируется?

[lokdown]

На данный момент в индексе по запросам которые вы указали на фото:
url:yugbiznes.com - находится только главная страница сайта
site:yugbiznes.com - также только главная страница сайта без поддомена.

Директива которая указана у вас в Robots.txt корректная и страница скоро пропадет из поисковой выдачи. Так что ждите апдейтов яндекса)