Для исключения определенных страниц сайта ftp.site.ru из результатов поиска, воспользуйтесь следующими методами:
1. Файл robots.txt:
Создайте или отредактируйте файл robots.txt в корне поддомена ftp.site.ru, чтобы запретить индексацию определенных страниц поисковыми системами:
```
User-agent: *
Disallow: /путь-к-исключаемой-странице/
```
Запрет на индексацию конкретного URL можно сделать с помощью подобной записи:
```
User-agent: *
Disallow: /путь-к-исключаемой-странице.html
```
2. Мета-теги:
Добавьте мета-тег 'noindex' в HTML-код страниц, которые нужно исключить из поисковой выдачи:
```html
<head>
<meta name="robots" content="noindex">
</head>
```
Также, если у вас есть доступ к серверу FTP, возможно реализовать механизм отправки HTTP-заголовка X-Robots-Tag с инструкцией 'noindex' для отдельных файлов или целой директории.
Чтобы удалить страницы поддомена из поисковой выдачи Google, следуйте этим шагам:
1. Верификация поддомена в Google Search Console:
Вам нужно добавить и верифицировать ftp.site.ru как отдельный ресурс в Google Search Console. Это может потребовать добавления специального тега, файла проверки или DNS-записи. Верификация поддомена позволит вам управлять его индексацией.
2. Использование инструмента по удалению URL:
Как только поддомен будет верифицирован, вы сможете использовать Google Search Console чтобы запросить удаление URL с вашего FTP-сервера, используя инструмент "Удаление URL". Зайдите в Google Search Console для вашего ftp-сайта, перейдите в "Удаление URL" и введите адрес страницы, которую хотите удалить.
3. Ожидание:
После подачи запроса на удаление и закрытия страниц от индексации, Google переиндексирует ваш сайт и исключит закрытые страницы из результатов поиска. Это может занять некоторое время, в зависимости от того, как часто боты Google посещают ваш сайт.
Помните, что даже после удаления страниц из индекса и кеша Google, они всё ещё могут быть доступны по прямым ссылкам, если они существуют в Интернете и не закрыты для доступа на уровне сервера.