Robots txt как создать и как залить на хостинг?

Пошаговая инструкция: Robots txt как создать?
Сегодня поговорим о роботах ))) Какая связь роботов и сайта? А дело в том, что в сети интернет существуют виртуальные роботы. Они заползают на все сайты и анализируют их. Именно эти роботы решают появится Ваш сайт в поисковой выдаче или нет. Поэтому нам очень важно дружить с ними. Ранее я уже писала о том как подружиться с роботом Яндекса. А сегодня рассмотрим как мы можем немножечко ими «управлять».
Robots txt
Когда поисковые роботы заходят на Ваш сайт, они сперва ищут файл robots.txt. В этом файле прописана инструкция для роботов: что им можно анализировать, а что нет. Да Вы можете указать роботам, что им смотреть нельзя!
Robots txt как создать?
На самом деле Вам не нужно ничего создавать. Все уже создано для Вас. Вам нужно только немного откорректировать данный документ под Ваш сайт. Давайте приступим:
- Перейдите по моей ссылочке http://rabotamam.com/robots.txt
- Скопируйте весь код
- Откройте редактор Блокнот (Notepad)
- В последних 3-х строчках измените адрес моего сайта на Ваш. Только внимательно, не удалите окончания ссылок
- Сохраните Ваш файл robots.txt
Как загрузить файл robots.txt на хостинг?
- Заходите к себе на хостинг
- Находим раздел файловый менеджер
- Находим public_html
- Находим кнопочку «Загрузить на сервер»
- Загружаем наш файл
Все готово.
Для того, что бы убедиться, что Вы все сделали правильно, перейдите по ссылке:
http://ВАШ САЙТ/robots.txt
Если Вы все сделали верно, то Вы увидите у себя на страничке такую же картинку как у меня.
Если у Вас есть поддомены, то файл robots.txt нужно установить на каждый поддомен.
Видео унструкция как создать и как залить на хостинг файл robots.txt ?
Теперь, друзья, Вы умеете немного управлять поисковыми роботами.
Если этот урок Был для Вас полезным, нажмите кнопочки соц сетей в знак благодарности.
Успехов Вам, Ваша Анна Пацкова.