Как установить robots.txt

В этой статье поговорим о том, для чего нужен файл robots.txt на вашем сайте и как его установить. Этот файл непосредственно нужен для вашего сайта, так же вносит свой плюс в оптимизацию вашего ресурса. Заходя на сайт, роботы поисковых систем индексируют его. О том что такое индексация сайта, можете прочитать ТУТ. Файл robots.txt помогает роботам лучше индексировать ваш сайт, в то же время этот файл не даёт поисковым роботам индексировать какие либо ваши личные данные и т.д. Этот файл необходим вашему сайту.

Где же взять этот файл и как его установить?

Всё довольно просто и я попытаюсь без лишних слов объяснить вам как его установить словами обычного человека.

Итак, где взять этот файл? Вы можете найти его и скачать в поисковике Яндекса, либо создать его сами. Лично я его скачивал на свой сайт, а потом переделывал на тот, о котором я щас говорю. Создать его очень просто, на картинке ниже показан один из лучших составленных файлов robots.txt

robots

Можете составить его так же как и на картинке в Блокноте. Именно в нем, у него формат .txt который нам и нужен. После того как составили или скачали файл robots.txt обязательно переименуйте его. Название у него должно быть robots именно так. Важно в последних строках указать url вашего сайта, а не тот что на картинке.

роботс

Устанавливаем robots.txt на сайт

Для этого нам нужно зайди в панель управления, но панель управления ни вашим сайтом, а панель управления вашего хостинга. Я пользуюсь хостингом Sprinthost и речь идёт по установке файлов именно на нём. Если вам интересно что такое хостинг и вы хотели бы выбрать себе хостинг, вам СЮДА.

Заходим в панель управления Спринтхост и выбираем Файловый менеджер

спринтхост

Находим и выбираем public html

панель спринтхост

После находим название url вашего сайта и заходим туда. Там вы увидите кучу непонятных вам файлов. В этом разбираться не нужно. Спускаетесь в самый низ и увидите Загрузить файлы в текущую директорию, нажимайте.

 

загрузить в спинтхост

 

 

Выбираем файл robots.txt и нажимаем загрузить файлы. После этого высветится уведомление о том, что операция выполнена. Теперь ваш файл robots.txt можно увидеть среди множества файлов которые мы видели чуть раньше.

Важная часть. Если вы решили сами создать файл robots у вас не должно возникнуть ни одного пробела между буквами и т.д. Если будет хоть один пробел файл не будет работать. Сделайте всё как на картинке.

Узнайте как сделать семантическое ядро вашего сайта, жмите. И не заблудитесь на нашем сайте, карта сайта в помощь.

Если возникают, какие то вопросы, спрашивайте, не стесняйтесь.

Сохраните эту статью себе!

Опубликовать в Одноклассники
Опубликовать в Google Plus
Опубликовать в Google Buzz
Опубликовать в LiveJournal
Опубликовать в Мой Мир
Опубликовать в Яндекс

Вы можете оставить комментарий, или ссылку на Ваш сайт.

Оставить комментарий