Robots.txt по-русски!

Как работать с файлом robots.txt, частые ошибки, часто задаваемые вопросы. Роботы Рунета.
Официальные лица
x  или  xСортировка:  x  x  x

124

голоса

Спасибо! Отличный сайт. Даже мне, человеку далекому от программирования, все стало понятно.
Официальный ответ
, 17.06.2011
Спасибо, приятно читать!
hannakash, 20.05.2011, 16:38
2 комментария

28

голосов

здоровья тебе, боярин
здоровья, счастья, успехов, да разносолов поболе в погребке, с нове годе !
Официальный ответ
Спасибо большое! :)
Феликсъ, 04.01.2012, 21:50
нет комментариев

19

голосов

Дополнить разделы
Обновить раздел Yandex и прочие. А также создать разделы по CMS.
, 17.06.2011, 02:31
нет комментариев

4

голоса

Запретить к индексации все файлы кроме одного Это довольно непросто, т.к. не существует инструкции “Allow”. В другом источние встретил что она существует???
“Allow” существует -robotsexclusion/guide
olg, 28.01.2013, 22:30
нет комментариев

3

голоса

Молодцы! Спасибо! Переделал, посмотрю на результат!
Константин, 22.05.2013, 10:53
нет комментариев

3

голоса

Спасибо!
Отличный проект с доступной информацией!
Антон, 11.08.2013, 12:25
нет комментариев

2

голоса

Переверните смайлик на кнопке 'Оставьте свой отзыв!' :) А то смайлик не воспринимается как смайлик
Предлагаю перевернуть смайлик. Обычно смайлики располагаются в прямом положении - "улыбка горизонтальна, низ внизу", либо в наиболее распространённом "правом положении" - "улыбка вертикальна, низ справа" -...
Алексей, 16.09.2013, 14:40
нет комментариев

2

голоса

Как снять деньги с сайта помощью
Помоги мне, пожалуйста, ждали в течение трех дней и не вышел
givi, 15.02.2014, 13:36
нет комментариев

1

голос

Спасибо!Все ясно, четко и лаконично!
Спасибо!Все ясно, четко и лаконично! Занимаюсь продвижением меньше месяца, но никак не могла понять как правильно заполнять этот файл. Большой и жирный плюс за наглядные примеры!)
Анна, 21.05.2013, 15:06
нет комментариев

1

голос

есть ли возможность, чтобы в поисковиках на конкретные ссылки не выходили результаты, что бы не индексировались определенные страницы? К сайтам у меня, доступа, нет.
Есть ли возможность, чтобы в поисковиках на конкретные ссылки не выходили результаты, что бы не индексировались определенные страницы? К сайтам у меня, доступа, нет.
Роман, 15.11.2013, 11:04
нет комментариев

1

голос

Хотим скоро о вас написать пост
Хотим скоро о вас написать пост сюда: и сюда: Сможете в ответ дать ссылку на нас? Спасибо за сайт!
DeN Vugadanuy, 03.02.2014, 22:37
нет комментариев

0

голосов

Узко-направленный, но информативный сайт)
Уже внедряю в свои сайты
Gr, 21.03.2014, 20:26
нет комментариев

27

голосов

Спасибо за помощь! Очень выручили!
Нашел на вашем сайте все необходимое для робота Яндекса, а то до этого творилось непонятное!!!
Официальный ответ
, 07.09.2011
Пожалуйста! :-)
, 07.09.2011, 17:50
1 комментарий

25

голосов

Создать группу
А также в других социальных сетях: , и т.д.
Официальный ответ
, 07.09.2011
— группа
— страница
, 01.06.2011, 06:27
нет комментариев

15

голосов

опечатка 'goggle' rurobots
subj
Официальный ответ
, 13.08.2011
Спасибо! Исправлено. Если найдете еще опечатки — буду рад поправить :-)
qoolek, 12.07.2011, 18:02
2 комментария

9

голосов

Полезный сайт,продолжай в том же духе,по чаще обновляйся))
Goood Site Man)
Официальный ответ
, 05.09.2012
Спасибо!
АНдрей, 05.09.2012, 16:04
нет комментариев

7

голосов

А где блог проекта?
Сабж, и что туда писать?
Официальный ответ
blog/
, 01.06.2011, 06:28
нет комментариев

7

голосов

устаревшая информация про валидность тега
надо пометить что Яндекc теперь поддерживает валидный вариант тега -
Официальный ответ
, 04.08.2011
Алексей, а где эта инфа, напомни :)
Потому как тут все написано: rurobots/yandex#HTML-_ltnoindexgt
Alexey Barykin, 04.08.2011, 11:01
1 комментарий

6

голосов

Спасибо,как раз надо продвигать сайт онлайн-игры.Посмотрел видео,сам все разобрался.И Сделал :)
Спасибо,как раз надо продвигать сайт онлайн-игры.Посмотрел видео,сам все разобрался.И Сделал :)+ Запретил в директории лазить.
Официальный ответ
Пожалуйста!
Даниил Патин, 11.04.2012, 10:46
нет комментариев

6

голосов

Спасибо, очень помог сайт, хотел сделать сайт, и нужна была копия его для тестирования, но поисковик бы забанил бы сайт за дубликат, и я его закрыт от индексации
Официальный ответ
Пожалуйста!
mixail_fet, 30.07.2012, 00:18
нет комментариев

4

голоса

Поменяйте местами ссылки
На главной странице сделайте ЧаВо по веб-роботам первым в ссылках. А то я сначала прочитал половину не понимая первые три ссылки и только в 4 начал понимать что же говорилось в предыдущих трех. А так спасибо. Оч полезный ресурс
Официальный ответ
Привет! Сейчас все так и есть.
Марат, 27.12.2012, 14:59
нет комментариев