Вернуться   Дизайнерский форум » ВЕБ-ПРОГРАММИРОВАНИЕ » HTML, CSS, JavaScript

Редактирование файла robots.txt

Обсуждение темы Редактирование файла robots.txt в разделе HTML, CSS, JavaScript, часть категории ВЕБ-ПРОГРАММИРОВАНИЕ; Подскажите пожалуйста, у меня на сервере лежит файл robots.txt в нем такое содержание: User-Agent: * Disallow: Вопрос 1. Эта запись разрешает всем роботам ...


Закрытая тема
 
Опции темы
Старый 06.03.2010, 11:30   #1
Подскажите пожалуйста, у меня на сервере лежит файл robots.txt
в нем такое содержание:
User-Agent: *
Disallow:
Вопрос 1. Эта запись разрешает всем роботам индексировать все страницы сайта?
Вопрос 2. Допустим я хочу закрыть для индексации страницу mypage.html, что мне надо прописать.
Вопрос 3. Можно ли не радактировать файл robots.txt, а в самой странице mypage.html вставить нужный тег <meta>, если можно, то как этот тег тогда будет выглядеть.
Вопрос 4. Что лучше, чтобы не напрягать робота - изменить файл robots.txt или вставить тег <meta> в нужную страницу?
 
Старый 06.03.2010, 11:30
Ссылки
Старый 06.03.2010, 12:24   #2
читаем внимательно, расписано все что вам нужно знать
 
Старый 06.03.2010, 17:22   #3
Цитата:
Сообщение от sovlin Посмотреть сообщение
User-Agent: *
Disallow:
Эта запись разрешает всем роботам индексировать все страницы сайта
Цитата:
Сообщение от sovlin Посмотреть сообщение
Что лучше, чтобы не напрягать робота - изменить файл robots.txt или вставить тег <meta> в нужную страницу?
изменить файл robots.txt
 
Старый 06.03.2010, 17:22
Закрытая тема




Похожие темы
Тема Автор Раздел Ответов Последнее сообщение
редактирование PDF файла DeCa HTML, CSS, JavaScript 11 31.07.2010 15:54
robots.txt 74ivan74 Вопросы по SEO 5 21.01.2010 19:19
Robots.txt filmmix Поисковые системы 3 20.11.2009 17:16
Robots.txt Volkodavteua Поисковые системы 5 27.10.2009 12:49
Редактирование файла конфигурации. Не удается запустить скрипт. bart ASP, Perl, PHP и MySQL 11 05.08.2008 13:42


Текущее время: 16:18. Часовой пояс GMT +4.

Реклама на форуме Условия размещения рекламы
Биржа ссылок Заработай на сайте!
Дизайнерский форум