При копировании материала с этой страницы вы обязаны установить ссылку на нее согласно ч.4 Гражданского Кодекса РФ об интеллектуальных правах. В случае нарушения данного требования кража контента будет преследоваться по закону.
Учебник ucoz
Суббота, 27.05.2017, 01:46
Приветствую Вас Гость | RSS
 
Главная РегистрацияВход
Учебник ucoz
Форма входа
Главная » 2011 » Август » 23 » Как создать robots. Создание файла robots.txt для сайта ucoz.
16:23
Как создать robots. Создание файла robots.txt для сайта ucoz.
Как создать robots.txt знает не каждый начинающий web-мастер. Об этом наша статья.

Файл robots.txt создается на основе простого текстового файла, например в Блокноте. Для того, чтобы создать robots.txt нужно открыть программу Блокнот и сохранить файл с названием, состоящим из маленьких букв: robots.txt. Далее этот файл следует закачать при помощи ftp-менеджера на сайт.

Что должно быть внутри файла robots.txt? Для чего служит этот файл?

Файл robots.txt разрешает или запрещает поисковому роботу индексировать те или иные страницы или разделы сайта, иногда весь сайт целиком.

Вновь созданные сайты ucoz, для которых создается файл robots.txt находятся примерно 1 месяц на так называемом карантине, поэтому что бы вы ни прописали в файле robots.txt для такого сайта. там будет независимо прописываться:

User-agent: *
Disallow: /

Что означает: всем поисковым машинам запрещено индексировать все страницы сайта.

То есть disallow - запретить к индексации.
Когда пройдет месяц, файл robots.txt можно будет отредактировать.

Обычно я прописываю robots.txt так:

User-agent: *
Allow: /
Allow: /index
Allow: /news
Disallow: /stuff
Disallow: /admin
Host: polza.my1.ru
Sitemap: http://polza.my1.ru/sitemap.xml
Вы можете разрешить или запретить другие разделы. 

Обычно запрещают к индексации разделы с неуникальной информацией, например, онлайн-игры или тесты для ucoz.

Также запрещают к индексации страницу регистрации, входа в админ-панель...



Категория: Оптимизация и раскрутка | Просмотров: 3110 | Добавил: admin | Теги: сайт, robots.txt, Robots, ucoz | Рейтинг: 5.0/1
Добавлять комментарии могут только зарегистрированные пользователи.
[ Регистрация | Вход ]
Поиск
Обучение
Хостинг, домены [15]
Заработок [14]
Шаблоны, скрипты [12]
Оптимизация и раскрутка [50]
Реклама [4]
Поисковики [14]
Блоги [7]
Видеоуроки [5]
Программирование [3]
WEB-дизайн [6]
CMS [7]
Игры [1]
Архив записей
Статистика

Онлайн всего: 1
Гостей: 1
Пользователей: 0
Copyright polza.my1.ru © 2017
Бесплатный хостинг uCoz