АРМАДА
Ограничений в файле robots.txt в Google, в чем причина?
Новая тема Написать ответ

jusava1982 + +
Опытный
Зарегистрирован: 20.12.2012
Сообщений: 120
Обратиться по нику
# Добавлено:Чт Июл 04, 2013 5:50 pmДобавить в избранноеОтветить с цитатой
Мой сайт не индексируется в Google, система выдает ошибку "Описание веб-страницы недоступно из-за ограничений в файле robots.txt.".

Содержимое моего файла robots.txt :

User-agent: Yandex
Disallow:
HOST: vipremont.at.ua

User-agent: *
Disallow:


В может быть чем причина?

EdwardSn +
Профессионал
Зарегистрирован: 22.11.2009
Сообщений: 965
Обратиться по нику
# Добавлено:Чт Июл 04, 2013 6:44 pmОтветить с цитатой
Ну так очевидно, что командой User-agent: * Disallow: запрещено индексирование всего сайта
Обзор интернета

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 12046
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Чт Июл 04, 2013 6:50 pmОтветить с цитатой
jusava1982, удали все из robots.txt, если нужно какие-то папки закрыть от индексации, укажи только:

User-agent: *
Disallow: \folder\
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

xmod
Свой
Зарегистрирован: 26.12.2012
Сообщений: 28
Обратиться по нику
# Добавлено:Чт Июл 11, 2013 2:20 amОтветить с цитатой
EdwardSn писал(а):
Ну так очевидно, что командой User-agent: * Disallow: запрещено индексирование всего сайта



User-agent: *
Disallow: /
Всем роботам доступ закрыт

User-agent: *
Disallow:
Всем роботам доступ открыт

http://www.robotstxt.org/robotstxt.html


Yabuti писал(а):
jusava1982, удали все из robots.txt, если нужно какие-то папки закрыть от индексации, укажи только:

User-agent: *
Disallow: \folder\



Слеши прямые , а не обратные
User-agent: *
Disallow: /folder/

Удивляюсь, что людей с таким статусом нужно корректировать по таким вопросам
SeoDor - нормальный дорген. -20% , в личку.
SEO-хостинг, VPS, выделенные сервера для SeoDora и других

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 12046
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Чт Июл 11, 2013 10:21 amОтветить с цитатой
xmod, :oldher:
И на старуху бывает проруха, я их постоянно путаю.
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

Longer
V.I.P.
Зарегистрирован: 09.10.2007
Сообщений: 2782
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Чт Июл 11, 2013 10:34 amОтветить с цитатой
xmod писал(а):


Удивляюсь, что людей с таким статусом нужно корректировать по таким вопросам



:baaa: Красавец.

Домен же на юкозе, давно карантин сняли?
Если да - была ли переиндексация после этого?
Прогони домен по популярным блог платформам, чтобы быстро бота завлечь, но эти ошибки бывает долго-долго чистят. Добавь домен в GWT и проверь вручную есть ли ошибки сканирования и доступа.
Серверы и XEN ВПС с бесплатным 24/7 Администрированием
Превосходное решение для мобильного трафика. Мысли глобально - лей на Bizzclick!
Новая тема Написать ответ    ГЛАВНАЯ ~ ПОИСКОВЫЕ СИСТЕМЫ

Перейти:  





Генеральный спонсор



Партнеры