Сайт пол года не индексируется! Что делать? Хостинг: hostenko

[bonobo]

Сайт пол года не индексируется! Что делать? Хостинг: hostenko

Приветствую! У меня есть

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

, которым я много занимался и он как минимум пол года назад поставлен в очередь на индексирование, но до сих пор не проверен основным роботом яндекс и гугл. В файле роботс стоит переадресация и что ни делай она не исчезает. Сегодня написал в службу поддержки яндекс, в гугл не знаю как написать.
В настройках сайта в read запрета на индексирлвание нет! В коде - тоже.

Хостинг: hostenko

"Файл robots.txt не будет учтён роботом Яндекса, т.к. при запросе выполняется перенаправление."

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Что делать???.....

 

[alex444]

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

User-Agent:
*Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Sitemap:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Sitemap:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Что делать?
1. Убрать из robots.txt переадресацию индексатора на

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

, (который, кроме всего прочего, ещё и не существует, и Вам не принадлежит, и более того - предъявляемый сайтом

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

сертификат - невалиден, так что искренне не советую переводить Ваш сайт на https с данным сертификатом);
2. убрать оттуда же несуществующую в стандарте команду *Allow ;
3. прописать таки тип юзерагента *


p.s. горе от ума? (это помимо небрежности с пропущенной буквой в url сайта в директиве Host, и поставленным "не там, где надо" переводом строки в user-agent). Ну какое нахрен "Host:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

", когда ты собираешься индексировать

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

и robots находится на

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

???????

 

[alex444]

так. Вижу по Вашему robots.txt, что часть ошибок Вы убрали. Но всё равно

User-Agent: *
Allow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Disallow:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Host:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Sitemap:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Sitemap:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

в директиве Host редиректите индексатор на совершенно другой сайт. Убирайте его оттуда, напишите там урл СВОЕГО сайта.

и кстати, первый вариант, без абсолютного URL в путях в Disallow - был более правильным.

 

[bonobo]

Смотрите, сделал вот так:
Host: sergeys-workshop.com.ua
Sitemap:

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

User-Agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /category
Disallow: /archive
Allow: /

Теперь все более менее правильно и нет переадресации?! В первой стрлее Google webmaster почему-то выдает ошибку.

По поводу проблем с сертификатом не понял. Как узнать, кoму он принадлежит и исправить ошибку?
Что значит прописать тип юзерагента?

Какой основной домен установить в вебмастере?

Большое спасибо за советы!

 

[alex444]

RTFM не пробовали? Например тут :

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

навскидку: не подсовывайте конкретно гуглеботу директиву Host вообще, он её не любит. А яндекс-бот, наоборот, обожает. Только на её законном месте, а не в начале файла.

user-agent такой-то
disallow
host
sitemap

user-agent сякой-то
disallow
sitemap

user-agent ещё-какой-то
disallow



А не как вздумалось левой пятке владельца сайта!

По поводу проблем с сертификатом не понял. Как узнать, кoму он принадлежит и исправить ошибку?

купить себе ДЛЯ СВОЕГО ДОМЕННОГО ИМЕНИ сертификат.
Но зачем он Вам? Если у Вас всё на http нормально живёт.... "шоб було" ? Так у Вас знаний не хватит понять, куда и в какой последовательности что пихать из купленного набора .

Какой основной домен установить в вебмастере?

sergeys-workshop.com.ua


Вообще - советы-советами, а обучение элементарной логике и каким-то БАЗОВЫМ знаниям - это уже не советы, а обучение. Разбирайтесь


ps директива Allow устарела, старайтесь её не применять (по возможности), т.к. разрешено и так всё, что не запрещено.
хост, сайтмап и прочее должно находиться после директив "управления доступом к контенту", а не как Вы в последней версии расположили.

Мой Вам совет - возьмите за основу пример по ссылке в начале моего поста, только не забудьте имя своего сайта подставить

 

[bonobo]

Преписал файл по примеру, но добавил в первом блоке сайтмап. Не пойму, что за глюк, но сегодня гугл вебмастер уже показывал что проиндексировал сайт и появилась вся информация и ключевые слова. А потом зашел еще раз и уже ничего нет... Яндекс вебмастер до сих пор пишет что есть переадресация.

"Информация о странице

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

10.06.2015

В данный момент адрес страницы неизвестен роботу." (Yandex)

С гугл вебмастер разобрался. Все хорошо. Зеленая галочка и статус сканирования "Partial". Только robots.txt Tester все строки первого блока помечает, как ошибки. Почему?

 

[alex444]

и как именно он ругается?

яндекс, например, вот что пишет

Results of robots.txt analysis
Sections used
Line Message

10: Disallow: */*/trackback You may have used an invalid character
24: Allow: /wp-content/uploads/ You may have used an invalid character

Пробелы в конце строк поубирайте. Конец слова - конец строки. ЗАЧЕМ ТАМ У ВАС В КОНЦЕ строк ПРОБЕЛЫ???? Яндекс ругается только на два пробела. Гугл, возможно, и на один.

блин. Караул, нельзя же таким невнимательным быть. Виндузятники, блин... считаете, что боты за Вас править Ваши невнимательности будут? Фиг Вам, они не ИЕ, что пишете - то и читают

 

[Безумный суслик]

все индексируется.

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

 

[bonobo]

все индексируется.

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

Да, уже все в порядке! Спасибо большое

 

[alex444]

интересно, с какого тут боку хостинг к этой проблеме?

ну.... юзеры поголовно считают, что виноват хостинг, а не их собственные руки.

 

[vvovvo]

В Search Console Google есть функция "Посмотреть как Гуглбот". Через нее можно принудительно ускоить индексацию страниц сайта.
Сайт пока еще молодой, но уже есть признаки анкорного и ссылочного спама.
Что это такое можно

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

.