Перейти к публикации
Maxim D.

Индексация. Яндекс.

Рекомендованные сообщения

Maxim D.

Здравствуйте. Проблема заключается в том, что робот не индексирует страницы должным образом, в отличии от Google, например. Как быть с тем, что роботу выдаёт ошибку с отказом доступа. Группа ботов — пользователи. Никаких ограничений к основным страницам нет.

post-4231-0-84893400-1381475453_thumb.png

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
DaImeR

Скинь robots.txt

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
asmakovec2

Это ты в яндексвебмастере смотришь раздел Исключённые страницы? Так всё правильно, страницы с профилями пользователей и не должны индексироваться, их специально закрывают от индексации в роботсе (или другими методами).

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
ToRN

Проблема заключается в том, что робот не индексирует страницы должным образом, в отличии от Google

Google индексирует всё, а Яндекс отбирает. 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
Maxim D.

Это ты в яндексвебмастере смотришь раздел Исключённые страницы?

 

Это я смотрю «Страницы в поиске».

 

Вот robots.txt, как просили.

 

 

 

 

User-agent: *
Disallow: /forum/admin/
Disallow: /forum/cache/
Disallow: /forum/converge_local/
Disallow: /forum/hooks/
Disallow: /forum/ips_kernel/
Disallow: /forum/retail/
Disallow: /forum/public/style_captcha/
Disallow: /forum/index.php?app=core&module=task
Disallow: /forum/index.php?app=core&module=usercp&tab=forums&area=forumsubs
Disallow: /forum/index.php?app=core&module=usercp&tab=forums&area=watch&watch=topic
Disallow: /forum/index.php?app=forums&module=extras§ion=forward
Disallow: /forum/index.php?app=members&module=messaging
Disallow: /forum/index.php?app=members&module=chat
Disallow: /forum/index.php?app=members&module=search
Disallow: /forum/index.php?app=members&module=search&do=active
Disallow: /forum/index.php?&unlockUserAgent=1
Disallow: /*app=core&module=usercp
Disallow: /*app=core&module=usercp
Disallow: /*app=members&module=messaging
Disallow: /*&p=
Disallow: /*&pid=
Disallow: /*&hl=
Disallow: /*&start=
Disallow: /*view__getnewpost$
Disallow: /*view__getlastpost$
Disallow: /*view__old$
Disallow: /*view__new$
Disallow: /*view__getfirst$
Disallow: /*view__getprevious$
Disallow: /*view__getnext$
Disallow: /*view__getlast$
Disallow: /*&view=getnewpost$
Disallow: /*&view=getlastpost$
Disallow: /*&view=old$
Disallow: /*&view=new$
Disallow: /*&view=getfirst$
Disallow: /*&view=getprevious$
Disallow: /*&view=getnext$
Disallow: /*&view=getlast$
Disallow: /*?s=
Disallow: /*&s=
Disallow: /forum/index.php?app=core&module=global§ion=login&do=deleteCookies
Disallow: /forum/index.php?app=forums&module=extras§ion=rating
Disallow: /forum/index.php?app=forums&module=forums§ion=markasread

 

 

 

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах
kzpromo

слишком много дисаллоу стоит, проверь еще раз ссылки которые запретил

Поделиться сообщением


Ссылка на сообщение
Поделиться на других сайтах

Создайте аккаунт или войдите в него для комментирования

Вы должны быть пользователем, чтобы оставить комментарий

Создать аккаунт

Зарегистрируйтесь для получения аккаунта. Это просто!

Зарегистрировать аккаунт

Войти

Уже зарегистрированы? Войдите здесь.

Войти сейчас

×
×
  • Создать...