Доброе утро.
Вот у меня можно сказать проблемка.
У меня три портала на трех доменах построены на одной базе данных с единым префиксом, так сказать для удобства своего да и пользователей.
Три портала и на всех размещены ссылки на разную информацию
К примеру
1ый портал
www.web.ru/index.php?name=Pages&op=page&pid=4
www.web.ru/index.php?name=Pages&op=page&pid=3
www.web.ru/index.php?name=Pages&op=page&pid=2
www.web.ru/index.php?name=Pages&op=page&pid=1
2ой портал
www.web.ru/index.php?name=Pages&op=page&pid=5
www.web.ru/index.php?name=Pages&op=page&pid=6
www.web.ru/index.php?name=Pages&op=page&pid=7
3ий портал
www.web.ru/index.php?name=Pages&op=page&pid=8
www.web.ru/index.php?name=Pages&op=page&pid=9
www.web.ru/index.php?name=Pages&op=page&pid=10
Некоторые индексирует правильно не зацепляя ссылок принадлежащих другому порталу, но по моей ошибки я на пару минут выложил меню первого портала на второй и как нап зло яндекс проиндексировал тепер у меня второй портал содержит
2ой портал
www.web.ru/index.php?name=Pages&op=page&pid=4
www.web.ru/index.php?name=Pages&op=page&pid=3
www.web.ru/index.php?name=Pages&op=page&pid=2
www.web.ru/index.php?name=Pages&op=page&pid=1
www.web.ru/index.php?name=Pages&op=page&pid=5
www.web.ru/index.php?name=Pages&op=page&pid=6
www.web.ru/index.php?name=Pages&op=page&pid=7
Повторение первого в индекса яндекса а значет вопрос времени когда яша засчетает один их порталов зеркалом,
Можно ли как то запретить обращение к ненужным ссылкам чтоб боты их не видели их вооще, а видели только принадлежащее порталу.
По идеи это можно сделать в .htaccess или я ошибаюсь, выручайте народ.
Настроить .htaccess
В robots.txt каждого сайта добавь
Пример
Disallow: /index.php?name=Pages&op=page&pid=4
Пример
Disallow: /*pid=4 и тд в том же духе.
Если ссылок много похожих, придумать можно что то по красивее, посмотри в хелпе яндуха правила роботс, там всё просто.
И проверь потом в панели веб-мастера в ПС, но думаю всё будет ОК.
Закртые ссылки боты не индексируют.
[url=https://worldwebinfo.ru]World Web Info - лучшее и полезное для жизни [/url]
[url=https://max.worldwebinfo.ru]Каталог каналов, чатов мессенджера MAX[/url]
- Группа: Пользователи
- Пункты: 3849
- Регистрация: 21.07.2006
- Пол: Мужчина
- Из: Санкт-Петербург
Большое спасибо, попробую
Как не крути, но смотреть и оптимизировать свое стоит в сторону гугля 
Первое - кол-во пользователей гугла в разы больше. Второе - он более поворотлив и универсален в плане индексации и др. параметрам. И в итоге, от гугля отдача в разы выше яшиной.
Cama, да ну? 
Вы хотите сказать, что на Ваш сайт, рассчитанный на русскую аудиторию, основной трафик приносит Google?
Что-то впервые такое слышу. На моей памяти, Яндекс как был лидером в части трафика русских пользователей - так и остался, и попытки Google русифицировать свой трафик все равно не дали должного результата, хотя здесь конечно уместно слово ПОКА, так как всему свое время.
Оптимизировать нужно под Все Крупные поисковые системы - вот это будет правильнее.
У меня, например, 90% трафика дает Яндекс, но это не говорит о том, что мне наплевать на трафик от Google, и я стараюсь оптимизировать под все поисковики.
- Группа: Супермодераторы
- Пункты: 1595
- Регистрация: 18.09.2008
- Пол: Мужчина
- Из: Россия
Безусловно, причем в последнее время общаться с поддержкой гугля стало вообще тяжело, яша хоть и стандартно, но отвечает. В гугле обнулили PR, а за что ХЗ(
По теме, к спецам по таким вопросам как в первом сообщении, может поможете организовать то, что я здесь в соседней теме описал:
http://www.slaed.net/forum-view-7860.html
Как не крути, но смотреть и оптимизировать свое стоит в сторону гугля
Даже комментировать не буду, либо Вы не понимаете вопроса, либо у Вас англоязычный сайт.
[url=https://worldwebinfo.ru]World Web Info - лучшее и полезное для жизни [/url]
[url=https://max.worldwebinfo.ru]Каталог каналов, чатов мессенджера MAX[/url]
- Группа: Пользователи
- Пункты: 3849
- Регистрация: 21.07.2006
- Пол: Мужчина
- Из: Санкт-Петербург
Даже комментировать не буду...
И не нужно. Давно LI анализировали? Статистика под замком, ок, включаем поиск у яши, находим первый попавшийся паук анализатор и что видим...

Это новое модное движение такое - поклоняться яше и валить оппонентов везде и всюду, по типу толпы сторонников опенсоурсе (Linux cool, Win маздай)?








