Новая тема   Ответить

 nosf
Гугля индексирует такие урлы из-за трейдеров на протоне, как заблочить и стоит ли?

 Semen_ssr
robots.txt
Disallow: /*?*
Disallow: /*?

 sergio21
User-agent: *
Disallow: /?x=

 rikiten
Disallow: /dtr
Disallow: /crtr

можешь закрbть ещё папки скриптов, если у тебя ДТР и кристал, тогда будет так

 Jabar
Если я правильно понял, то таким способом (блок в хтакцесс) быстро загнуться трейды с протоном, прогрессом, пульсом, трейд экспертом. Оно надо? Может просто вообще сразу прибить эти трейды и больше не брать в трейд сайты на этих скриптах? Мне кажется не разумно.
Ну и я че то не допонял, поясни, пожалуйста, что значит гугля индексирует эти урлы? То есть, в выдаче гугля появляются линки твойсайт.ком/?x=8180.6450.9252.6643.5161 ? Если так, то что в этом плохого?

 sergio21
Jabar, проблема в том, что гугл индексирует одну и ту же страницу ТС под "разными" урлами. получается дублированный контент. а это нежелательно.
а почему ты думаешь, что если закрыть страницы с параметрами трейдеров от индексации, то трейд рухнет? какое отношение имеет трейд к индексированным страницам?

 nosf
Цитата:
Мы не про хтакцесс, а про роботс.тхт говорили

 Jabar
nosferatu писал:
А точно пардонте сильвупле

Хотя опять что-то торможу А как эти линки в гугль попадают? Врятли он их находит непосредственно на серверах и сайтах, чтоб роботс.тхт мог помочь. Скорее он с сайта трейда уходит к тебе по такой линке и её уже запоминает. Но тогда роботс.тхт не спасет нифига.

 x123p
robots.txt самый правильный путь, а ещё могёшь поудалять уже проиндексированные из webmasters tools

 GnomX
Тоже была подобная ситуация, когда гугл наиндексил приличное количество линков с окончаниями от протона.

Поудалял все эти странички в webmasters tools, и через пару недель они пропали из индекса.

 rikiten
+1