Сейчас в сети: 883
Ремаркетинг, стратегии в КМС, Редактор AdWords, конверсии и др.
Подсказки
star_border
Ответить

Robots.txt как оставить доступным только для Adwords робота

Студент ✭ ✭

Добрый день!

 

Сделала несколько посадочных страниц непосредственно под запросы Adwords. Не хотелось бы, чтобы эти страницы были проиндексированными обычным поисковым роботом, чтобы он не посчитал их дублями. То есть проще говоря задача такая, чтобы эти стианицы индексировал только робот Adwords, а всем остальным они были закрыты

 

Подскажите. правильно ли я сделала robots.txt для такого случая.

Страницы для adwords имеют следующий вид:

 

www.xxx.ru/?keyword=yyy

 

содержание robots.txt

 

User-agent: *
Allow: *
Disallow: *?keyword*

User-agent: AdsBot-Google
Allow: *

Host: xxx.ru

 

Благодарю!

Re: Robots.txt как оставить доступным только для Adwords робота

Профессор ✭ ✭
Добрый вечер, вроде все верно. При таком роботс.тхт доступ будет запрещен для всех ботов кроме AdsBot-Google, думаю конфликтов быть не должно.
---
Если ответ был вам полезен — нажмите на звездочку.