Как получить список ссылок из выдачи Google по определенному запросу?
я хочу найти все проиндексированные Гуглом страницы моего сайта, но которые не нужны в индексе, например постраничный вывод не нужен в индексе и удалить их используя инструмент удаления страниц в вебмастре Гугла
Все страницы из индекса с постраниченой пагинацией можно получить таким запросом
Код:
site:site.ru inurl:page
А как получить список URL страниц из выдачи? кроме ручного варианта, а то уж слишком много их там
JM, запросы, вида: inurl:"/forum/"
Т.к. Гугл выдает ограниченное количество результатов, то можно расширить признаки, перебирая домены:
inurl:"/forum/" site:.com
inurl:"/forum/" site:.net
inurl:"/forum/" site:.org
и т.д.
Дополнительно можно расширить с помощью признаков форумов:
inurl:"/forum/" site:.com "Powered by SMF 1.0"
inurl:"/forum/" site:.com "Powered by SMF 1.1"
inurl:"/forum/" site:.com "Powered by SMF 2.0"
и т.д.
Вы не можете начинать темы Вы не можете отвечать на сообщения Вы не можете редактировать свои сообщения Вы не можете удалять свои сообщения Вы не можете голосовать в опросах