Форум Сообщества Практиков Конкурентной разведки (СПКР)

Да, но для этого придется открыть ровно столько ссылок сколько содержится в карте сайта (КС), а их количество может исчисляться десятками тысяч. Это не всегда приемлемо на эпапе поиска при помощи поисковиков.
Без проблем "прицепить" сниппеты. В этом случае не надо ничего открывать. Они уже есть в списке "Объединение", на основе которого формируется КС. Я их просто отбрасываю при построении иерархической структуры сайта.
Поэтому работайте со списком "Объединение". В нем один к одному те самые ссылки, что и в КС, но каждая ссылка сопровождается сниппетом.

КС задумана для другого. Она является базой (стартовой площадкой) для поиска непроиндексированных (невидимых) поисковиками ссылок. Одной из функций поиска таких ссылок является разрабатываемый в настоящее время спайдер, запускаемый с КС.
Спайдеру приходится закачивать все ссылки и видимые, и обнаруженные невидимые. Вот здесь можно и НУЖНО "прицепить" не только тайтлы, но и другие составные части контента ссылок и даже "функциональные производные" от их контента.
Предполагается реализовать целый набор функций над контентом ссылок и сайта в целом. Причем не только над текстовой составляющей контента, но и над HTML составляющей. В принците реализация бета версии "Контекстного граббера" - это опробация базового алгоритма работы с контентом сайта, детализация которого будет являть собой упомянутый набор функций.

Иоанн написал:

[q]

Alexei Mylnikov написал:

[q]

КС задумана для другого. Она является базой (стартовой площадкой) для поиска непроиндексированных (невидимых) поисковиками ссылок.

[/q]

[/q]

Соглашусь с Алексеем. Если заставить SS самому скачивать все найденные страницы (а не пользоваться тем, что дал поисковик), то это будет уже просто паук со всеми вытекающими последствиями

Пауков, строящих карты сайтов, уже хватает (см. например, бесплатный вариант на базе wget+php - _ttp://ardoino.com/15-google-php-wget-sitemap-generator/ и )

Иоанн написал:

[q]

Vinni написал:

[q]

Соглашусь с Алексеем. Если заставить SS самому скачивать все найденные страницы (а не пользоваться тем, что дал поисковик), то это будет уже просто паук со всеми вытекающими последствиями

[/q]

В том то и фишечка, что не надо паука делать - для начала "вытянуть" под эту функцию все что можно из поисковиков.

[/q]

хотя бы сниппеты

Alexei Mylnikov написал:

[q]

На самом деле карта сайта может использоваться для самых разных нужд даже в КР

[/q]

Как-то некорректно звучит слово "даже" :)

Как раз в КР используется данная функция "на ура".


Из собственного опыта.

Построение карты сайта очень помогает следующим образом:
- находит странички с внутренней статистикой сайта, например, созданные Вэбалайзером. Напрямую на них, как правило, выйти не получается. У нас был случай, когда СС притащил одну такую страничку с подробной статистикой IP посетителей за март 2009 года. Имея урл данной странички мы легко ознакомились и со страницами за другие месяцы. Причем не только по посетителям, а и по ключевым словам, откуда приходили посетители и т.д.
- приносит очень интересные странички с сайта, которые вроде бы запрещены к показу и индексации, но ведь Гуглу пофиг

А вот просматривать все найденные ссылки в карте бывает тяжко, тут я за предложение Дмитрия.

И хотелось бы еще уточнить, а чем подробная карта сайта отличается от просто карты сайта?

Alexei Mylnikov написал:

[q]

vbl написал:

[q]

Alexei Mylnikov написал:

[q]

На самом деле карта сайта может использоваться для самых разных нужд даже в КР

[/q]

Как-то некорректно звучит слово "даже" :)

[/q]

Это не я написал.

[/q]

Это писал некто "Иоанн"