Задачка для СайтСпутника

Форум Сообщества Практиков Конкурентной разведки (СПКР)

Конкурентная разведка, Бизнес-разведка, Корпоративная разведка,
Деловая разведка по открытым источникам в бизнесе.
Работаем строго в рамках закона.

Дезинформация и активные мероприятия в бизнесе
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Приемы работы с программой СайтСпутник (SiteSputnik) »   Задачка для СайтСпутника
RSS

Задачка для СайтСпутника

Сбор "СайтСпутником" новостей Google за определенную дату.

<<Назад  Вперед>>Страницы: 1 * 2
Печать
 
Vinni
Администратор

Всего сообщений: 2136
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009
FF3 - это веб-браузер Firefox 3 (в нем это окно не открылось - видимо из-за несоответствия DOM-модели :wonder1: судя по сообщению плагин Web Developer)
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Правильно ли я понял, что есть некоторое решение (фича) под IE? Тогда может быть расскажете о нём?
Vinni
Администратор

Всего сообщений: 2136
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009
Если я правильно понял, речь идет о том, чтобы среди результатов поискового запроса в Google найти те, которые были опубликованы в Интернете за определенный период (а лучше за определенную дату).

В _ttp://www.google.com/support/websearch/bin/answer.py?hl=ru&answer=142143 написано следующее

[q]

...
Результаты поиска можно ограничить, исходя из срока публикации в Интернете. Google пытается определить дату публикации страницы, используя информацию о том, когда Google в первый раз ее проиндексировал.
...
За период... Этот параметр позволяет самостоятельно указывать период времени. Укажите даты, которые хотите использовать для поиска, в формате дд/мм/гггг, затем нажмите кнопку Поиск. Этот параметр лучше использовать для страниц, опубликованных после 2001 г.

[/q]


То есть надо
-выполнить поисковый запрос в гугле
- щелкнуть по ссылке "Показать настройки" в левой части экрана
-щелкнуть по ссылке "За период..."
-в появившихся двух полях указать начальную и конечную дату в формате ДД/ММ/ГГГГ и щелкнуть по кнопке "Поиск" под этими двумя полями

После этого число результатов на странице существенно уменьшится и будет содержать только результаты за указанный период.


P.S.
Если имелось в виду что-то другое, прошу более понятную :wink: постановку задачи
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Для: Vinni
Верно. Это часть решения задачи.

Вопрос 1: Как мы можем проверить точность (полноту) этого способа выборки материалов? Существуют ли в Google другие, более эффективные способы делать выборку по дате?

Вопрос 2: Как нам добиться того, чтобы "СайтСпутник" собирал из Google ссылки за любую, нужную нам дату (диапазон дат)? Что делать, если дату нам нужно менять часто?
Tefna
Новичок (писатель)

Откуда: Из нерезиновой
Всего сообщений: 12
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
9 окт. 2010

tungus1973 написал:
[q]
Существуют ли в Google другие, более эффективные способы делать выборку по дате?
[/q]


А тот, что описан в moradan.sopovs.com/2010/04/google.html не пойдет ?

[q]

...
В поиске есть специальный параметр "daterange" - указывать его надо в виде daterange:<начальная дата ограничения>-<конечная дата ограничения> И всё было бы просто замечательно, если бы не формат, в котором надо указывать дату. Этим форматом является юлианский день. Кроме того, что надо помнить текущее число дней, прошедших от 1 января 4713 до н. э., этот день еще и начинается около нашего полудня. То есть заботиться приходится еще и о том, вошли ли нужные 12 часов в запрос, или не вошли? Ну и пример. Такая поисковая строка ограничивает результаты поиска страницами, впервые проиндексированными, с 12 дня 2 апреля 2010 года до 12 дня 3 япреля 2010 года: первый ядерный взрыв daterange:2455289-2455290 (я, правда, несовсем понимаю, в каком это всё часовом поясе - вообще юлианский день начинается в 12 дня по Александии, где UTC+2, а летом UTC+3).
...
[/q]
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009

Tefna написал:
[q]
А тот, что описан в moradan.sopovs.com/2010/04/google.html не пойдет ?
[/q]
Насколько он эффективнее способа, предложенного ув. Vinni?
vbl
Модератор форума

Откуда: Нижний Новгород
Всего сообщений: 179
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
10 июня 2009
Для: Tefna

Оператор daterange корректно не работает, проверено.

---
Non progredi est regredi

http://www.informnn.ru
Информационная рассылка "Конкурентная разведка. Сам себе разведчик" - http://subscribe.ru/catalog/tech.razvedka
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Подведём предварительные итоги.

В Google существуют 2 способа вывести результаты за какую-то дату (диапазон дат):
- оператор daterange;
- расширенный поиск через "Показать настройки..." / "За период...".

Выборка по настройке "За период..." даёт более полные результаты, чем оператор daterange.


Остается решить вторую часть задачи - работа с "СайтСпутником":

tungus1973 написал:
[q]
Вопрос 2: Как нам добиться того, чтобы "СайтСпутник" собирал из Google ссылки за любую, нужную нам дату (диапазон дат)? Что делать, если дату нам нужно менять часто?
[/q]
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Итак, описываю метод, которым удалось решить задачу.

Мы определили, что наиболее точным получается поиск через Google с параметрами "За период...".

1. В поисковую строку Google вписываем ключевое слово "это" (или "сайт" или "я"). Нажимаем кнопку "Поиск". После того, как Google выдаст результаты, находим слева группу "За всё время", жмём на кнопочку со стрелкой вниз. В открывшемся списке выбираем "За период...", вводим дату, например, "22.11.2010" в верхнее и в нижнее поле. Жмем кнопку "Поиск" под полями.

2. Подключаем поисковик с полученными настройками к "СайтСпутнику". Даем уникальное имя получившемуся сценарию.

3. Делаем экспорт сценария в файл txt.

4. Чтобы поменять дату, открываем файл сценария в любом текстовом редакторе (блокнот, AkelPad, ...). Находим в нем адрес поисковика. В адресе поисковика будут написаны введенные нами даты.

_http://www.google.ru/search?q=%D1%8D%D1%82%D0%BE&hl=ru&newwindow=1&sa=X&ei=3ML3TOyoAsToOZChpIcI&ved=0CA0QpwU&source=lnt&tbs=cdr%3A1%2Ccd_min%3A22.11.2010%2Ccd_max%3A22.11.2010

Выполняем операцию "Поиск - Замена", находим дату "22.11.2010", заменяем ее другой нужной нам датой. Сохраняем файл. Выполняем в "СайтСпутнике" импорт получившегося сценария.

5. Если у Вас есть навыки написания скриптов (автоматизации работы), то пишем для операции 4 специальный скрипт. Если нет таких навыков, выполняем операцию 4 вручную.

Вот и всё!


Чтобы её решить задачку, пришлось окунуться в детали:
- языка запросов Google (в том числе не особо документированных!);
- особенностей расширенного поиска Google;
- подключения поисковиков в "СайтСпутник";
- экспорта-импорта сценариев "СайтСпутника";
- структуры файла сценария "СайтСптуника";
- и (возможно!) написания скриптов для автоматической замены цифр в сценарии.


Благодарю всех участников форума, кто принял участие в обсуждении этой задачки. :hi:


Желаю всем пользователям "СайтСпутника" успешной работы с этим замечательным, гибким инструментом, который позволяет реализовывать подобные задачки, не прибегая к другим программным средствам! Настоящий "Швейцарский ножик" Алексея Мыльникова! :good:
CI-KP
Администратор

Откуда: Екатеринбург
Всего сообщений: 5565
Рейтинг пользователя: 24


Ссылка


Дата регистрации на форуме:
15 мая 2009

tungus1973 написал:
[q]
Итак, описываю метод, которым удалось решить задачу.
[/q]

Спасибо! Действительно - "Настоящий "Швейцарский ножик" Алексея Мыльникова! :good:"

---
Ющук Евгений Леонидович, профессор УрГЭУ. www.razvedka-internet.ru; www.ci-razvedka.ru
Не всегда нужно стремиться совершать кражу со взломом там, где можно войти через дверь.
<<Назад  Вперед>>Страницы: 1 * 2
Печать
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Приемы работы с программой СайтСпутник (SiteSputnik) »   Задачка для СайтСпутника
RSS

Последние RSS
Англоязычный интерфейс программы "Сайт Спутник"
Учебник по конкурентной разведке
Конкурентная разведка: маркетинг рисков и возможностей
Книга "История частной разведки США"
Книга "Нетворкинг для разведчиков"
Поиск и сбор информации в интернете в программе СайтСпутник
Новые видеоуроки по программе СайтСпутник для начинающих
Технологическая разведка
SiteSputnik. Мониторинг Телеграм
СайтСпутник: возврат к ранее установленной версии
SiteSputnik. Доступ к результатам работы из браузера
Анализ URL
Браузер для анонимной работы
Топливно-энергетический комплекс
Профессиональные сообщества СБ
Несколько Проектов в одном, выполнение Проектов по частям
SiteSputnik-Bot: Боты в программе СайтСпутник
К вопросу о телеграм
SiteSputnik: Автозамены до и после Рубрикации или Перевода
Демо-доступ к ИАС социальных сетей

Самые активные 20 тем RSS