Задачка для СайтСпутника

Форум Сообщества Практиков Конкурентной разведки (СПКР)

Конкурентная разведка, Бизнес-разведка, Корпоративная разведка,
Деловая разведка по открытым источникам в бизнесе.
Работаем строго в рамках закона.

Дезинформация и активные мероприятия в бизнесе
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Приемы работы с программой СайтСпутник (SiteSputnik) »   Задачка для СайтСпутника
RSS

Задачка для СайтСпутника

Сбор "СайтСпутником" новостей Google за определенную дату.

<<Назад  Вперед>>Страницы: 1 * 2
Печать
 
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 803
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Для: Vinni
Верно. Это часть решения задачи.

Вопрос 1: Как мы можем проверить точность (полноту) этого способа выборки материалов? Существуют ли в Google другие, более эффективные способы делать выборку по дате?

Вопрос 2: Как нам добиться того, чтобы "СайтСпутник" собирал из Google ссылки за любую, нужную нам дату (диапазон дат)? Что делать, если дату нам нужно менять часто?
Tefna
Новичок (писатель)

Откуда: Из нерезиновой
Всего сообщений: 12
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
9 окт. 2010

tungus1973 написал:
[q]
Существуют ли в Google другие, более эффективные способы делать выборку по дате?
[/q]


А тот, что описан в moradan.sopovs.com/2010/04/google.html не пойдет ?

[q]

...
В поиске есть специальный параметр "daterange" - указывать его надо в виде daterange:<начальная дата ограничения>-<конечная дата ограничения> И всё было бы просто замечательно, если бы не формат, в котором надо указывать дату. Этим форматом является юлианский день. Кроме того, что надо помнить текущее число дней, прошедших от 1 января 4713 до н. э., этот день еще и начинается около нашего полудня. То есть заботиться приходится еще и о том, вошли ли нужные 12 часов в запрос, или не вошли? Ну и пример. Такая поисковая строка ограничивает результаты поиска страницами, впервые проиндексированными, с 12 дня 2 апреля 2010 года до 12 дня 3 япреля 2010 года: первый ядерный взрыв daterange:2455289-2455290 (я, правда, несовсем понимаю, в каком это всё часовом поясе - вообще юлианский день начинается в 12 дня по Александии, где UTC+2, а летом UTC+3).
...
[/q]
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 803
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009

Tefna написал:
[q]
А тот, что описан в moradan.sopovs.com/2010/04/google.html не пойдет ?
[/q]
Насколько он эффективнее способа, предложенного ув. Vinni?
vbl
Модератор форума

Откуда: Нижний Новгород
Всего сообщений: 179
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
10 июня 2009
Для: Tefna

Оператор daterange корректно не работает, проверено.

---
Non progredi est regredi

http://www.informnn.ru
Информационная рассылка "Конкурентная разведка. Сам себе разведчик" - http://subscribe.ru/catalog/tech.razvedka
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 803
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Подведём предварительные итоги.

В Google существуют 2 способа вывести результаты за какую-то дату (диапазон дат):
- оператор daterange;
- расширенный поиск через "Показать настройки..." / "За период...".

Выборка по настройке "За период..." даёт более полные результаты, чем оператор daterange.


Остается решить вторую часть задачи - работа с "СайтСпутником":

tungus1973 написал:
[q]
Вопрос 2: Как нам добиться того, чтобы "СайтСпутник" собирал из Google ссылки за любую, нужную нам дату (диапазон дат)? Что делать, если дату нам нужно менять часто?
[/q]
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 803
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Итак, описываю метод, которым удалось решить задачу.

Мы определили, что наиболее точным получается поиск через Google с параметрами "За период...".

1. В поисковую строку Google вписываем ключевое слово "это" (или "сайт" или "я"). Нажимаем кнопку "Поиск". После того, как Google выдаст результаты, находим слева группу "За всё время", жмём на кнопочку со стрелкой вниз. В открывшемся списке выбираем "За период...", вводим дату, например, "22.11.2010" в верхнее и в нижнее поле. Жмем кнопку "Поиск" под полями.

2. Подключаем поисковик с полученными настройками к "СайтСпутнику". Даем уникальное имя получившемуся сценарию.

3. Делаем экспорт сценария в файл txt.

4. Чтобы поменять дату, открываем файл сценария в любом текстовом редакторе (блокнот, AkelPad, ...). Находим в нем адрес поисковика. В адресе поисковика будут написаны введенные нами даты.

_http://www.google.ru/search?q=%D1%8D%D1%82%D0%BE&hl=ru&newwindow=1&sa=X&ei=3ML3TOyoAsToOZChpIcI&ved=0CA0QpwU&source=lnt&tbs=cdr%3A1%2Ccd_min%3A22.11.2010%2Ccd_max%3A22.11.2010

Выполняем операцию "Поиск - Замена", находим дату "22.11.2010", заменяем ее другой нужной нам датой. Сохраняем файл. Выполняем в "СайтСпутнике" импорт получившегося сценария.

5. Если у Вас есть навыки написания скриптов (автоматизации работы), то пишем для операции 4 специальный скрипт. Если нет таких навыков, выполняем операцию 4 вручную.

Вот и всё!


Чтобы её решить задачку, пришлось окунуться в детали:
- языка запросов Google (в том числе не особо документированных!);
- особенностей расширенного поиска Google;
- подключения поисковиков в "СайтСпутник";
- экспорта-импорта сценариев "СайтСпутника";
- структуры файла сценария "СайтСптуника";
- и (возможно!) написания скриптов для автоматической замены цифр в сценарии.


Благодарю всех участников форума, кто принял участие в обсуждении этой задачки. :hi:


Желаю всем пользователям "СайтСпутника" успешной работы с этим замечательным, гибким инструментом, который позволяет реализовывать подобные задачки, не прибегая к другим программным средствам! Настоящий "Швейцарский ножик" Алексея Мыльникова! :good:
CI-KP
Администратор

Откуда: Екатеринбург
Всего сообщений: 5730
Рейтинг пользователя: 24


Ссылка


Дата регистрации на форуме:
15 мая 2009

tungus1973 написал:
[q]
Итак, описываю метод, которым удалось решить задачу.
[/q]

Спасибо! Действительно - "Настоящий "Швейцарский ножик" Алексея Мыльникова! :good:"

---
Ющук Евгений Леонидович, профессор УрГЭУ. www.razvedka-internet.ru; www.ci-razvedka.ru
Не всегда нужно стремиться совершать кражу со взломом там, где можно войти через дверь.
<<Назад  Вперед>>Страницы: 1 * 2
Печать
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Приемы работы с программой СайтСпутник (SiteSputnik) »   Задачка для СайтСпутника
RSS

Последние RSS
Учебник по конкурентной разведке
Конкурентная разведка: маркетинг рисков и возможностей
Книга "История частной разведки США"
Книга "Нетворкинг для разведчиков"
Поиск и сбор информации в интернете в программе СайтСпутник
Новые видеоуроки по программе СайтСпутник для начинающих
Технологическая разведка
SiteSputnik. Мониторинг Телеграм
СайтСпутник: возврат к ранее установленной версии
SiteSputnik. Доступ к результатам работы из браузера
Анализ URL
ВС разрешил пропускать работу без разрешения работодателя
Браузер для анонимной работы
Топливно-энергетический комплекс
Профессиональные сообщества СБ
Несколько Проектов в одном, выполнение Проектов по частям
SiteSputnik-Bot: Боты в программе СайтСпутник
К вопросу о телеграм
SiteSputnik: Автозамены до и после Рубрикации или Перевода
Демо-доступ к ИАС социальных сетей

Самые активные 20 тем RSS