Мастер подключения поисковиков, сайтов и RSS-потоков

Форум Сообщества Практиков Конкурентной разведки (СПКР)

Конкурентная разведка, Бизнес-разведка, Корпоративная разведка,
Деловая разведка по открытым источникам в бизнесе.
Работаем строго в рамках закона.

Дезинформация и активные мероприятия в бизнесе
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Библиотека источников и иструменты её создания и ведения »   Мастер подключения поисковиков, сайтов и RSS-потоков
RSS

Мастер подключения поисковиков, сайтов и RSS-потоков

<<Назад  Вперед>>Страницы: 1 2 * 3 4 5 6 7 8 9
Печать
 
Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 826
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009
В версии SiteSputnik 6.4.2 реализован экспорт-импорт:

а) отдельных поисковиков;
б) целых сценариев поиска.

Экспорт-импорт поисковиков и сценариев поиска позволяет выгружать в файл подключенные при помощи "Мастера подключения поисковиков" отдельные поисковики и целые сценарии поиска и загружать из файла их на другом компьютере, что значительно упрощает работу пользователя и позволяет организовать общими усилиями доступную для всех библиотеку подключаемых поисковиков и сценариев поиска.

Экспорт-импорт может быть применен следующим образом.

1. Необходимо перейти к БД "Настройка поиска". Это можно сделать из главного меню: "Интернет - Экспорт-импорт поисковиков и сценариев".
2. Для работы с отдельным поисковиком нажмите на НИЖНЕЙ таблице правую кнопку мышки и выберите пункт "Экспорт поисковика в файл" или "Импорт поисковика из файла".
3. Для работы с целым сценарием нажмите на ВЕРХНЕЙ таблице правую кнопку мышки и выберите пункт "Экспорт сценария в файл" или "Импорт сценария из файла".

При экспорте создается файл. Этот файл можно передать любому пользователю.
Для импортирования (подключения отдельного поисковика или целого сценария) пользователю достаточно выбрать этот файл в программе SiteSputnik на своем компьютере.
Из этих файлов можно создать библиотеку, подобную библиотеке пакетов с параметрами, ведущим которой является Олег Петров (tungus1973) - sitesputnik.ru/Files/Oleg1973.rar.

Под сценарием поиска в СайтСпутник(е) понимается группа поисковиков из нижней таблицы БД "Настройка поиска", связанная с одной строкой верхней таблицы.
Отдельный поисковик - "размещен" в отдельной строке нижней таблицы.
При необходимости, отдельный поисковик может быть помещен в несколько сценариев.
При необходимости, в один сценарий можно добавить один поисковик несколько раз (разумно, что варианты поиска по одному поисковику (источнику) будут разные, например, сначала по заголовкам тем на форуме, потом по содержанию сообщений форума).

Файлы экспорта-импорта - обыкновенные текстовые файлы с расширением txt.
В файле-сценарии можно изменить его имя. Оно находится в первой строке.
В файле-поисковике можно дополнительно изменить имя поисковика. Оно находится во второй строке.
Остальные строки "трогать" не рекомендуется.

Если при импорте сценарий с заданным именем отсутствует в Вашей "Настройке поиска", то он будет создан.
Если при импорте сценарий с заданным именем присутствует в Вашей "Настройке поиска", то в него допишутся те поисковики, которых у Вас нет в этом сценарии.
Если Вы импортируете поисковик с именем "Имя_01" в сценарий, и "Имя_01" уже существует у Вас в этом сценарии, то произойдет обновление поисковика.

Смотрите также - sitesputnik.ru/Help/SSMasExIm.htm

tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 784
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009

Alexei Mylnikov написал:
[q]
В версии SiteSputnik 6.4.2 реализован экспорт-импорт:
а) отдельных поисковиков;
б) целых сценариев поиска.
[/q]
Вот это вещь! Вот спасибо, Алексей Борисович!!!! :good:
Vinni
Администратор

Всего сообщений: 2710
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009
Спасибо! :good:
petryashov
Администратор

Откуда: Москва
Всего сообщений: 490
Рейтинг пользователя: 9


Ссылка


Дата регистрации на форуме:
7 июня 2009
Спасибо, работает!
Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 826
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009
Троекратное пожалуйста.

petryashov написал:
[q]
Алексей, я сейчас активно занимаюсь подключением в сценарии ряда технических сайтов с системой поиска. Например, вот такого : www.elec.ru Хочу создать библиотеку таких сценариев и выкладывать их, например, на данном форуме, как это в свое время сделал ув. Тунгус 1973 с пакетами с параметрами.Если будете выкладывать их на своем сайте, возражать также не буду. Пока не могу разобраться, как это можно сделать. . Подскажите, пожалуйста!
[/q]

Подсказал.
По поводу выкладывания на форуме и на моем сайте - я "за".

tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 784
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Для: Alexei Mylnikov
Хотелось бы проводить сбор информации с онлайн-сервисов типа СКРИН, публикации ФНС: такие, такие, такие и такие.
К сожалению, в них требуется указывать ИНН / ОГРН, а "СайтСпутник" работает только со словами "я", "это" и "сайт". Нельзя ли в каких-нибудь будущих версиях программы предусмотреть ввод ключевого слова пользователем? Например, введу я при подключении поисковика номер ИНН, и этот же ИНН введу в СайтСпутник для распознавания начала-конца текстового блока.

Один раз я встретился с поисковиком электронного СМИ, который принципиально не принимал слова короче 5 символов. Поэтому я так и не смог подключить его через "я", "это" и "сайт". Ввод ключевого слова мог бы решить и эту проблему.
Игорь Нежданов
Модератор форума
Прагматик
Откуда: Советский Союз
Всего сообщений: 1055
Рейтинг пользователя: 13


Ссылка


Дата регистрации на форуме:
7 июня 2009
Да - тоже сталкивался с такими особенностями.

---
Есть вопрос - спрашивайте. На прямой вопрос будет прямой ответ...
Лаборатория Перспективных Разработок
Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 826
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009
Мастер обязательно будет развиваться и сопровождаться. Здесь можно сделать много полезных усовершенствований.

Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 826
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009


В Мастер подключения новых источников информации добавлено поле "Номер главной ссылки в сниппете" (см. третье окошко на картинке выше).
Интервал допустимых значений для этого параметра: [0,127].
Это удобно для некоторых сайтов, например, если они формируют выдачу в виде таблички.
Подобное бывает на форумах, электронных аукционах и некоторых других источниках (сайтах).
Как правило, в подобных случаях нужная информация находится не на первой ссылке сниппета.
Может пригодиться и в других случаях: например, в блогах Яндекса второй ссылкой идет "Показать полный текст".

Подробнее о нулевом значении параметра.
В SiteSputnik News его применение позволяет разложить по полочкам (по Рубрикам) сами сниппеты.
Существуют также поиски и новостные страницы, сниппеты и новостные блоки которых не содержат ссылок - вся информация содержится в самом сниппете.

Это доступно в SiteSputnik 7.1.5. Подкачаться можно из главного меню: "? - Проверить наличие обновлений".

Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 826
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009
В новой версии программы SiteSputnik 7.1.6 от 18.05.11 усовершенствован Мастер подключения источников информации.

В предыдущих версиях было подключение:
- поисковиков и встроенных в сайты поисков, использующих GET-метод передачи данных.

В новой версии доработано или реализовано подключение:

- RSS-потоков,
- произвольных веб-страниц,
- встроенных в сайты поисков, использующих POST-метод передачи данных.

Пояснения к тому, как подключать различные типы источников.



1. Подключение встроенных в сайты поисков, в которых используется GET-метод передачи данных. Оно не претерпело изменений - используется URL первой поисковой страницы по запросам: сайт, это или я, - и нажимается кнопка "Открыть".

2. Подключение RSS-потоков. Используется URL потока и на кнопке "Открыть" нажимается правая кнопка мышки.



3. Подключение произвольных страниц сайтов . Используется URL подключаемой страницы, снимается галочка, обведенная синей окружностью и на кнопке "Открыть" нажимается правая кнопка мышки.

4. Подключение встроенных в сайты поисков, в которых используется POST-метод передачи данных. Используется URL с обращением к поиску, устанавливается галочка, вводится запрос (на картинке это "сайт"), имя кнопки ("Найти") и расстояние от кнопки до поля ввода запроса ("1") и на кнопке "Открыть" нажимается правая кнопка мышки.

POST-метод в отличие от GET-метода не передает через URL параметр поиска (текст запроса), соответственно, пользователь не может увидеть его в URL.

Новые виды источников могут быть задействованы в SiteSputnik News для мониторинга СМИ, новостных и других источников информации.

Подробнее в инструкции по применению Мастера подключения источников информации.

<<Назад  Вперед>>Страницы: 1 2 * 3 4 5 6 7 8 9
Печать
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Библиотека источников и иструменты её создания и ведения »   Мастер подключения поисковиков, сайтов и RSS-потоков
RSS

Последние RSS
Не все VPN-сервисы одинаково полезны
«Яндекс» научился выдавать в поиске не скрытые Google-документы. Правда лавочку
War and marketing: 1937 July 7th vs. 2018 July 1st
Историческое. Агентурная разведка
Open Source Intelligence (OSINT) Tools and Resources Handbook
Top tips on gathering information about companies by using free online sources
Новое на блоге HRразведка
Безопасность данных в MS Access
Слово как улика
20 Recon and Intel Gathering Tools used by InfoSec Professionals
What’s Changed?
10 альтернативных поисковиков
Ситуационный центр главы Республики Коми
Развёртывание ситуационных центров на базе технологии Avalanche
Как принимать сложные решения. Советы бывшего оперативника ЦРУ.
Открытая информация о "Новичке" из сети интернет.
Ген. директор "ОЗХО" Ахмет Узюмдж о "Новичке" и хим. атаке в Сирии
Онлайн-сервисы для Twitter
Коллекция для Twitter
Приложение Opera VPN закрывается

Самые активные 20 тем RSS
Новости блогов
Не все VPN-сервисы одинаково полезны