Программы автоматического мониторинга

Форум Сообщества Практиков Конкурентной разведки (СПКР)

Конкурентная разведка, Бизнес-разведка, Корпоративная разведка,
Деловая разведка по открытым источникам в бизнесе.
Работаем строго в рамках закона.

Дезинформация и активные мероприятия в бизнесе
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Софт для конкурентной разведки »   Программы автоматического мониторинга
RSS

Программы автоматического мониторинга

<<Назад  Вперед>>Страницы: 1 2 3 4
Печать
 
Janemp
Молчун

Откуда: г.
Всего сообщений: 10
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
10 мар. 2015
Всем добрый день!

Я пытаюсь вникать в некоторые аспекты КР и на данном этапе мне хотелось бы для себя понять какой есть специализированный софт, который мог бы помочь при решении такой задачи как автоматизация поиска и отслеживания определенной информации в новостном потоке.

Конечно, необходим какой-то набор функционала - добавление своих источников, поиск в найденном, экспорт в текстовые форматы и так далее. Ну и желательно с минимальными затратами.

Я просмотрел форум, поверхностное понимание такое, что список программ мал - это:
-Аваланч
-Сайт спутник
-В [url=http://forum.razved.info/index.php?t=4001&amp;a=stdforum_view&amp;o=&st=0]этой теме[/url] еще упоминается RSS Handler, но как я понимаю, проект больше не поддерживается (и при этом изначально имел очень ограниченный функционал)

По первым двум еще не изучал, какой функционал по какой цене предлагают (хотя по сайтспутнику новости сми и соцсетей идут уже от 55 тыс. руб....). Подскажите, пожалуйста, что еще есть "на рынке", что имеет смысл рассматривать, при этом всякие RSS агрегаторы наверное стоит отложить в сторону, т.к. слишком "общий" продукт.

Если такая тема была, просьба указать или перенести мое сообщение туда, я не нашел именно такого обсуждения.

Заранее всем спасибо!
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Систем мониторинга Интернет довольно много. Они разные по функционалу и цене.

Лидеры рынка:

-- СайтСпутник - мониторинг "поисковиков", то есть, сайтов, имеющих поиск информации по сайту и выдающий структурированные результаты поиска. Ньюс-версия складывает новости в умные папки и создаёт из них дайджесты. Модуль Invisible обладает некоторыми возможностями поиска в "невидимом сегменте Интернета". Для эффективной работы потребует знания языков запросов поисковиков на продвинутом уровне.

-- WebSite Watcher - мониторинг изменений на страницах и появления новых страниц на сайтах. Имеет встроенные языки скриптов и плагинов, что при имении навыков программирования на Visual Basic 6.0 позволяет создавать на его базе собственные довольно продвинутые решения.

-- Visual Web Ripper - мониторинг онлайн баз данных. Для работы требует знания английского языка, так как не имеет русификации и русской справки. При наличии навыков программирования на VB.NET или C# позволяет создавать сложные приложения. Потребует знания XPath. Можно выгружать результаты в свою рабочую базу данных (также требуются программерские навыки).

-- Аваланч - мониторинг Интернета. Главная "фишка" - продвинутые возможности по мониторингу "невидимого Интернета". Из всей группы, пожалуй, наиболее дорогое решение.

Список далеко не исчерпывается этими 4-мя программами, но первые 3 из них, пожалуй, основные для "видимого Интернета". Последняя программа незаменима, если задумаетесь о серьёзном мониторинге "невидимого Интернета".

Выбор софта зависит от стоящих задач мониторинга и наличия денег.
Если хотите только мониторинг новостей, то достаточно будет СайтСпутника версии "Про".
Если хотите, чтобы новости ещё и сортировались - соответствующие новости попадали в нужные папки и формировались в дайджесты, то нужен будет СайтСпутник "Ньюс".
Если потребуется отслеживать изменения на конкретных страничках - берите WebSite Watcher - он самый продвинутый.
Если захотите мониторить онлайн базы данных или выгружать результаты работы в свою рабочую базу данных - присмотритесь к Visual Web Ripper.
Если есть желание серьёзно мониторить "невидимый Интернет" и есть деньги на Аваланч - покупайте его. Лучше на рынке, пожалуй, нет.

Что касается мониторинга RSS-потоков, то это задача уровня обычной почтовой программы. Для этого можно найти довольно много бесплатных приложений.
Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 877
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009

tungus1973 написал:
[q]
СайтСпутник - мониторинг "поисковиков", то есть, сайтов, имеющих поиск информации по сайту и выдающий структурированные результаты поиска. Ньюс-версия складывает новости в умные папки и создаёт из них дайджесты. Модуль Invisible обладает некоторыми возможностями поиска в "невидимом сегменте Интернета". Для эффективной работы потребует знания языков запросов поисковиков на продвинутом уровне.
[/q]

У Вас сведения пятилетней давности. Да, может СайтСпутник работать с поисковиками и встроенными в сайты поисками (это его отличие от других программ), но в нем давно уже можно эмулировать практически произвольные RSS с произвольных страниц, эмулировать RSS по запросу, а обычные RSS достаточно просто прописать в проекте. Не надо знать никаких языков запросов на продвинутом уровне для эффективной работы, просто, если Вы их знаете, то можете применить их в рамках СайтСпутника.

ara_367519
Долгожитель форума

Откуда: г. Пенза
Всего сообщений: 727
Рейтинг пользователя: 17


Ссылка


Дата регистрации на форуме:
4 дек. 2012

tungus1973 написал:
[q]
Аваланч - мониторинг Интернета. Главная "фишка" - продвинутые возможности по мониторингу "невидимого Интернета". Из всей группы, пожалуй, наиболее дорогое решение.
[/q]

Согласен с коллегой.. в некоторых моментах Аваланч - приносит хорошие результаты :blush: , коммерческая версия начинается от 750 тысяч рублей.. если нужен "серьезный" функционал, сумма будет значительно дороже.. можете поискать версию 2.5 - она вполне работоспособна, достаточна для знакомства.. ну либо зайдите на сайт https://start.avalancheonline.ru - ее можно использовать (стоимость около 5 тыс в месяц) :hi:

---
истина где-то рядом...
Игорь Нежданов
Модератор форума
Прагматик
Откуда: Советский Союз
Всего сообщений: 1025
Рейтинг пользователя: 13


Ссылка


Дата регистрации на форуме:
7 июня 2009

Janemp написал:
[q]
...софт, который мог бы помочь при решении такой задачи как автоматизация поиска и отслеживания определенной информации в новостном потоке.
Конечно, необходим какой-то набор функционала - добавление своих источников, поиск в найденном, экспорт в текстовые форматы и так далее. Ну и желательно с минимальными затратами.
...
Подскажите, пожалуйста, что еще есть "на рынке", что имеет смысл рассматривать, при этом всякие RSS агрегаторы наверное стоит отложить в сторону, т.к. слишком "общий" продукт....
[/q]


Многое зависит от объема потока. Если новой информации 5 - 7 недлинных сообщений в сутки, то вполне хватит ссылки на результаты поиска в Я и/или в G.... :) Но если много, то конечно нужна автоматизация. Только не обольщайтесь - если задачи специфические и не "массовые", то придётся допиливать под себя.

---
Есть вопрос - спрашивайте. На прямой вопрос будет прямой ответ...
Лаборатория Перспективных Разработок
Janemp
Молчун

Откуда: г.
Всего сообщений: 10
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
10 мар. 2015
tungus1973, спасибо большое!

"tungus1973: Если хотите, чтобы новости ещё и сортировались - соответствующие новости попадали в нужные папки и формировались в дайджесты, то нужен будет СайтСпутник "Ньюс"."

Хочется чего-то такого по первым впечатлениям. WebSite Watcher такого не умеет?

Просто как мне видится при первом осмотре в Сайтспутнике очень всего понагромаждено, что без стакана не разобраться. Какого-то нормального мануала я на сайте не вижу. Ну и цена за Ньюс на данном этапе многовато.

ara_367519, не подскажете, у Аваланча есть какой-то сайт с информацией по функционалу и стоимости, а то ничего не ясно, а указанная вами цифра в 750 тыр мягко говоря пугает

Игорь Нежданов, в том и дело, объемы-то будут расти, потому и вопрос автоматизации задач стоит. А вот допиливать ничего не хочется, да и не допилишь, в чужой продукт не влезть


А какие еще варианты есть (правда, на русском надо, с англ. сложно)?

P.S. не пойму, почему не работают HTML-ные теги у меня, в окне отправки сообщения написано "Использование HTML запрещено". Где это изменить?

---
кому да, а кому и не очень ©
ara_367519
Долгожитель форума

Откуда: г. Пенза
Всего сообщений: 727
Рейтинг пользователя: 17


Ссылка


Дата регистрации на форуме:
4 дек. 2012

Janemp написал:
[q]
ara_367519, не подскажете, у Аваланча есть какой-то сайт с информацией по функционалу и стоимости, а то ничего не ясно, а указанная вами цифра в 750 тыр мягко говоря пугает
[/q]

Я Вам же указал сайт Аваланча... там все указано :wink:

Прикрепленный файл (Безымянный.J, 190073 байт, скачан: 884 раза)
---
истина где-то рядом...
ara_367519
Долгожитель форума

Откуда: г. Пенза
Всего сообщений: 727
Рейтинг пользователя: 17


Ссылка


Дата регистрации на форуме:
4 дек. 2012
Стоимость Аваланча в 750 далеко не предел :laugh: все зависит от Ваших потребностей и функционала, который Вам будет необходим (или уже необходим) по работе.. в этом абсолютно Игорь Нежданов прав.. идеального варианта пока нет, под личные нужды придется допиливать :hi:

---
истина где-то рядом...
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009

Janemp написал:
[q]
Если хотите, чтобы новости ещё и сортировались - соответствующие новости попадали в нужные папки и формировались в дайджесты, то нужен будет СайтСпутник "Ньюс"."

Хочется чего-то такого по первым впечатлениям. WebSite Watcher такого не умеет?
[/q]
У WebSite Watcher есть "виртуальные папки", в которые можно собирать новости, да уж больно не гибкие они. СайтСпутник версии "Ньюс" в этом плане куда как более продвинут.
Впрочем, если умеете программировать на уровне Visual Basic 6.0, то сможете сделать на базе WebSite Watcher свой собственный универсальный инструмент. Справка к программе довольно подробная, на русском языке, выложена на сайте разработчика. В ней в том числе очень подробно описан процесс создания скриптов и плагинов.

Вот прямые ссылки на файлы справки и мануала:
Русский help-файл для WebSite-Watcher
Manual на русском (PDF)
Janemp
Молчун

Откуда: г.
Всего сообщений: 10
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
10 мар. 2015
ara_367519,

Да, сайт посмотрел, спасибо, но не сказать, что все указано, по ценнику ничего (если у Сайтспутника избыток информации, то тут наоборот выходит). Не удивлюсь, если они за один и тот же функционал разным обратившимся разную цену предлагают. Странно выглядит такая скрытность)

Вообще отсутствие пределов вверх по цене - это понятно. Всегда же хочется какой-то удобоваримый предел по цене в строну, ближе к нулю :laugh: Мечты...

tungus1973, огромное спасибо за инфо и ссылки!

---
кому да, а кому и не очень ©
<<Назад  Вперед>>Страницы: 1 2 3 4
Печать
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Софт для конкурентной разведки »   Программы автоматического мониторинга
RSS

Последние RSS
Англоязычный интерфейс программы "Сайт Спутник"
Учебник по конкурентной разведке
Конкурентная разведка: маркетинг рисков и возможностей
Книга "История частной разведки США"
Книга "Нетворкинг для разведчиков"
Поиск и сбор информации в интернете в программе СайтСпутник
Новые видеоуроки по программе СайтСпутник для начинающих
Технологическая разведка
SiteSputnik. Мониторинг Телеграм
СайтСпутник: возврат к ранее установленной версии
SiteSputnik. Доступ к результатам работы из браузера
Анализ URL
Браузер для анонимной работы
Топливно-энергетический комплекс
Профессиональные сообщества СБ
Несколько Проектов в одном, выполнение Проектов по частям
SiteSputnik-Bot: Боты в программе СайтСпутник
К вопросу о телеграм
SiteSputnik: Автозамены до и после Рубрикации или Перевода
Демо-доступ к ИАС социальных сетей

Самые активные 20 тем RSS