Обновления программы

Форум Сообщества Практиков Конкурентной разведки (СПКР)

Конкурентная разведка, Бизнес-разведка, Корпоративная разведка,
Деловая разведка по открытым источникам в бизнесе.
Работаем строго в рамках закона.

Дезинформация и активные мероприятия в бизнесе
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Форум программы для мониторинга Интернета - Аваланч »   Обновления программы
RSS

Обновления программы

  Вперед>>Страницы: 1 2 3
Печать
 
Vinni
Администратор

Всего сообщений: 2710
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009
Тебе повезло :smile: У них на www.expert.ru/topics/strategy/ стал единый формат новостей

У меня сработал такой шаблон для первой страницы
<div class="announce">(...)<p><span>«</span>(...)<li><a href="(url)">(title)</a></li>(...)</div>

ну и можно поступить по-простому для чтения новостей с других страниц
Сделать источник групповым и добавить к нему подчиненные источники, указав тот же шаблон, но ссылку вида
www.expert.ru/topics/strategy/pageN/ где N - номер страницы

petryashov
Администратор

Откуда: Москва
Всего сообщений: 490
Рейтинг пользователя: 9


Ссылка


Дата регистрации на форуме:
7 июня 2009

Vinni написал:
[q]
Сделать источник групповым и добавить к нему подчиненные источники, указав тот же шаблон, но ссылку вида
[/q]

Брр... Не понял, что есть групповой источник :binocular:
Vinni
Администратор

Всего сообщений: 2710
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009

petryashov написал:
[q]
Не понял, что есть групповой источник
[/q]


Выбрав источник в Спайдере и нажав правую кнопку мыши можно увидеть меню из одного пункта "Добавить источник в группу".
Щелкни по нему и сам увидишь.

Собственно посмотри на предустановленные источники - Яндекс. Он уже групповой и включает несколько других источников.
Berckut
Новичок (писатель)

Всего сообщений: 10
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
15 июня 2009

Vinni написал:
[q]


Berckut написал:
[q]
Хотелось бы увидеть вот какое изменение:
Большинство сегодняшних сайтов имеют элементы, которые появляются случаным образом на странице, например, фотография из фотогалереи, банер с рекламой и т.д. Так как контрольная сумма берётся не полученного после обработки текста новости, а со всей страницы, то постоянно идёт ложные срабатывания - Авалач считает, что новость обновилась и заслуживает нового внимания. В результате, приходится каждый раз просматривать все новости заново.
[/q]


Тут выход только один - писать шаблон выделения новости как таковой, чтобы в новость включался только ее текст.
[/q]

В том-то и дело, что, насколько я понял, контрольная сумма берётся не с новости, а со всей страницы. При следующем сборе новостей:
- спайдер берёт страницу
- вновь снимает с неё (а не с новости) контрольную сумму
- смотрит, что новость с таким урлом уже была
- сравнивает контрольные суммы этих двух "новостей", а они естественно разные
- и оказывается, что "новость" обновилась, хотя реально, изменилась не новость, а кайма, которая находится вокруг этой новости на странице.

Возможно я ошибаюсь в алгоритме работы, но исходил из следующего:
У меня есть две одинаковые новости (сравнимал файлы, которые сохранились в хранилище). Идём в базу данных и смотрим котрольные суммы этих новостей - они разные. Причём такая проблема есть только с сайтами, на которых выводятся случайные элементы на странице.
Vinni
Администратор

Всего сообщений: 2710
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009

Berckut написал:
[q]
В том-то и дело, что, насколько я понял, контрольная сумма берётся не с новости, а со всей страницы.
[/q]


Если так, то это явно недоработка - напишите Масаловичу про нее.
Berckut
Новичок (писатель)

Всего сообщений: 10
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
15 июня 2009
Проблема снялась, когда скачал новую версию. Там всё нормально :)
Vinni
Администратор

Всего сообщений: 2710
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009
случайно увидел такую страницу про Аваланч - _ttp://inf-sec.blogspot.com/2011/09/avalanche-osint-razvedka.html
а на avalanche25.livejournal.com/ можно посмотреть информацию про новые фичи, которые в нем появились :wink:

Vinni
Администратор

Всего сообщений: 2710
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009
кстати, интересующимся стоит подписаться на этот блог - обещана серия статей про Аваланч - _ttp://inf-sec.blogspot.com/2011/09/blog-post_14.html

[q]

...
Собираюсь сделать большой обзор известной программы для мониторинга информации Avalanche PE. Договорился с автором (Андреем Игоревичем Масаловичем) о ограниченном праве использовать закрытую документацию, и может быть даже будут комментарии автора. В первую очередь планируется скорее не просто обзор программы (и развернутое упоминание о ее менее известных и более продвинутых товарках) но и сравнение с существующим разнообразным бесплатным инструментарием мониторинга. Уверен, что взгляд со стороны экономической эффективности мониторинга с использованием Аваланча и бесплатных средств может быть полезен как для обоснования необходимости покупки той или иной версии Аваланча, так и для оценки необходимости его приобретения вообще (может быть, персональная версия программы не решает Ваши задачи настолько лучше насколько дороже обходится, естественно, с учетом всех затрат времени). В итоге попытаюсь сделать анализ эффективности через CAPEX\OPEX оперируя стоимостью Аваланча и зарплатными предложениями на вакансии аналитиков.
...
[/q]

Vinni
Администратор

Всего сообщений: 2710
Рейтинг пользователя: 22


Ссылка


Дата регистрации на форуме:
5 июня 2009
Николаич
Модератор форума

Откуда: г. Ростов-на-Дону
Всего сообщений: 768
Рейтинг пользователя: 24


Ссылка


Дата регистрации на форуме:
7 июня 2009
Давно не запускал...
Очень давно :smile:
Сегодня попробовал, пишет "Нет доступа к базе данных"
Все снес, переустановил, благо у меня и лицензионный ключ есть, и XP SP3.
Но нет, опять "Нет доступа к базе данных"
Что может быть никто не знает?
У меня правда дистрибутив от 20.09.2010 г. (получил его в этот день) и больше не обновлял.
  Вперед>>Страницы: 1 2 3
Печать
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Форум программы для мониторинга Интернета - Аваланч »   Обновления программы
RSS

Последние RSS
Open Source Intelligence (OSINT) Tools and Resources Handbook
Top tips on gathering information about companies by using free online sources
Новое на блоге HRразведка
Безопасность данных в MS Access
Слово как улика
20 Recon and Intel Gathering Tools used by InfoSec Professionals
What’s Changed?
10 альтернативных поисковиков
Ситуационный центр главы Республики Коми
Развёртывание ситуационных центров на базе технологии Avalanche
Как принимать сложные решения. Советы бывшего оперативника ЦРУ.
Открытая информация о "Новичке" из сети интернет.
Ген. директор "ОЗХО" Ахмет Узюмдж о "Новичке" и хим. атаке в Сирии
Онлайн-сервисы для Twitter
Коллекция для Twitter
Приложение Opera VPN закрывается
О работе разведки
Deep web и 11 поисковиков по нему
Об изначальной "лживости" любых документов
Обновление на блоге HRазведка

Самые активные 20 тем RSS
Стандартные источники информации в СайтСпутнике
Слово как улика
Open Source Intelligence (OSINT) Tools and Resources Handbook