Форум Сообщества Практиков Конкурентной разведки (СПКР)

Даже не мысли есть, а уже готовые решения.

А) В идеале лучше воспользоваться специализированной программой типа "Семантический архив" или "I2". "СемАрхив" хранит данные сразу в двух видах: в виде сетей связей и в виде текстового досье: появляются новые данные, они сразу же отображаются как в виде сети, так и в виде текстового досье, без какой-либо дополнительной обработки. У "I2" великолепные возможности визуализации связей, но, увы, нет хранения данных в виде "семантическая wiki". Обе программы далеко не бюджетные, но крайне удобные. (VisuaLinks не рекомендую - сильно уступает приведённым аналогам. Есть ещё разработка ЦРУ Palantir - самое крутое ПО среди аналогов, но стоит, как "Boing", и там не всё ясно с безопасностью хранимых данных).

Б) Бюджетные варианты будут хранить информацию несвязанно либо в виде схем, либо в виде wiki. Единственное их преимущество - дешевизна или бесплатность. При больших объёмах данных (примерно года через 2-3 после начала активной КР-работы) эти программы начнут приносить больше головной боли, нежели выигрыша во времени.

Схемы связей можно рисовать в графическом редакторе типа Microsoft Visio, OpenOffice Draw или каком-либо другом аналоге. Поначалу это будет несложно. Проблемы будут тогда, когда данных станет очень много - схемы тогда получатся громоздкими. При поступлении новых сведений нужно будет передвигать множество элементов, чтобы втиснуть новые данные между старыми элементами. При этом придётся отслеживать читаемость схем - чтобы стрелки и элементы не перекрывались. Та ещё задачка...

Для работы в режиме wiki подойдут программы типа KeyNote, Mars Notebook, AM-Notebook. Последняя позволяет хранить в одной вики и текстовые документы и таблицы и схемы (но опять же, все эти данные будут храниться разрозненно). При работе с этими программами вы неизбежно столкнётесь с проблемой древовидной классификации. Поскольку данные хранятся в виде одномерного "дерева", то и дело придётся решать, куда поместить те или иные данные - в одну или в другую ветку. Нередко придётся данные дублировать сразу в нескольких ветках.

В) Отдельно стоит отметить Cronos + Cross, которые являются недорогим средством хранения информации и автоматического построения схем. Плюсы этой системы в дешевизне, в открытости базы данных и в невысоких требованиях к ПО (хранение данных довольно компактное). При должной сноровке можно построить базу так, что она будет хранить и данные и отрисовывать схемы по ним. Проблемы, которые возникнут при работе с этой системой:
1) Потребуется существенное время (до нескольких лет), чтобы научиться самостоятельно создавать качественное хранилище данных.
2) При большом числе данных - большое время поиска по базе. Откровенно говоря, архитектура базы довольно устаревшая, медленная. Допустим, поиск персоны в Cronos в 10 тыс. базах занимает 20..60 минут (зависит от мощности компьютера и от количества одновременных подключений к базе). Аналогичный поиск персоны в "Семантическом архиве" в тех же самых 10 тыс. базах занимает 1..5 секунд. То есть, сотрудники, работающие с Cronos, будут успевать сделать за рабочий день в десятки раз меньше.

Резюме: Пожалуй, вот эти приведённые мной три варианта наиболее подходят для хранения и отображения данных КР:
1. Бесплатные "Mars Notebook" + "OpenOffice Draw", но хранящие лишь несвязанные и дублирующиеся данные.
2. Недорогой, но малофункциональный комплект "Cronos" + "Cross".
3. Удобные и многофункциональные, но дорогие "Семантический архив" / "I2".

В продолжение - единственный автор (может я кого-то и упустил, но за лет 5-6 попалось только это), который писал на эту тему - это журналист-расследователь Голубицкий . Вот в этой серии статей (он сейчас из этого семинар сделал и продвигает). expert.ru/d-stroke/2011/08/minoa-chast-6/
Но его методы накопления, стуктуризации и обработки информации достаточно специфичны.
Хотелось бы еще что-то увидеть на эту тему..... Но все авторы дружно озабочены только поиском информации :(

tungus1973 написал:

[q]

Увы, нет на рынке дешёвого "Семантичсекого архива"

[/q]

Кстати, а что там с веб версией?

Ну и i2 во многих вопросах может помочь..вопрос в том, что Вы от нее хотите! Для анализа она очень подходит.. Даже банальную детализацию нескольких лиц, с легкостью выполните.. А если посмотреть на плагины от Главкод, то сразу другое мнение станет)).. Только вот..цена вопроса..

yarris написал:

[q]

Доброй ночи.......

[/q]

По причине того, что каждый специалист видит по своему, универсальную структуру хранилища сформировать не получится. Попытки реализации такого бюджетного решения были, в том числе и на данном форуме. В том числе и на Хроносе - посмотрите в разделе "Софт для конкурентной разведки". Если результаты своих исследований оформлять в виде строго структурированных справок, то может статься, что хватит файлового архива + Архивариус. А вообще, исходите при формировании шаблонной структуры из ваших конкретных задач и предпочтений.

fellix13 написал:

[q]

Веб-версия "Семархива" - это надстройка над его ядром. То есть, это всего лишь иной интерфейс работы с системой. Она стоит столько же, сколько и "настольная" версия.

[/q]

А что не стали модель SaaS развивать, как тот же Аваланч?

В первом приближении скрестить OneNote и TheBrain
OneNote накопление плохоструктурированной информации с вики-ссылками.
TheBrain - связь объектов к которым можно прицепить тексты из OneNote.
У обеих программ встроенный поиск и тегирование.

Лично я для визуализации схем использую такую штуку, как MindMeister. Платная, но интуитивно понятная, ненужные узлы сети можно схлопнуть. Есть версия для мобильных устройств.
Для хранения данных в формате "как есть" пользовался Evernote, у которого хорошо развита система тегов, но потом отказался от него из-за жадности разработчиков, придумывающих все новые и новые ограничения для бесплатной версии..Потом был Google Keep, от которого отказался из-за глючности. Сейчас пользуюсь MS OneNote, пока без замечаний.

Для анализа и визуализации данных использую Microsoft Power BI.
В качестве СУБД использую MS Access

Могу поделиться своим опытом работы с большими массивами данных из разных источников и на нескольких языках.
Как обычно, появилась задача, нужно было спешно решать, а времени осваивать новый инструментарий буквально неделя, поэтому пришлось обходиться 10% функциональности. Все мои предыдущие наработки толком не срабатывали, т.к. "заточены" под исследование корпораций и физических лиц, а тут нужно было ни много, ни мало, исследовать всю администрацию Президента РФ в условиях ее реструктуризации, причем заказчик хотел построить сразу несколько проекций происходящего: на основании открытых источников русскоязычных, английских и китайских; как события воспринимаются и какие сведения доступны обывателям, политологам и предположительно спецам. Понятно, что последние две группы имеют доступ не только к открытым источникам, поэтому и работа велась с массивами разного происхождения + до какой-то степени приходилось предугадывать какие сведения из human sources эти люди могли бы получить. Из дополнительных пожеланий - построить прогностическую модель для этих 9 целевых аудиторий (как по их мнению события будут развиваться, кто останется, кто уйдет, какие новые лица появятся). Мрак. Я с таким за 10 лет работы никогда не сталкивался, и команда моя, выражаясь профессиональным языком, охренела :)
Так вот, есть такой программный продукт QDA Miner. И его спутники Web collector и SimStat. Доступны бесплатные и триальные версии, но я не стал мелочиться и спустя три часа тестирования купил полную платную версию. Честно скажу, хотя итоговые результаты нашей работы могли бы быть лучше, сейчас, спустя месяцы я уже знаю, что сделал бы по-другому, но программный продукт хорош.
Что можно реально сделать с помощью QDA Miner?
- Орагнизовать "свалку" исходников с возможностью поставить сквозные теги к темам (например, я теггировал все упоминания географических регионов, компаний, людей, событий, дат - все это в программе делается полуавтоматически)
- Создавать отчеты по тегам. Например, вполне удобоворимый вордовский документ выгрузить все абзацы текста с упоминанием соответсвующего объекта. Что приятно, один и тот же абзац может быть теггирован несколько раз. Так, например, какой-то факт мог у меня быть с тегами, отражающими основных участников, географии события, языка, источника и т.п.
- Есть неплохой инструмент поиска сообщений в социальных сетях с возможностью качественного экспорта в Excel с последующей обработкой хоть в том же QDA Miner или с использованием альтернативных инструментов.
Это те самые 10% функциональности, которые мне удалось быстро освоить и которые мне понравились (по крайней мере, программа меня не подвела и сделала все то, что я от нее ожидал).

С уважением,
Дмитрий

В Нижнем Новгороде есть такой специалист Алексей Рюмин, который ведёт обширный блог, посвящённый контент-анализу. В блоге он делится своими практическими наработками в этой области. На отдельной станице есть список инструментов контент-анализа и статьи-обзоры по установке и использованию этих программ. Желающие могут пройти учебный курс у Алексея или заказать исследование. Он также любезно выложил краткий видео-курс, бесплатный учебник и реальный пример исследования мнений иностранцев о России, который он проводил вместе с коллегами.

Возможности CronosPRO можно заметно расширить используя входные формы с Lua-скриптами.

В "Семантическом архиве" есть роботы, которые собирают связи из разных социальных сетей: Одноклассники, Фейсбук, ВКонтакте, Мой мир, Инстаграмм, LiveJournal. Потом все связи можно посмотреть в одной схеме. Там чётко видны персонажи, которые плотно дружат в разных сем.сетях; то есть, это не просто виртуальные "друзья", а скорее всего хорошо знакомые друг с другом люди.
Каких-либо аналогичных дешёвых программ не знаю. Может кто из коллег подскажет.

Афраний написал:

[q]

Коллеги, подскажите, есть ли какой-либо не ручной способ выявления общих связей у персонажей в одноклассниках и фейсбуке?

[/q]

А вообще посмотрите на блоге Елены Лариной в разделе Web 2.0 для конкурентной разведки.
_ttp://hrazvedka.ru/web2/web-2-0-dlya-konkurentnoj-razvedki.html