http://forum.razved.info//index.php?t=2205 Создание корпоративной или профессиональной сети для коллективного сбора, мониторинга и анализа информации силами клиентов ru http://forum.razved.info//index.php?t=2205&p=25515#pp25515 http://forum.razved.info//index.php?t=2205&p=25515#pp25515 <br>petryashov написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>1. есть ли какие-то ограничения на количество столбцов и строк в этом отчете? <div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br />Нет.<br /><br>petryashov написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>2. можно ли как-то задавать параметры отчета (например, чтобы в него попали только данные за определенный период времени)? <div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br />Пока нет, но это не проблема. Буду делать оператор:<br /><br />^^Отчет;<br /><br />Прямо в нем или в файле, который будет связан с этим оператром, можно будет задавать параметры, например:<br /><br />^^Отчет Дата&gt;25.11.2011; или ^^Отчет Дата: за 7 дней;<br /><br />Возможно, доживём до Мастера формирования отчетов. Алексей Мыльников Wed, 30 Nov 2011 16:40:01 +0400 http://forum.razved.info//index.php?t=2205&p=25509#pp25509 http://forum.razved.info//index.php?t=2205&p=25509#pp25509 <b> 2 Алексей Мыльников</b><br />Отличная функция, спасибо!<br />Вопросы вот какие возникли:<br /><br />1. есть ли какие-то ограничения на количество столбцов и строк в этом отчете? <br />2. можно ли как-то задавать параметры отчета (например, чтобы в него попали только данные за определенный период времени)? petryashov Wed, 30 Nov 2011 12:16:25 +0400 http://forum.razved.info//index.php?t=2205&p=25403#pp25403 http://forum.razved.info//index.php?t=2205&p=25403#pp25403 В версии 7.4.1.5 от 28.11.11 можно будет получать "<b>Статистику по пакету</b>" подобную той, что изображена на картинке ниже.<br /><br /><a href="http://sitesputnik.ru/Help/Pic/F/StatPacket.GIF" target=_blank><img src="http://sitesputnik.ru/Help/Pic/F/StatPacket.GIF" alt="" name="itag" border=none></a><br /><br /><b>Строки Таблички - Рубрики</b>, задействованные в пакете (в задании на мониторинг источников информации).<br /><b>Столбцы Таблички - даты </b>выполнения мониторинга.<br /><br />В нашем случае пакет выполнял мониторинг новостей по 50 источникам из сценария "ТВ и РАДИО станции", описанного здесь на форуме - forum.razved.info/index.php?t=2292 <br /><br />В Рубрики попадала информация об упоминании в источниках четырех парламентских партий: "Единая Россия", КПРФ, ЛДПР, "Справедливая Россия".<br /><br />Табличка показывает динамику упоминаний этих партий в задействованнах источниках в период с 18.11.11 по сегодняшнее число в фиксированные моменты времени.<br /><br />В общем случае, источники и Рубрики определяются пользователем, то есть могут быть произвольными. Данная табличка носит чисто демонстрационный характер. Для аналитика, думаю что, - это инстумент для решения своих исследовательских задач.<br /><br />Чтобы опробовать данную функцию в <b>SiteSputnik News</b> следует установить галочку в параметре "Собрать статистику по пакету в Рубриках" (см. тонкую красную стрелку на картинке из первого сообщения данной темы)<br /> Алексей Мыльников Mon, 28 Nov 2011 11:34:32 +0400 http://forum.razved.info//index.php?t=2205&p=24867#pp24867 http://forum.razved.info//index.php?t=2205&p=24867#pp24867 Понятно теперь. Спасибо. CI-KP Tue, 15 Nov 2011 21:24:39 +0400 http://forum.razved.info//index.php?t=2205&p=24863#pp24863 http://forum.razved.info//index.php?t=2205&p=24863#pp24863 <br>CI-KP написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>А что - есть проблема, что СайтСпутник не успевает обработать источники? <br />А как тогда потом за ним аналитик успевает?<br />Про нападения я, честно говоря. вообще не понял. Мне кажется, что если есть угроза нападения (виртуального, как я понимаю) - надо переставить комп за пределы корпоративной сети и никто даже не узнает, куда нападать. <div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br />В процессе работы СайтСпутник открывает поисковые страницы, RSS-потоки, произвольные страницы (эмуляция RSS-потоков). Есть пользователи, у которых их сотни. Затем реально скачивает страницы - их бывает тысячи. Затем идет выделение контента ссылок, отсев неуникальных контентов, раскладывание по Рубрикам. Рубрик бывает сотни, в некоторых Рубриках бывает более 100 правил. На все это требуется время. Есть предприятия, оставляющие работать СайтСпутник на всю ночь. В процессе работы появляется необходимость в подключении новых источников, задании новых запросов, в создании новых Рубрик. Поэтому скоростью надо заниматься - это актуально практически в любой системе.<br /><br />Аналитик уже работает с информацией, оформленной в тематические новостные ленты, их можно назвать дайджестами, только каждая новость полнотекстовая. Успеваемость аналитика зависит от количества собранной информации, её чистоты (минимизации мусора и дублирования информации), от темы, по которой он работает и других составляющих. Поэтому я не понял вопрос: "... как потом за ним успевает аналитик".<br /><br />По нападению. Кроме компьютеров нападению еще может подвергнуться сайт. Если Вы имеете online-систему, то есть, работаете через сайт, то при атаке на сайт Ваша работа может быть парализована. При подходе, примененным в СайтСпутнике, как Вы правильно заметили, компьютеры можно вынести за пределы корпорации. Именно это я и имел ввиду. Также можно вынести и область обмена информацией за пределы корпоративного сайта и никто не узнает куда нападать. Алексей Мыльников Tue, 15 Nov 2011 17:28:18 +0400 http://forum.razved.info//index.php?t=2205&p=24853#pp24853 http://forum.razved.info//index.php?t=2205&p=24853#pp24853 А что - есть проблема, что СайтСпутник не успевает обработать источники? <br /><br />А как тогда потом за ним аналитик успевает?<br />Про нападения я, честно говоря. вообще не понял. Мне кажется, что если есть угроза нападения (виртуального, как я понимаю) - надо переставить комп за пределы корпоративной сети и никто даже не узнает, куда нападать. CI-KP Tue, 15 Nov 2011 12:17:00 +0400 http://forum.razved.info//index.php?t=2205&p=24844#pp24844 http://forum.razved.info//index.php?t=2205&p=24844#pp24844 <br>CI-KP написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>Если мне кто-то объяснит, какие проблемы и почему это решает <div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br /><ul><li> Увеличивается производительность: в единицу времени можно обработать больше источников и ссылок (новостей). За счет возможности решения задач на нескольких компьютерах.</ul><br /><ul><li> Повышается надежность и устойчивость. За счет снижения нагрузки на отдельный СайтСпутник, отказ одного СайСпутника приведет к тому, что можно будет его перезапустить, достачно быстро получить и использовать полученную информацию. Можно принебречь информацией с одного СайтСпутника. Практически исключается ситуация: машина всю ночь работала, под утро по техническим или другим причинам вышла из строя и аналитик не получил информацию, которую он должен обработать и передать начальству.</ul><br /><ul><li> Подобная система практически неуязвима при нападении. За счет - цель размыта: компьютеры могут находиться где угодно, папки импорта и экспорта тоже, можно дублировать информацию за счет создания дублей папок, менять местоположения папок.</ul><br /><ul><li> Можно собрать больше информации. За счет просмотра большего количества источников. Здесь имеются ввиду источники коллег, другого подразделения предприятия, другие пакеты.</ul><br /> Алексей Мыльников Tue, 15 Nov 2011 10:52:52 +0400 http://forum.razved.info//index.php?t=2205&p=24839#pp24839 http://forum.razved.info//index.php?t=2205&p=24839#pp24839 Алексей, спасибо. Но Вы, по сути, повторили то, что написано в инструкции. Мой вопрос возник как раз по мотивам ее прочтения и является попыткой "синхронизировать" ситуацию с проблематикой, которую мне приходилось видеть.<br />Дело в том, что я, к сожалению, не занимаюсь лично ни одним из описанных Вами мероприятий, поэтому не могу оценить практическую полезность предложенного решения. А мне бы хотелось это сделать.<br />Если мне кто-то объяснит, какие проблемы и почему это решает - я бы мог сделать пост в своем блоге, рассказав о нововведениях программы. Т.е., я понимаю. что раз это сделали, то это, наверное, хорошо, но мне не понятно - когда и почему это востребовано. CI-KP Tue, 15 Nov 2011 09:53:58 +0400 http://forum.razved.info//index.php?t=2205&p=24838#pp24838 http://forum.razved.info//index.php?t=2205&p=24838#pp24838 <br>CI-KP написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>Спасибо. Верно ли я понял, что таким образом может формироваться единая база данных для всего предприятия? Если да - то сколько времени займет при работе в локальной сети "выравнивание" информации на всех задействованных машинах? <br />Что произойдет, если два компьютера посчитают новой одну и ту же ссылку, ввиду того, что базы не обновились своевременно?<div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br />Здесь речь может идти о единой базе данных новостей, далее ЕБДН, собираемых на предприятии или объекте другого вида.<br /><br />Если, смотрите сообщение #2, Вы работаете по <b>Варианту 1</b> (все на одного): десять СайтСпутников собирают новости (формируют чистые потоки), а потом передают их на одиннадцатый, то ЕБДН формируется на одной машине (одиннадцатой), которая называется "СайтСтанцией". Соответственно, на "СайтСтанции" всё "выравнено" и своевременно обновлено. На десяти машинах "СайтСпутниках" ведутся локальные базы данных новостей (ЛБДН). ЛБДН нужны для того, чтобы облегчить работу "СайтСтанции", - с использованием ЛБДН, в частности, поисходит отсев дублей новостей с одинаковым контентом в рамках одного компьютера.<br /><br />При работе по <b>Варианту 3</b> (все для всех), БД будут разными, в зависимости от настроек, прописанных аналитиком, а именно: смотря что на каждом компьютере прописано на экспорт, что на импорт. Соответственно, информация сформированная на конкретной машине и импортируемая ею и будет попадать в БД.<br /><br />Работа по <b>Варианту 2</b> (каждый на себя), похожа на Вариант 3, только каждый "сам себе аналитик" - экспортирует то, что считает нужным, импортирует то, что можно (другие экспортировали) и нужно самому. Рационально, конечно, спланировать совместную работу независимых пользователей.<br /> Алексей Мыльников Tue, 15 Nov 2011 02:12:16 +0400 http://forum.razved.info//index.php?t=2205&p=24833#pp24833 http://forum.razved.info//index.php?t=2205&p=24833#pp24833 Спасибо. Верно ли я понял, что таким образом может формироваться единая база данных для всего предприятия? Если да - то сколько времени займет при работе в локальной сети "выравнивание" информации на всех задействованных машинах? <br />Что произойдет, если два компьютера посчитают новой одну и ту же ссылку, ввиду того, что базы не обновились своевременно? CI-KP Mon, 14 Nov 2011 23:44:36 +0400