http://forum.razved.info//index.php?t=5287 Поиск адресов RSS-потоков и адресов страниц (не RSS), несущих потоки новой информации на заданную тему ru http://forum.razved.info//index.php?t=5287&p=55501#pp55501 http://forum.razved.info//index.php?t=5287&p=55501#pp55501 Обновился.<br />Даже только ради 08.08.08. <img src="http://forum.razved.info//smiles/cool.gif" align=absmiddle alt=":cool:"> Ed Mon, 21 Sep 2015 15:14:01 +0300 http://forum.razved.info//index.php?t=5287&p=55499#pp55499 http://forum.razved.info//index.php?t=5287&p=55499#pp55499 <ul><font color="blue"><font size="4">SiteSputnik NewStreams</font></font><br /><br /><br />Вышла Бета-версия нового варианта комплектации программы СайтСпутник - <a href="http://sitesputnik.ru/Help/I/i_SiteSputnik_NewStreams.docx" target=_blank>SiteSputnik NewsStreams</a>. Обновитесь до 8.8.8.<br /><br />Назначение: <br /><br />• Организация и автоматизация поиска Источников информации: именно <u>Источников</u>, а не самой информации.<br />• Мониторинг интернета на предмет появления в нём Источников, которые могут быть интересны.<br />• Модуль +NewStreams можно назвать поставщиком Источников для <b>SiteSputnik News</b> или других программ.<br />• Его также можно использовать для более глубокого мониторинга открытых источников интернета.<br /><br />Настройки находятся на отдельной вкладке и выглядят следующим образом:<br /><br /><a href="http://sitesputnik.ru/Help/Pic/NewStreamsOptions.jpg" target=_blank><img src="http://sitesputnik.ru/Help/Pic/NewStreamsOptions.jpg" alt="" name="itag" border=none></a><br /><br />Подробнее о них и пошаговая инструкция применения <b>SiteSputnik NewStreams</b> на ссылке _http://sitesputnik.ru/Help/I/i_SiteSputnik_NewStreams.docx.<br /><br /> Алексей Мыльников Mon, 21 Sep 2015 10:54:57 +0300 http://forum.razved.info//index.php?t=5287&p=53222#pp53222 http://forum.razved.info//index.php?t=5287&p=53222#pp53222 Спасибо, Алексей Борисович! <img src="http://forum.razved.info//smiles/hi.gif" align=absmiddle alt=":hi:"> tungus1973 Fri, 03 Oct 2014 08:01:56 +0400 http://forum.razved.info//index.php?t=5287&p=53219#pp53219 http://forum.razved.info//index.php?t=5287&p=53219#pp53219 <br>tungus1973 написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>Посмотрел новый функционал в работе. Списки источников пополняются.<div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br />Да, сначала новых источников побольше, потом поменьше, так как отсеиваются ранее найденные источники, то есть, всё сделано "по-сайтспутниковски". Практическое значение этой функции всё-таки в <b>SiteSputnik News</b> и выше.<br /><br>tungus1973 написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>мне несколько непонятен механизм коллекционирования потоков. Новые источники собираются только для тех новостей, которые попали в рубрики? Если ссылка не попала ни в одну рубрику, то она, как источник, не засчитывается? Или я неправильно понял?<div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br />Нет, не так. <b><font color="red">Всё</font></b>, а именно, все ссылки, которые открываются и скачиваются, и все <b>адреса ссылок</b>, которые находятся в контенте этих ссылок, - проверяется на предмет принадлежности к RSS-потокам и URL-потокам. Для этого по <b>адресам ссылок</b> тоже надо сделать подкачку, чтобы проанализировать контент (можно и далее углубиться, но это не практично).<br /><br />Что такое RSS-поток знают все. <br /><br />Кроме RSS-потоков, в интернете есть ещё масса страниц <b>с краткими описаниями</b> (или даже только заголовками) новостей или сообщений <b>и ссылками на их полное содержание</b>. Они в программе СайтСпутник называются <b>URL-потоками</b>.<br /><br />Вот эти два вида потоков и ищутся, если это прописано в настройках, при выполнении Проекта и на этапе поиска (открытия прописанных в Проекте источников), и на на этапе скачивания найденных в источниках новых ссылок, и на этапе подкачки комментариев.<br /><br />То есть, Вы поняли не так, но мыслите по-своему, мыслите вперед и мыслите правильно. Если то, о чем написано выше делать с контентами только тех ссылок, которые попали в Рубрики, то будем "добывать" меньше источников, но вероятность, что они будут востребованы в текущем Проекте больше. У меня другие задумки на перспективу, но Вашу буду иметь ввиду, хотя в плане её практичности имею некоторые сомнения.<br /><br />В любом случае, поиск новых источников "попутно" при выполнении Проектов или целенаправленно на мой взгляд может быть полезен.<br /> Алексей Мыльников Thu, 02 Oct 2014 18:08:15 +0400 http://forum.razved.info//index.php?t=5287&p=53217#pp53217 http://forum.razved.info//index.php?t=5287&p=53217#pp53217 Посмотрел новый функционал в работе. Списки источников пополняются.<br /><br />Алексей Борисович, мне несколько непонятен механизм коллекционирования потоков. Новые источники собираются только для тех новостей, которые попали в рубрики? Если ссылка не попала ни в одну рубрику, то она, как источник, не засчитывается? Или я неправильно понял? tungus1973 Thu, 02 Oct 2014 14:47:05 +0400 http://forum.razved.info//index.php?t=5287&p=53189#pp53189 http://forum.razved.info//index.php?t=5287&p=53189#pp53189 <font size="3"><b>Замечание от 21.01.2015</b>. <br />В течение года описанный в этом топике "Блок поиска новых источников" развился до нового варианта комплектации <b>SiteSputnik NewStreams</b>.<br />Подробнее в 5-ом топике этой темы - forum.razved.info/index.php?t=5287&amp;p=55499#pp55499 <br /><hr width="50%" align=left></font><br /><br /><ul>Новый вид поиска в <b>программе СайтСпутник</b> версии 8.3.3 от 01.10.2014 - это <u><b>поиск источников информации</b> на заданную тему</u>, то есть, поиск страниц и ресурсов, на которых затем будет отслеживаться появление новой нужной информации (осуществляться мониторинг).<br /><br />В настоящей версии можно искать следующие два вида потоков информации: <br /><ul><br />1. <b>RSS-потоки</b>. На картинке ниже по красной стрелке показано где включается поиск адресов RSS-потоков. <br /> Включение приводит к созданию двух списков: <u><font color="green">RSS-потоки все</font></u> и <u><font color="green"><b>RSS-потоки новые</b></font>.</u> В первом - все RSS-ки, найденные в текущем выполнении Проекта, во втором - новые RSS-потоки, которые ещё не были найдены ни разу при всех выполнениях Проекта.<br /><br />2. <b>URL-потоки</b>. Страницы, не являющиеся RSS-потоками, но несущие поток или потоки информации на заданные темы. Включение по зеленой стрелке. Сами темы отределяются в поле по синей стрелке, например: <font color="blue">econom; business;</font>.<br /> Включение приводит к созданию двух списков: <u><font color="green">URL-ссылки все</font></u> и <u><font color="green"><b>URL-потоки новые</b></font>.</u> В первом - все ссылки по заданным темам из текущего выполнения Проекта, во втором - новые, которые ещё не были найдены ни разу при всех выполнениях Проекта, и на которых <b>обнаружены потоки</b>.<br /><br /> Можно создать ещё и третий список. По серой стрелке включается поиск <u>новых</u> адресов страниц, содержащих информацию на заданную тему. Список <u><font color="green"><b>URL-ссылки новые</b></font></u> содержит только такие ссылки.<br /></ul><br /><a href="http://sitesputnik.ru/Help/Pic/F/SearchSourcer.jpg" target=_blank><img src="http://sitesputnik.ru/Help/Pic/F/SearchSourcer.jpg" alt="" name="itag" border=none></a><br /><br /><font color="green"><b>RSS-потоки новые</b></font> и <font color="green"><b>URL-потоки новые</b></font> в настоящей реализации можно вручную просмотреть, оценить и, если это рационально, то некоторые из них добавить в источники проекта (вручную вписать в Проект), возможно даже, что не в данный, а в какой-то другой Ваш Проект.<br /><br />На этом пока всё. Работы в данном направлении продолжаются. <br /><br />P.S.<br />1. Уже более трёх месяцев сам работаю с этими списками. Находил новые полезные источники для мониторинга не только в новых для себя темах, но и в хорошо изученных. <br />2. В принципе, можно искать источники не только для работы в СайтСпутнике, но и для других целей.<br /> Алексей Мыльников Wed, 01 Oct 2014 09:07:05 +0400