http://forum.razved.info//index.php?t=1291 Сбор &quot;СайтСпутником&quot; новостей Google за определенную дату. ru http://forum.razved.info//index.php?t=1291&p=15613#pp15613 http://forum.razved.info//index.php?t=1291&p=15613#pp15613 <br>tungus1973 написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>Итак, описываю метод, которым удалось решить задачу.<div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br />Спасибо! Действительно - "Настоящий "Швейцарский ножик" Алексея Мыльникова! <img src="http://forum.razved.info//smiles/good.gif" align=absmiddle alt=":good:">" CI-KP Sat, 11 Dec 2010 18:42:07 +0300 http://forum.razved.info//index.php?t=1291&p=15408#pp15408 http://forum.razved.info//index.php?t=1291&p=15408#pp15408 Итак, описываю метод, которым удалось решить задачу.<br /><br />Мы определили, что наиболее точным получается поиск через Google с параметрами "За период...". <br /><br />1. В поисковую строку Google вписываем ключевое слово "это" (или "сайт" или "я"). Нажимаем кнопку "Поиск". После того, как Google выдаст результаты, находим слева группу "За всё время", жмём на кнопочку со стрелкой вниз. В открывшемся списке выбираем "За период...", вводим дату, например, "22.11.2010" в верхнее и в нижнее поле. Жмем кнопку "Поиск" под полями.<br /><br />2. Подключаем поисковик с полученными настройками к "СайтСпутнику". Даем уникальное имя получившемуся сценарию.<br /><br />3. Делаем экспорт сценария в файл txt. <br /><br />4. Чтобы поменять дату, открываем файл сценария в любом текстовом редакторе (блокнот, AkelPad, ...). Находим в нем адрес поисковика. В адресе поисковика будут написаны введенные нами даты.<br /><br />_http://www.google.ru/search?q=%D1%8D%D1%82%D0%BE&amp;hl=ru&amp;newwindow=1&amp;sa=X&amp;ei=3ML3TOyoAsToOZChpIcI&amp;ved=0CA0QpwU&amp;source=lnt&amp;tbs=cdr%3A1%2Ccd_min%3A<b>22.11.2010</b>%2Ccd_max%3A<b>22.11.2010</b><br /><br />Выполняем операцию "Поиск - Замена", находим дату "22.11.2010", заменяем ее другой нужной нам датой. Сохраняем файл. Выполняем в "СайтСпутнике" импорт получившегося сценария.<br /><br />5. Если у Вас есть навыки написания скриптов (автоматизации работы), то пишем для операции 4 специальный скрипт. Если нет таких навыков, выполняем операцию 4 вручную.<br /><br />Вот и всё!<br /><br /><br />Чтобы её решить задачку, пришлось окунуться в детали:<br />- языка запросов Google (в том числе не особо документированных!);<br />- особенностей расширенного поиска Google;<br />- подключения поисковиков в "СайтСпутник";<br />- экспорта-импорта сценариев "СайтСпутника";<br />- структуры файла сценария "СайтСптуника";<br />- и (возможно!) написания скриптов для автоматической замены цифр в сценарии.<br /><br /><br />Благодарю всех участников форума, кто принял участие в обсуждении этой задачки. <img src="http://forum.razved.info//smiles/hi.gif" align=absmiddle alt=":hi:"> <br /><br /><br />Желаю всем пользователям "СайтСпутника" успешной работы с этим замечательным, гибким инструментом, который позволяет реализовывать подобные задачки, не прибегая к другим программным средствам! Настоящий "Швейцарский ножик" Алексея Мыльникова! <img src="http://forum.razved.info//smiles/good.gif" align=absmiddle alt=":good:"> tungus1973 Thu, 02 Dec 2010 19:11:02 +0300 http://forum.razved.info//index.php?t=1291&p=15364#pp15364 http://forum.razved.info//index.php?t=1291&p=15364#pp15364 Подведём предварительные итоги.<br /><br />В Google существуют 2 способа вывести результаты за какую-то дату (диапазон дат):<br />- оператор <b>daterange</b>;<br />- расширенный поиск через "Показать настройки..." / "<b>За период...</b>".<br /><br />Выборка по настройке "<b>За период...</b>" даёт более полные результаты, чем оператор <b>daterange</b>.<br /><br /><br />Остается решить вторую часть задачи - работа с "СайтСпутником":<br /><br>tungus1973 написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>Вопрос 2: Как нам добиться того, чтобы "СайтСпутник" собирал из Google ссылки за любую, нужную нам дату (диапазон дат)? Что делать, если дату нам нужно менять часто? <div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote> tungus1973 Sat, 27 Nov 2010 10:30:05 +0300 http://forum.razved.info//index.php?t=1291&p=15362#pp15362 http://forum.razved.info//index.php?t=1291&p=15362#pp15362 <b>Для: Tefna</b><br /><br />Оператор daterange корректно не работает, проверено. vbl Sat, 27 Nov 2010 10:15:11 +0300 http://forum.razved.info//index.php?t=1291&p=15361#pp15361 http://forum.razved.info//index.php?t=1291&p=15361#pp15361 <br>Tefna написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>А тот, что описан в moradan.sopovs.com/2010/04/google.html не пойдет ?<br /><div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote> Насколько он эффективнее способа, предложенного ув. <b>Vinni</b>? tungus1973 Sat, 27 Nov 2010 10:12:35 +0300 http://forum.razved.info//index.php?t=1291&p=15359#pp15359 http://forum.razved.info//index.php?t=1291&p=15359#pp15359 <br>tungus1973 написал:<blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div>Существуют ли в Google другие, более эффективные способы делать выборку по дате?<div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br /><br />А тот, что описан в moradan.sopovs.com/2010/04/google.html не пойдет ?<br /><br /><blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div><br />...<br />В поиске есть специальный параметр "daterange" - указывать его надо в виде daterange:&lt;начальная дата ограничения&gt;-&lt;конечная дата ограничения&gt; И всё было бы просто замечательно, если бы не формат, в котором надо указывать дату. Этим форматом является юлианский день. Кроме того, что надо помнить текущее число дней, прошедших от 1 января 4713 до н. э., этот день еще и начинается около нашего полудня. То есть заботиться приходится еще и о том, вошли ли нужные 12 часов в запрос, или не вошли? Ну и пример. Такая поисковая строка ограничивает результаты поиска страницами, впервые проиндексированными, с 12 дня 2 апреля 2010 года до 12 дня 3 япреля 2010 года: первый ядерный взрыв daterange:2455289-2455290 (я, правда, несовсем понимаю, в каком это всё часовом поясе - вообще юлианский день начинается в 12 дня по Александии, где UTC+2, а летом UTC+3).<br />...<br /><div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote> Tefna Fri, 26 Nov 2010 23:36:19 +0300 http://forum.razved.info//index.php?t=1291&p=15358#pp15358 http://forum.razved.info//index.php?t=1291&p=15358#pp15358 <b>Для: Vinni</b><br />Верно. Это часть решения задачи.<br /><br />Вопрос 1: Как мы можем проверить точность (полноту) этого способа выборки материалов? Существуют ли в Google другие, более эффективные способы делать выборку по дате?<br /><br />Вопрос 2: Как нам добиться того, чтобы "СайтСпутник" собирал из Google ссылки за любую, нужную нам дату (диапазон дат)? Что делать, если дату нам нужно менять часто? tungus1973 Fri, 26 Nov 2010 19:35:45 +0300 http://forum.razved.info//index.php?t=1291&p=15357#pp15357 http://forum.razved.info//index.php?t=1291&p=15357#pp15357 Если я правильно понял, речь идет о том, чтобы среди результатов поискового запроса в Google найти те, которые были опубликованы в Интернете за определенный период (а лучше за определенную дату).<br /><br />В _ttp://www.google.com/support/websearch/bin/answer.py?hl=ru&answer=142143 написано следующее<br /><br /><blockquote><div style="height:1px;width:1px;overflow:hidden">[q]</div><br />...<br />Результаты поиска можно ограничить, исходя из срока публикации в Интернете. Google пытается определить дату публикации страницы, используя информацию о том, когда Google в первый раз ее проиндексировал. <br />...<br />За период... Этот параметр позволяет самостоятельно указывать период времени. Укажите даты, которые хотите использовать для поиска, в формате дд/мм/гггг, затем нажмите кнопку Поиск. Этот параметр лучше использовать для страниц, опубликованных после 2001 г.<br /><br /><div style="height:1px;width:1px;overflow:hidden">[/q]</div></blockquote><br /><br />То есть надо <br /> -выполнить поисковый запрос в гугле<br /> - щелкнуть по ссылке "Показать настройки" в левой части экрана<br /> -щелкнуть по ссылке "За период..."<br /> -в появившихся двух полях указать начальную и конечную дату в формате ДД/ММ/ГГГГ и щелкнуть по кнопке "Поиск" под этими двумя полями<br /> <br />После этого число результатов на странице существенно уменьшится и будет содержать только результаты за указанный период.<br /><br /><br />P.S.<br /> Если имелось в виду что-то другое, прошу более понятную <img src="http://forum.razved.info//smiles/wink.gif" align=absmiddle alt=":wink:"> постановку задачи <br /> Vinni Fri, 26 Nov 2010 19:00:11 +0300 http://forum.razved.info//index.php?t=1291&p=15356#pp15356 http://forum.razved.info//index.php?t=1291&p=15356#pp15356 Правильно ли я понял, что есть некоторое решение (фича) под IE? Тогда может быть расскажете о нём? tungus1973 Fri, 26 Nov 2010 17:08:15 +0300 http://forum.razved.info//index.php?t=1291&p=15355#pp15355 http://forum.razved.info//index.php?t=1291&p=15355#pp15355 FF3 - это веб-браузер Firefox 3 (в нем это окно не открылось - видимо из-за несоответствия DOM-модели <img src="http://forum.razved.info//smiles/wonder1.gif" align=absmiddle alt=":wonder1:"> судя по сообщению плагин Web Developer) Vinni Fri, 26 Nov 2010 16:59:24 +0300