<?xml version="1.0" encoding="windows-1251" ?>
<rss version="2.0" xmlns:dc="http://purl.org/dc/elements/1.1/">
<channel>
<title>Удаление дублей ссылок, имеющих одинаковое содержание</title>
<link>http://forum.razved.info//index.php?t=3509</link>
<description></description>
<language>ru</language>
<item><guid>http://forum.razved.info//index.php?t=3509&amp;p=23158#pp23158</guid><title></title>
<link>http://forum.razved.info//index.php?t=3509&amp;p=23158#pp23158</link>
<description>  &lt;br&gt;tungus1973 написал:&lt;blockquote&gt;&lt;div style="height:1px;width:1px;overflow:hidden"&gt;[q]&lt;/div&gt;А возле теста останутся ссылки на дубли? Иногда интересно знать, на каких ресурсах одновременно была размещена одна и та же статья.&lt;div style="height:1px;width:1px;overflow:hidden"&gt;[/q]&lt;/div&gt;&lt;/blockquote&gt;&lt;br /&gt;Ссылки на дубли в специальном списке "Повторные". Возле текста ничего нет. Если интересно знать ресурсы, то эффектвнее составить пакет с параметрами и по ключевым словам &lt;i&gt;&lt;b&gt;систематически &lt;/b&gt;&lt;/i&gt;собирать ссылки на статью.&lt;br /&gt;&lt;br&gt;tungus1973 написал:&lt;blockquote&gt;&lt;div style="height:1px;width:1px;overflow:hidden"&gt;[q]&lt;/div&gt;Будут ли сравниваться тексты, которые были ранее? Например, при первом запуске программы прошла статья, а при следующем запуске программы появилась еще одна точно такая же статья, но размещенная на другом ресурсе.&lt;div style="height:1px;width:1px;overflow:hidden"&gt;[/q]&lt;/div&gt;&lt;/blockquote&gt;&lt;br /&gt;Именно это и сделано. Ранее дубли отлавливались в рамках одного поиска, сейчас в рамках нескольких последних поисков (заданий). Учтите сказанное выше: "...ссылки, полученные в старых версиях, на предмет дублирования их контента не рассматриваются", - то есть, если Вы сейчас выполните задание в новой версии, а через час повторите его, затем через два часа выполните ещё раз это задание, то во второй выдаче не будет дублей из первого выполнения, в третьей из первого и второго. Задания из старых версий алгоритм поиска и отбрасывания дублей по контенту не рассматривает.  </description>
<dc:creator>Алексей Мыльников</dc:creator>
<pubDate>Wed, 05 Oct 2011 18:42:09 +0400</pubDate>
</item><item><guid>http://forum.razved.info//index.php?t=3509&amp;p=23154#pp23154</guid><title></title>
<link>http://forum.razved.info//index.php?t=3509&amp;p=23154#pp23154</link>
<description>  &lt;br&gt;Алексей Мыльников написал:&lt;blockquote&gt;&lt;div style="height:1px;width:1px;overflow:hidden"&gt;[q]&lt;/div&gt;Удаление в выдаче SiteSputnik News дублей ссылок, имеющих одинаковое содержание.&lt;div style="height:1px;width:1px;overflow:hidden"&gt;[/q]&lt;/div&gt;&lt;/blockquote&gt; А возле теста останутся ссылки на дубли? Иногда интересно знать, на каких ресурсах одновременно была размещена одна и та же статья.&lt;br /&gt;&lt;br /&gt;Будут ли сравниваться тексты, которые были ранее? Например, при первом запуске программы прошла статья, а при следующем запуске программы появилась еще одна точно такая же статья, но размещенная на другом ресурсе.  </description>
<dc:creator>tungus1973</dc:creator>
<pubDate>Wed, 05 Oct 2011 17:28:46 +0400</pubDate>
</item><item><guid>http://forum.razved.info//index.php?t=3509&amp;p=23135#pp23135</guid><title></title>
<link>http://forum.razved.info//index.php?t=3509&amp;p=23135#pp23135</link>
<description>  05.10.11. Версия 7.2.4&lt;br /&gt;Удаление в выдаче &lt;b&gt;SiteSputnik News&lt;/b&gt; дублей ссылок, имеющих &lt;b&gt;&lt;i&gt;&lt;b&gt;одинаковое содержание&lt;/b&gt;&lt;/i&gt;&lt;/b&gt;&lt;i&gt;&lt;/i&gt;. Учитываются ссылки из текущего и &lt;i&gt;&lt;b&gt;предыдущих &lt;/b&gt;&lt;/i&gt;заданий (ссылки полученные в старых версиях, на предмет дублирования их контента не рассматриваются).   </description>
<dc:creator>Алексей Мыльников</dc:creator>
<pubDate>Wed, 05 Oct 2011 14:37:02 +0400</pubDate>
</item></channel>
</rss>