http://forum.razved.info//index.php?t=5932 ru http://forum.razved.info//index.php?t=5932&p=57107#pp57107 http://forum.razved.info//index.php?t=5932&p=57107#pp57107 <ul><br />Подстановки, которые могут быть использованы в <b>Поиске перебором</b> на момент публикации данного сообщения следующие:<font color="blue"><br /><br />{0-12} – это последовательная подстановка чисел: 0, 1, 2, ..., 12.<br /><br />{doc;xls;xlsx} – это последовательная подстановка конкретных значений: doc, xls и xlsx.</font><br /><br />Обе подстановки в одном Проекте можно применять одновременно и многократно. В этом случае нужно следить, чтобы не породить сотни тысяч и более перебираемых ссылок.<br /><br />По-моему, получается достаточно простой и интересный инструмент не только для поиска информации и источников информации, но и для исследования особенностей сайтов.<br /></ul><br /> Алексей Мыльников Mon, 12 Dec 2016 11:20:39 +0300 http://forum.razved.info//index.php?t=5932&p=57106#pp57106 http://forum.razved.info//index.php?t=5932&p=57106#pp57106 <ul><br /><b>Пример 5.</b> Поиск в Фейсбуке. <br /><br />Поиск перебором в группах:<font color="blue"><br /><br />https://www.facebook.com/groups/5759708925614{0-9}{0-9}/<br />Рубрика://Классы/Источники/Соцсети/ФейсБук/Группы/Закрытая<br />Закрытая /1 группа<br />Рубрика://Классы/Источники/Соцсети/ФейсБук/Группы/Открытая<br />(Открытая | Общедоступная) /1 группа<br /> </font><br /><br />Поиск перебором личных страничек:<font color="blue"><br /><br />https://www.facebook.com/profile.php?id=1000017534857{0-9}{0-9} +<br />Рубрика://Рекрутинг/По профессиям/Бухгалтер<br />Бухгалтер | '1С' | '1C' </font><br /><br />Выдача для Рубрики Бухгалтерия на <a href="http://sitesputnik.ru/Files/Buhgalter_01.htm" target=_blank>ссылке</a>.<br /> <br />Блокировка на неделю произошла ориентировочно после 1000 обращений к ФБ в течение нескольких минут с одного аккаунта. Использовался <u>Менеджер скачивания ссылок</u>. Поэтому экспериментировать нужно с оглядкой, возможно, отключив Менеджер. Можно создать дополнительный аккаунд в ФБ, залогиниться в нем в IE или СайтСпутнике и работать без оглядки (работа с ФБ с основного Вашего аккауда не пострадает). <br /></ul><br />Продолжение следует ...<br /> Алексей Мыльников Mon, 12 Dec 2016 11:18:20 +0300 http://forum.razved.info//index.php?t=5932&p=57105#pp57105 http://forum.razved.info//index.php?t=5932&p=57105#pp57105 <ul><br /><b>Пример 4.</b> Поиск перебором на личных страницах ВКонтакте:<font color="blue"><br /><br />https://vk.com/id103859Х0{0-9}{0-9}{0-9} +<br />Рубрика://Контакты/Телефон<br />%Телефоны<br />Рубрика://Контакты/Е-майл<br />%ПочтаЭлектронная</font><br /><br />В этом Проекте были просмотрены 1000 личных страниц. Те странички, на которых указаны телефоны и E-мейлы, соответственно, попали в Рубрики «Контакты/Телефоны» и «Контакты/ Е-майл». Здесь при рубрикации применялся объектный поиск, где <font color="green">%Телефоны</font> и <font color="green">%ПочтаЭлектронная</font> - произвольный номер телефона и произвольный адрес электронной почты. Подчеркиваю – произвольный, а не конкретный. Телефонов нашлось 28 (смотрите соответствующую <a href="http://sitesputnik.ru/Files/Telefon_28.htm" target=_blank>выдачу СайтСпутника</a>), Е-майлов -4.<br /><br />Если будете делать что-то аналогичное, Вам также как и мне, наверное, придется в «Настройках» Проекта отменить скачивание ссылок <u>Менеджером скачивания ссылок</u> и поставить паузу в 2 секунды между загрузками страниц, иначе ВКонтакте не отдаст контент ссылки, а «молча» сообщит, что Вы сделали более одного однотипного запроса в секунду.<br /></ul><br />Продолжение следует ...<br /> Алексей Мыльников Mon, 12 Dec 2016 11:13:54 +0300 http://forum.razved.info//index.php?t=5932&p=57104#pp57104 http://forum.razved.info//index.php?t=5932&p=57104#pp57104 <ul><br /><b>Пример 3.</b> Пробуем ссылку с Avita в Проекте из 2-х строк:<font color="blue"><br /><br />https://www.avito.ru/volgograd/kvartiry/1-k_kvartira_32_m_89_et._87270935{0-9} +<br />^^Новости;</font><br /><br />Получаем информацию к размышлению (смотрите соответствующую <a href="http://sitesputnik.ru/Files/Avita_010.htm" target=_blank>выдачу СайтСпутника</a>). Кроме одной ссылки на однокомнатную квартиру в Волгограде (она 9-я), что соответствует имени ссылки, остальные 9 имеют самые неожиданные контенты, а именно: квартира, но в Краснодаре, брюки спортивные, шины зимние, кольцо с аметистом, прессформа, электрокачели в Москве, Рязани, Краснодаре или в Кантемировке. Если я правильно понял, то параметр «_et._число» какой-то особенный. Если им позаниматься, поэкспериментировать, то может быть удастся получить какую-то пользу. <br /><br />Пробовал перебрать:<font color="blue"><br />https://www.avito.ru/ _et._87270935{0-9} +<br />https://www.avito.ru/volgograd/kvartiry/_et._87270935{0-9} +<br />https://www.avito.ru/krasnodar/kvartiry/1-k_kvartira_32_m_89_et._87270935{0-9} +</font><br />Первые 10 ссылок не существуют, что вполне логично, вторые и третьи 10 ссылок существуют и отдают тот же контент, что и 10 ссылок из рассматриваемого Проекта, что, по-моему, нелогично. <br /></ul><br />Продолжение следует ...<br /> Алексей Мыльников Mon, 12 Dec 2016 11:11:44 +0300 http://forum.razved.info//index.php?t=5932&p=57103#pp57103 http://forum.razved.info//index.php?t=5932&p=57103#pp57103 <ul><br /><b>Пример 2.</b> Берём данный форум. Выполняем Проект из трех строк: <font color="blue"><br /><br /> forum.razved.info/index.php?f={1-12} +<br />Рубрика://Бизнес-разведка/Страница недоступна<br />(страница | раздел) /7 (недоступна | не /1 (существует | создана) | удалена) </font><br /><br />В Рубрике «Бизнес-разведка/Страница недоступна» видим (смотрите соответствующую <a href="http://sitesputnik.ru/Files/Forum_SKPR.htm" target=_blank>выдачу СайтСпутника</a>), что есть страницы (разделы), которые или не существуют (зарезервировованы) или у меня нет к ним права доступа. Можно сделать много разных переборов по форуму.<br /></ul><br />Продолжение следует ...<br /> Алексей Мыльников Mon, 12 Dec 2016 11:09:33 +0300 http://forum.razved.info//index.php?t=5932&p=57102#pp57102 http://forum.razved.info//index.php?t=5932&p=57102#pp57102 <ul><br /><b>Пример 1.</b> Следующий Проект состоит всего из <u>трех строк</u>:<br /><br /><font color="blue">http://interfax-russia.ru/Moscow/main.asp?id=0009{0-9}{0-9} +<br />Рубрика://Люди/Онищенко<br />Геннадий /2 Онищенко</font><br /><br />Конструкция {0-9} означает, что вместо неё нужно последовательно подставить все цифры от 0 до 9.<br /><br />Этот Проект осуществит просмотр на Интерфаксе в папке Moscow 100 ссылок: <br />от <font color="blue">http://interfax-russia.ru/Moscow/main.asp?id=000900</font><br />до <font color="blue">http://interfax-russia.ru/Moscow/main.asp?id=000999</font><br />и в Рубрику «Люди/Онищенко» поместит ссылки, в которых упомянут Геннадий Онищенко<br />Таких ссылок две (смотрите соответствующую <a href="http://sitesputnik.ru/Files/Onishchenko.htm" target=_blank>выдачу СайтСпутника</a>).<br />Все ссылки относятся к 03 сентября 2009 года.<br /><br />Это был Поиск перебором в ссылках из прошлого.<br /><br />Можно «караулить» ссылки из будущего, точнее ссылки которые набраны, но ещё не переданы в новостные ленты, или их адрес ещё не разместили на какой-нибудь другой видимой ссылке. Например, на момент <font color="green">09.12.2016 00:26:49</font> для десяти ссылок определяемых выражением: <font color="blue">http://interfax-russia.ru/Moscow/main.asp?id=79053{0-9} +</font><br />были видны первые три ссылки из десяти (смотрите соответствующую <a href="http://sitesputnik.ru/Files/IFax_New_003.htm" target=_blank>выдачу СайтСпутника</a>). <br /><br />То есть, используя <b>Поиск перебором</b>, можно раньше, чем обычным способом получить доступ к нужной информации. Например, это может быть использовано при работе с некоторыми досками объявлений для того, чтобы получить сведения по товару или услуге раньше, чем другие, и воспользоваться ими. Другой случай, готовится очередной онлайн-номер сборника статей и часть статей или все статьи уже набраны и размещены на сайте, но сам онлайн-номер со ссылками на них не сдан в «печать».<br /><br />Пока я набирал эти строки на момент <font color="green">09.12.2016 0:46:07</font> в указанном выше десятке уже 6 ссылок (смотрите соответствующую <a href="http://sitesputnik.ru/Files/IFax_New_006.htm" target=_blank>выдачу СайтСпутника</a>). <br /> <br /><br />Думаю, что принцип понятен, и можно найти другие ситуации, в которых рационально применить <b>Поиск перебором</b>.<br /></ul><br />Продолжение следует ...<br /> Алексей Мыльников Mon, 12 Dec 2016 11:07:10 +0300 http://forum.razved.info//index.php?t=5932&p=57101#pp57101 http://forum.razved.info//index.php?t=5932&p=57101#pp57101 <ul><font color="blue"><font size="2"><b>Поиск перебором</b></font></font> доступен в <b>SiteSputnik News v.9.2.4</b>. <br /><br />Эта функция достаточно близка к функции поиска ссылок по образу и подобию из <a href="http://sitesputnik.ru/Help/SSInvisible.htm" target=_blank><b>SiteSputnik Invisible</b></a>, но не является её повторением. <br /><br /><b>Поиск перебором</b> – это попытка открыть множество ссылок, адреса которых удовлетворяют очень простому регулярному выражению, и в случае удачного открытия ссылок проверить их контент на удовлетворение правилам попадания в одну или несколько Рубрик. <br /><br />Другими словами, <u>Поиск перебором</u> позиционируется и ориентирован не на поиск адресов невидимых ссылок (хотя и умеет это делать), а на поиск нужной информации и источников информации.<br /><br />При необходимости можно реализовать полноценное регулярное выражение как это сделано в <a href="http://forum.razved.info/index.php?t=5258&amp;p=53043#pp53043">Правилах попадания в Рубрики</a>.<br /><br />Рассмотрим <u>Поиск перебором</u> на нескольких примерах. Если у Вас есть SiteSputnik News и выше, то Вы можете скопировать любой Проект из любого примера, приведенного ниже, и выполнить его на своем компьютере.<br /></ul><br />Продолжение следует ...<br /> Алексей Мыльников Mon, 12 Dec 2016 11:02:02 +0300