Сбор и хранение информации при помощи программы SiteSputnik

Форум Сообщества Практиков Конкурентной разведки (СПКР)

Конкурентная разведка, Бизнес-разведка, Корпоративная разведка,
Деловая разведка по открытым источникам в бизнесе.
Работаем строго в рамках закона.

Дезинформация и активные мероприятия в бизнесе
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Приемы работы с программой СайтСпутник (SiteSputnik) »   Сбор и хранение информации при помощи программы SiteSputnik
RSS

Сбор и хранение информации при помощи программы SiteSputnik

<<Назад  Вперед>>Страницы: 1 2 3 4
Печать
 
vbl
Модератор форума

Откуда: Нижний Новгород
Всего сообщений: 179
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
10 июня 2009

Alexei Mylnikov написал:
[q]
исправил, подкачайтесь.
[/q]


Спасибо, все отлично работает. Вот теперь реально выкачивается 1000 страниц Я-н-д-е-к-с-а :yahoo:



---
Non progredi est regredi

http://www.informnn.ru
Информационная рассылка "Конкурентная разведка. Сам себе разведчик" - http://subscribe.ru/catalog/tech.razvedka
tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009
Для: Alexei Mylnikov, спасибо большое! :hi:
petryashov
Администратор

Откуда: Москва
Всего сообщений: 480
Рейтинг пользователя: 9


Ссылка


Дата регистрации на форуме:
7 июня 2009
Ура, работает! Алексей, спасибо!
Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 877
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009
Начиная с версии 6.4.4.3, можно задавать дополнительно следующие операторы:

^^Пауза.Yandex=3
^^Пауза.Google=4
^^Пауза.Yahoo=5

Это приведет к тому, что для любого поиска в Яндексе, Гугле, Яху будут возникать паузы, соответственно, в 3, 4, 5 секунд между обращениями к страницам поисковиков.

Максимальная пауза увеличена до 60 секунд.

Эти операторы сильнее оператора:

^^Пауза=6

Который, с свою очередь, сильнее паузы, задаваемой в "Настройки - Параметры - Интернет - Антиробот: пауза между открытиями страниц поисковиков (от 0 до 60 сек.)"

tungus1973
Модератор форума

Откуда: г. Санкт-Петербург
Всего сообщений: 795
Рейтинг пользователя: 11


Ссылка


Дата регистрации на форуме:
3 июля 2009

Alexei Mylnikov написал:
[q]
Начиная с версии 6.4.4.3, можно задавать дополнительно следующие операторы:

^^Пауза.Yandex=3
^^Пауза.Google=4
^^Пауза.Yahoo=5
[/q]
А вот это уже совсем замечательно! :good:
Еще раз спасибо!!!
CI-KP
Администратор

Откуда: Екатеринбург
Всего сообщений: 5565
Рейтинг пользователя: 24


Ссылка


Дата регистрации на форуме:
15 мая 2009
Вот тут у меня в комментариях мысль высказана на счет "сервиса для хороших роботов" Яндекса. Какие по этому поводу есть мысли?

yushchuk.livejournal.com/245943.html?nc=4


lukamud
А своего "ужа" c этим "ежом" они скрещивать не пробовали?

yushchuk
А там же, насколько я помню, надо постоянный IP-адрес иметь. С этим и затык. По количеству запросов мы обычно укладываемся, но по адресу - проблема.


lukamud
IP должен быть постоянным во время осуществления запросов. А при его изменении пользователь должен ввести новый в соответствующей форме.

Если разработчики согласятся показывать контекстную рекламу в программе, то ограничение в 1000 запросов в сутки снимается. Мне кажется, что при этом Яндекс выплачивает какую-то долю и владельцу. Посоветуйте разработчикам пообщаться с Яндексом, там весьма интересные и адекватные ребята работают.

yushchuk
Спасибо. Я отправлю ссылку Алексею Мыльникову.


---
Ющук Евгений Леонидович, профессор УрГЭУ. www.razvedka-internet.ru; www.ci-razvedka.ru
Не всегда нужно стремиться совершать кражу со взломом там, где можно войти через дверь.
Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 877
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009

CI-KP написал:
[q]
Вот тут у меня в комментариях мысль высказана на счет "сервиса для хороших роботов" Яндекса. Какие по этому поводу есть мысли?
[/q]

Спасибо. Сервис интересный. Взаимодействие с готовыми приложениями, написанными на нем, вполне возможны.

CI-KP
Администратор

Откуда: Екатеринбург
Всего сообщений: 5565
Рейтинг пользователя: 24


Ссылка


Дата регистрации на форуме:
15 мая 2009

Alexei Mylnikov написал:
[q]
Взаимодействие с готовыми приложениями, написанными на нем, вполне возможны.
[/q]

Это с какими, например?

---
Ющук Евгений Леонидович, профессор УрГЭУ. www.razvedka-internet.ru; www.ci-razvedka.ru
Не всегда нужно стремиться совершать кражу со взломом там, где можно войти через дверь.
Алексей Мыльников
Долгожитель форума

Откуда: Волгоград
Всего сообщений: 877
Рейтинг пользователя: 6


Ссылка


Дата регистрации на форуме:
22 июня 2009

CI-KP написал:
[q]

Alexei Mylnikov написал:
[q]
Взаимодействие с готовыми приложениями, написанными на нем, вполне возможны.
[/q]

Это с какими, например?
[/q]

Например, с Нигмoй, поиск в которой реализован с использованием Яндекс.XML. Этот метапоисковик уже подключен в одном из сценариев САйтСпутник(а).

<<Назад  Вперед>>Страницы: 1 2 3 4
Печать
Форум Сообщества Практиков Конкурентной разведки (СПКР) »   Приемы работы с программой СайтСпутник (SiteSputnik) »   Сбор и хранение информации при помощи программы SiteSputnik
RSS

Последние RSS
Англоязычный интерфейс программы "Сайт Спутник"
Учебник по конкурентной разведке
Конкурентная разведка: маркетинг рисков и возможностей
Книга "История частной разведки США"
Книга "Нетворкинг для разведчиков"
Поиск и сбор информации в интернете в программе СайтСпутник
Новые видеоуроки по программе СайтСпутник для начинающих
Технологическая разведка
SiteSputnik. Мониторинг Телеграм
СайтСпутник: возврат к ранее установленной версии
SiteSputnik. Доступ к результатам работы из браузера
Анализ URL
Браузер для анонимной работы
Топливно-энергетический комплекс
Профессиональные сообщества СБ
Несколько Проектов в одном, выполнение Проектов по частям
SiteSputnik-Bot: Боты в программе СайтСпутник
К вопросу о телеграм
SiteSputnik: Автозамены до и после Рубрикации или Перевода
Демо-доступ к ИАС социальных сетей

Самые активные 20 тем RSS