РекламаБесплатно | PR технологии | Архив | Реклама в инернет | Реклама в СМИ | Наружная реклама |

Поисковые роботы, база данных.

Monster

Name Monster
Cover http://www.neva.ru/monster.list/russian.www.html
Details
Status active
Description The Monster has two parts - Web searcher and Web analyzer. Searcher is intended to perform the list of WWW sites of desired domain (for example it can perform list of all WWW sites of mit.edu, com, org, etc... domain) In the User-agent field $TYPE is set to 'Mapper' for Web searcher and 'StAlone' for Web analyzer.
Purpose maintenance, mirroring
Type standalone
Platform UNIX (Linux)
Language C
Availability binary
Owner Name Dmitry Dicky
Owner URL http://wild.stu.neva.ru/
Owner Email diwil@wild.stu.neva.ru
Exclusion yes
Exclusion User-Agent
NOINDEX no
Host wild.stu.neva.ru
From
UserAgent Monster/vX.X.X -$TYPE ($OSTYPE)
History Now the full (I suppose) list of ex-USSR sites is produced.
Environment
ID monster
Modified Date Tue Jun 25 10:03:36 1996
Modified By

 

Top Search24news.com


Below is a list of the most popular searches on Bots vs Browsers.

«CRM АвтоВебОфис» прием платежей, email-рассылки и работа с клиентами для интернет бизнеса

2011 Copyright © РекламаБесплатно.Ру HTML Версия v.2016 | PeterLife и компания
Пользовательское соглашение использование материалов сайта разрешено с активной ссылкой на сайт
Угостить администратора сайта, чашечкой кофе *https://paypal.me/peterlife

Рейтинг@Mail.ru Яндекс.Метрика Яндекс цитирования