Защита веб-сайта от автоматического скачивания программами. Защищаемся средствами Unix [ban_mega_dl.sh v.3.0]
Зачем массово качаются сайты? Сходу можно указать две причины. Кому-то Ваш сайт очень понравился и этот “кто-то” нашел на нем много полезной для себя информации. Вот и хочется человеку сделать себе локальное “зеркало” этого сайта, для того, чтобы не выходя в Интернет как следует изучить информацию на нем.
В другом случае кто-то также нашел сайт интересным, но не в плане информативности, а в плане заработка. Такие субъекты, массово выкачивая сайты со структурой каталогов, медиа-контентом и прочим содержимым, создают потом “зеркала” этого сайта в Сети на каком-то ином хостинге, а проще говоря, крадут сайт целиком чтобы на этом потом заработать.
Уверен, что ни одному владельцу сайта не будет легче ни от первой причины, ни, тем более, от второй, когда его сайт начинают копировать подчистую. Как минимум, это процесс доставляет технические неудобства. Появляется излишняя нагрузка на сервер, расходуется излишний трафик, а если трафик этот в лимите, то еще и излишние деньги за превышение лимита трафика. Обычно веб-мастера, видя как нещадно с их сайта выгружаются один за одним страницы со скоростью, с которой нормальный человек не может серфить по сайту, опускают руки и оставляют все на самотек. Ведь если посмотреть с другой стороны, как-бы если твой сайт кто-то решил скопировать, значит он у тебя действительно полезен. Можно вроде бы этим гордиться?
Теги: .htaccess, awk, FreeBSD, Offline Explorer, random, shell, TeleportPro, unix, Wordpress, воровство, защита, капча, кража, массово, пример, сайт, скачать, скрипт, тест Тьюринга
ЛЕНТУ ЭТОГО БЛОГА В ЛЮБИМУЮ 
В таблице по горизонтали вписаны значения PageRank каких-то страниц в сети Интернет, на которых могут быть размещены ссылки на нашу страницу, для которой мы собираемся подсчитать значение PR. Это значение (для нашей страницы) будет указано в вертикальной колонке. Согласно таблице, чтобы наша страничка получила значение Page Rank равный трем (PR3), на нее должно ссылаться около 3055 страниц с PR0, либо всего одна страница с PR большим или равно 5. Для получения страницей PR8 нам уже потребуется 15 375 379 ссылок со страниц с PR0, либо 555 ссылок со страниц с PR6, либо всего одна ссылка со страницы с PR10. 
Loading ...