Защита веб-сайта от автоматического скачивания программами. Защищаемся средствами Unix [ban_mega_dl.sh v.3.0]

Зачем массово качаются сайты? Сходу можно указать две причины. Кому-то Ваш сайт очень понравился и этот “кто-то” нашел на нем много полезной для себя информации. Вот и хочется человеку сделать себе локальное “зеркало” этого сайта, для того, чтобы не выходя в Интернет как следует изучить информацию на нем.

В другом случае кто-то также нашел сайт интересным, но не в плане информативности, а в плане заработка. Такие субъекты, массово выкачивая сайты со структурой каталогов, медиа-контентом и прочим содержимым, создают потом “зеркала” этого сайта в Сети на каком-то ином хостинге, а проще говоря, крадут сайт целиком чтобы на этом потом заработать.

Уверен, что ни одному владельцу сайта не будет легче ни от первой причины, ни, тем более, от второй, когда его сайт начинают копировать подчистую. Как минимум, это процесс доставляет технические неудобства. Появляется излишняя нагрузка на сервер, расходуется излишний трафик, а если трафик этот в лимите, то еще и излишние деньги за превышение лимита трафика. Обычно веб-мастера, видя как нещадно с их сайта выгружаются один за одним страницы со скоростью, с которой нормальный человек не может серфить по сайту, опускают руки и оставляют все на самотек. Ведь если посмотреть с другой стороны, как-бы если твой сайт кто-то решил скопировать, значит он у тебя действительно полезен. Можно вроде бы этим гордиться?

ЗАКИДЫВАЙ ЛЕНТУ ЭТОГО БЛОГА В ЛЮБИМУЮ ЧИТАЛКУ
И СВОЕВРЕМЕННО УЗНАВАЙ О НОВЫХ МАТЕРИАЛАХ!

Вот и переехали

Вот и переехал Daemony’s Live Blog на другой сервер. Разворачивания бекапов, заливка sql дампа, рихтовка настроек, правка DNS записей и блог снова в строю. Сам сервер особо рихтовать не пришлось. Так… по мелочам. А из того, чего я не ожидал оказалось только небольшая поправочка php.ini. Потребовалось увеличить значение memory_limit (максимальное количество оперативной памяти, которое может получить скрипт) и max_execution_time (максимальное время, отводимое на выполнение скрипта). А так вроде бы все работает и не скрипит.

Отдельное спасибо за содействие моему коллеге Володе.

Не знаю, сколько времени блог будет жить на этом сервере… Как минимум до того, как дома снова появится связь. А там посмотрим. Приживется здесь благополучно - может даже останется и на дольше.

Ежесуточный бекап MySQL

В связи с грядущим переносом блога live.daemony.org на другой сервер, вспомнилась маленькая мелочь: суточный бекап всех баз данных, лежащих на сервере MySQL на локальной машине. Для достижения цели используются: оболочка shell, утилита mysqldump и планировщик заданий cron.

Мониторилка PPPoE

Второй раз за два дня начал замечать на одном из серверов, подключенных к провайдеру услуг сети Интернет посредством PPPoE, неприятную ситуацию: само соединение “присутствует”, то есть висит оно в ifconfig, при этом как и положено на интерфейсе tun имеется динамически выданный IP адрес, однако связи нет. Раньше уже было такое когда-то и я решил вновь вернуться к старой “затычке” этой баги, ибо каждый раз ковыряться с сервером руцями неинтересно (а если сервер доступен только по сети?)…

Итак, суть в следущем. Каждые N минут, естественно, по крону, на ближайший узел, обычно DNS провайдера, отправляем 2-3 пакета ping. Если ответ получен, ничего не делаем. Но если ответа мы не получили, рубим ppp демона и снова его стартуем. Плюс еще и письмо об этом строчим админу.

ЗАКИДЫВАЙ ЛЕНТУ ЭТОГО БЛОГА В ЛЮБИМУЮ ЧИТАЛКУ
И СВОЕВРЕМЕННО УЗНАВАЙ О НОВЫХ МАТЕРИАЛАХ!