Желающим скачать сайт (часть сайта) - читать!

Уважаемые обладатели толстых и быстрых!

Убедительная просьба при желании скачать сайт, учитывать, что данное желание нереально для Вас и, к большому сожалению, пока и нас одновремённо. Причина проста - он очень подрос и обурел, объём его из-за гигантской таксономии увеличился на порядок. Например, только один гугл приступил к индексации уже третьей сотни тысяч страниц:
Результаты 1 - 10 из приблизительно 210 000 с www.rom.by. (0,26 секунд)
А ещё на нашу серверную голову постоянно приползают полчища других пауков поисковиков. И если учесть кроме объёма сайта выросшую в последние время в несколько раз его популярность (с одной-двух до более чем пяти тысяч посетителей в день) - даже недавний переход на более современный сервер не спасает, когда вы ещё и начинаете "сосать не всебя".
Потому, ради общего блага - чтобы сайт был доступен для остальных 99.9% процентов пользователей - упомянутый 0.1% будет жёстко баниться (по айпишнику - вся подсеть провайдера качальщика). Понятно, что в результате будут страдать другие, сидящие на этом же провайдере пользователи.

Потому просьба, если Вам так уже нужно почитать в оффлайне какие-то материалы - обратитесь напрямую ко мне, я попытаюсь решить данный вопрос без скачивания сотен тысяч страниц сайта (которые всё равно не будут прочитаны даже на 1%).

Аватар пользователя savely

Цитата:
Текущие ограничения на скачивание сняты в связи с их неэффективностью.
Продолжаем банить.

И "слава тебе Господи", уж заколебало, когда страница пришла, а стиль не применился. Весьма прикольно. Сначала...

А кому счас легко...

Аватар пользователя apple_rom

По результатам новой статистики забанены следующие провайдеры (т.к. с этих подсеток было пять и более попыток создать недопустимую нагрузку, попросту говоря - пытались выкачивать сайт):

Цитата:
inetnum: 89.189.16.0 - 89.189.23.255
inetnum: 212.92.188.0 - 212.92.191.255
netname: KIS-PPPOE
descr: Business Communication Agency, Ltd.
descr: Nizhny Novgorod, Russia
country: RU

Цитата:
inetnum: 91.124.0.0 - 91.124.255.255
inetnum: 92.113.0.0 - 92.113.255.255
netname: UKRTELNET
descr: Ukrtelecom IP access network
country: UA

Цитата:
inetnum: 95.189.128.0 - 95.189.143.255
netname: WEBSTREAM
descr: OJSC "Sibirtelecom"
country: RU

Цитата:
inetnum: 95.58.64.0 - 95.58.69.255
netname: NKZ-PETR-METRO
descr: JSC Kazakhtelecom, North Kazakhstan Affiliate
descr: Metro Ethernet Network
descr: Petropavlovsk
country: KZ

Вон из-за чего укртелекому бан выставлен... Надо наверное таки автоматизировать. IP скоторого качается сайт, автоматически ограничить в скорости, а после выкачки определённого кол-ва страниц или по истечении какого-то времени обрубать адрес на несколько часов. Но только этот адрес. Рубить целыми сегментами на постоянной основе неправильно. Кроме IP адресов существует множество других уникальных идентификаторов оборудования, ПО и их номеров, которые можно запрашивать в соединении и получать автоматически. На sysadmins.ru ничего не подсказали по этому поводу ? Как вариант, пока не разберётесь с автоматизацией процесса, сделать доступ к разделам форума только зарегистрированным пользователям. На сайте же, тысяч страниц быть не может. Если есть, то быстрее всего это свалка новостей. Для поисковиков да, она полезна, а для юзеров... опять таки, незарегистрированным нечего в новостях делать. Доступ к чаще всего читаемым материалам оставить в открытом виде.

Аватар пользователя rgt

DjAndy Я прекрасно понимаю Ваше негодование и обиды, но попробуйте и Вы понять тех, кто этот ресурс содержит даже не на своем энтузиазме, а банально за собственные деньги. Почему, собственно, эти люди должны тратить свое время и свои деньги для защиты от тех, кто заведомо никогда не использует и малой доли скачанного, и ограничивать при этом остальных посетителей.
Что же до Ваших утверждений, что все это легко реализовать, равно как того, что на сайте не может быть тысяч страниц информации, настоятельно рекомендую для начала поближе познакомиться с вопросом...


Лично я считаю, что Вы оба раза неправы (ИМХО - Имею мнение, хрен оспоришь). Так же имею наглость считать, что будучи в прошлом человеком обеспечивавшим хостинг сайта, знаю проблему изнутри, а не имея сейчас к этому отношения, могу оценивать положение дел объективно.
Если же Вы готовы предложить конкретные варианты, без ссылок на "дядю", будь это любой, сколь угодно автритетный ресурс, то думаю, Ваши предложения всегда будут как минимум с большим интересом выслушаны, а при возможности и реализованы.

За несоответствие действительности Вашим о ней представлениям администрация форума ответственности не несет.

А бан - это навсегда?
Или есть шанс у забаненой сети реабилитироваться?

Аватар пользователя Root

шансы есть всегда. Но, думаю, что пробовать страдать фигней не стоит изначально :)

Аццкий ромбовод {:€
Я пока не волшебник - я только учусь! :-P

Аватар пользователя apple_rom

Обратиться ко мне - я всегда разбаню нужную подсетку. Однако "без гарантий", т.е. до очередного "скачивания" из оной.

Аватар пользователя R_Soft

По поводу бана Укртелекома выскажу своё ИМХО. Всё это - последствия тотального перехода юзеров на "анлим". Причем, судя по последним данным (за последние несколько месяцев), на анлим перевели и других пользователей из соседних/смежных сетей, никак не относящихся к Укртелекому. Как правило цена за услугу "анлима" не возрастает, урезают только скорость. Безусловно, некоторые пользуются этим "нововведением" бездумно, качают всё подряд. В итоге из-за одного-двух "активных" юзеров страдают сотни/тысячи ни в чем не повинных пользователей, т.к. банят целые подсети - ничего другого, к сожалению не придумаешь в данном случае.
Обо всём этом я могу судить по отзывам многичленных знакомых/друзей, которые рассказывали о переходе на анлим. Ну и плюс ситуация по сабжу...
Вдобавок, ещё много людей собираются перейти на анлим в ближайшее время. То ли ещё будет.:(

Партизан подпольной луны aka (R)soft

Аватар пользователя Santa

-=Кто сказал что бесполезно биться головой об стену...=- (НП)
Пх’нглуи мглв’нафх Ктулху Р’льех вгах’нагл фхтагн
Хочешь сделать хорошо - сделай это сам

Аватар пользователя savely

А настроить отдачу в плане "если с сайта с одного IP слито N байт за M времени (ну, десяток-два минут, к примеру), то бан конкретного IP на час-два-три-сутки в автомате" - не получится? Думаю, дебилов, постоянно переконнекчивающихcя на динамике для скачки сайта - найдется совсем немного.

А кому счас легко...

Отправить комментарий

Содержание этого поля является приватным и не предназначено к показу.
  • Разрешённые HTML-теги: <a> <em> <strong> <cite> <code> <ul> <ol> <li> <dl> <dt> <dd> <img>
  • You can use BBCode tags in the text. URLs will automatically be converted to links.

Подробнее о форматировании текста

Антибот - введите цифру.
Ленты новостей