Автор: apple_rom , 31 октября 2008
Уважаемые обладатели толстых и быстрых!

Убедительная просьба при желании скачать сайт, учитывать, что данное желание нереально для Вас и, к большому сожалению, пока и нас одновремённо. Причина проста - он очень подрос и обурел, объём его из-за гигантской таксономии увеличился на порядок. Например, только один гугл приступил к индексации уже третьей сотни тысяч страниц:
Результаты 1 - 10 из приблизительно 210 000 с www.rom.by. (0,26 секунд)
А ещё на нашу серверную голову постоянно приползают полчища других пауков поисковиков. И если учесть кроме объёма сайта выросшую в последние время в несколько раз его популярность (с одной-двух до более чем пяти тысяч посетителей в день) - даже недавний переход на более современный сервер не спасает, когда вы ещё и начинаете "сосать не всебя".
Потому, ради общего блага - чтобы сайт был доступен для остальных 99.9% процентов пользователей - упомянутый 0.1% будет жёстко баниться (по айпишнику - вся подсеть провайдера качальщика). Понятно, что в результате будут страдать другие, сидящие на этом же провайдере пользователи.

Потому просьба, если Вам так уже нужно почитать в оффлайне какие-то материалы - обратитесь напрямую ко мне, я попытаюсь решить данный вопрос без скачивания сотен тысяч страниц сайта (которые всё равно не будут прочитаны даже на 1%).

Содержимое данного поля является приватным и не предназначено для показа.

BBCode

  • HTML-теги не обрабатываются и показываются как обычный текст
  • You may use the following BBCode tags:
    • [align]
    • [b]
    • [code]
    • [color]
    • [font]
    • [hr]
    • [i]
    • [img]
    • [list]
    • [quote]
    • [s]
    • [size]
    • [spoiler]
    • [sub]
    • [sup]
    • [table]
    • [u]
    • [url]
  • Адреса веб-страниц и email-адреса преобразовываются в ссылки автоматически.

savely

17 лет 3 месяца назад

Текущие ограничения на скачивание сняты в связи с их неэффективностью.
Продолжаем банить.

И "слава тебе Господи", уж заколебало, когда страница пришла, а стиль не применился. Весьма прикольно. Сначала...

apple_rom

16 лет 9 месяцев назад

По результатам новой статистики забанены следующие провайдеры (т.к. с этих подсеток было пять и более попыток создать недопустимую нагрузку, попросту говоря - пытались выкачивать сайт):
inetnum: 89.189.16.0 - 89.189.23.255
inetnum: 212.92.188.0 - 212.92.191.255
netname: KIS-PPPOE
descr: Business Communication Agency, Ltd.
descr: Nizhny Novgorod, Russia
country: RU

inetnum: 91.124.0.0 - 91.124.255.255
inetnum: 92.113.0.0 - 92.113.255.255
netname: UKRTELNET
descr: Ukrtelecom IP access network
country: UA

inetnum: 95.189.128.0 - 95.189.143.255
netname: WEBSTREAM
descr: OJSC "Sibirtelecom"
country: RU

inetnum: 95.58.64.0 - 95.58.69.255
netname: NKZ-PETR-METRO
descr: JSC Kazakhtelecom, North Kazakhstan Affiliate
descr: Metro Ethernet Network
descr: Petropavlovsk
country: KZ

DjAndy

16 лет 9 месяцев назад

Вон из-за чего укртелекому бан выставлен... Надо наверное таки автоматизировать. IP скоторого качается сайт, автоматически ограничить в скорости, а после выкачки определённого кол-ва страниц или по истечении какого-то времени обрубать адрес на несколько часов. Но только этот адрес. Рубить целыми сегментами на постоянной основе неправильно. Кроме IP адресов существует множество других уникальных идентификаторов оборудования, ПО и их номеров, которые можно запрашивать в соединении и получать автоматически. На sysadmins.ru ничего не подсказали по этому поводу ? Как вариант, пока не разберётесь с автоматизацией процесса, сделать доступ к разделам форума только зарегистрированным пользователям. На сайте же, тысяч страниц быть не может. Если есть, то быстрее всего это свалка новостей. Для поисковиков да, она полезна, а для юзеров... опять таки, незарегистрированным нечего в новостях делать. Доступ к чаще всего читаемым материалам оставить в открытом виде.

rgt

16 лет 9 месяцев назад

DjAndy Я прекрасно понимаю Ваше негодование и обиды, но попробуйте и Вы понять тех, кто этот ресурс содержит даже не на своем энтузиазме, а банально за собственные деньги. Почему, собственно, эти люди должны тратить свое время и свои деньги для защиты от тех, кто заведомо никогда не использует и малой доли скачанного, и ограничивать при этом остальных посетителей.
Что же до Ваших утверждений, что все это легко реализовать, равно как того, что на сайте не может быть тысяч страниц информации, настоятельно рекомендую для начала поближе познакомиться с вопросом...
Лично я считаю, что Вы оба раза неправы (ИМХО - Имею мнение, хрен оспоришь). Так же имею наглость считать, что будучи в прошлом человеком обеспечивавшим хостинг сайта, знаю проблему изнутри, а не имея сейчас к этому отношения, могу оценивать положение дел объективно.
Если же Вы готовы предложить конкретные варианты, без ссылок на "дядю", будь это любой, сколь угодно автритетный ресурс, то думаю, Ваши предложения всегда будут как минимум с большим интересом выслушаны, а при возможности и реализованы.

Roman M.

16 лет 9 месяцев назад

А бан - это навсегда?
Или есть шанс у забаненой сети реабилитироваться?

Root

16 лет 9 месяцев назад

шансы есть всегда. Но, думаю, что пробовать страдать фигней не стоит изначально :-)

apple_rom

16 лет 9 месяцев назад

Обратиться ко мне - я всегда разбаню нужную подсетку. Однако "без гарантий", т.е. до очередного "скачивания" из оной.

R_Soft

16 лет 8 месяцев назад

По поводу бана Укртелекома выскажу своё ИМХО. Всё это - последствия тотального перехода юзеров на "анлим". Причем, судя по последним данным (за последние несколько месяцев), на анлим перевели и других пользователей из соседних/смежных сетей, никак не относящихся к Укртелекому. Как правило цена за услугу "анлима" не возрастает, урезают только скорость. Безусловно, некоторые пользуются этим "нововведением" бездумно, качают всё подряд. В итоге из-за одного-двух "активных" юзеров страдают сотни/тысячи ни в чем не повинных пользователей, т.к. банят целые подсети - ничего другого, к сожалению не придумаешь в данном случае.
Обо всём этом я могу судить по отзывам многичленных знакомых/друзей, которые рассказывали о переходе на анлим. Ну и плюс ситуация по сабжу...
Вдобавок, ещё много людей собираются перейти на анлим в ближайшее время. То ли ещё будет. :(

Santa

16 лет 8 месяцев назад

/images/koloboks/future.gif

savely

16 лет 8 месяцев назад

А настроить отдачу в плане "если с сайта с одного IP слито N байт за M времени (ну, десяток-два минут, к примеру), то бан конкретного IP на час-два-три-сутки в автомате" - не получится? Думаю, дебилов, постоянно переконнекчивающихcя на динамике для скачки сайта - найдется совсем немного.