Вырвался из болота жизни
Опять ощущение вязкого болота жизни. Висит куча самых разных мелких недоделок, но заниматься ими не хочется от слова совсем. А хочется наглухо отключить Интернет и целыми днями играть в Starcraft.
В частности, снова вылезла проблема с ложными срабатываниями SiteKnockerBot. Попробовал было вернуться к Go-версии. Но получается вот что: первый запуск бота проходит нормально, все проверки завершаются за 60-80 секунд, ложных срабатываний почти нет. Запускаю вторую проверку с теми же параметрами (количество параллельных запросов, задержки после выполнения каждого и таймауты) и либо начинают сыпаться ложные срабатывания, либо (при включённой настройке SO_REUSEADDR) происходит остановка проверки на время, существенно превышающее проверочный цикл. Видимо, истощаются какие-то внутренние ресурсы системы. Сначала думал, что не хватает портов для исходящих соединений, но в настройках системы их в разы больше, чем проверок — с 32001 до 65535 (а проверок на тестовой базе всего 1745). Поставил кеширование DNS из соображения, что DNS-запросы тоже могут съедать ресурсы, но особых изменений не вижу. И что делать — непонятно. Даже подумываю поднять виртуальную машину с FreeBSD и попробовать на ней — вдруг там сетевой стек лучше реализован и такой проблемы нет. Правда, перспектива полной переустановки системы на VDS с ботами и кучей всего остального тоже как-то не радует.
UPD: пока писал, совершенно случайно выяснилось, что проблема была совсем в другом. Я тестировал бота на домашнем компьютере, и от большого количества соединений переполнялась таблица NAT на роутере. Перенёс бота на сервер с прямым IP — всё заработало как надо даже при 200 параллельных проверках (на большее количество я пока не решился, тем более, что даже по сравнению со 120 ускорение было весьма незначительным — всего на пару секунд) + параллельном прогоне через сервер видеотраффика с YouTube. Единственный минус — время получения ответа от проверяемых серверов выросло раза в два, что может вызвать больше срабатываний о медленном ответе.
Ещё никак не могу обновить страницу про свои компьютеры на втором личном сайте. А ещё хочу закончить статью про мир школы и мир улицы, позавчера немного продвинулся, но потом снова дело встало. И ещё висит задача по freelance-деятельности. Вроде и небольшая, но никак не могу настроиться.
Но вообще, к вечеру, после того, как решилась проблема с ботами, жизнь как-то наладилась. Хоть и не успел ничего больше, кроме этого.
В частности, снова вылезла проблема с ложными срабатываниями SiteKnockerBot. Попробовал было вернуться к Go-версии. Но получается вот что: первый запуск бота проходит нормально, все проверки завершаются за 60-80 секунд, ложных срабатываний почти нет. Запускаю вторую проверку с теми же параметрами (количество параллельных запросов, задержки после выполнения каждого и таймауты) и либо начинают сыпаться ложные срабатывания, либо (при включённой настройке SO_REUSEADDR) происходит остановка проверки на время, существенно превышающее проверочный цикл. Видимо, истощаются какие-то внутренние ресурсы системы. Сначала думал, что не хватает портов для исходящих соединений, но в настройках системы их в разы больше, чем проверок — с 32001 до 65535 (а проверок на тестовой базе всего 1745). Поставил кеширование DNS из соображения, что DNS-запросы тоже могут съедать ресурсы, но особых изменений не вижу. И что делать — непонятно. Даже подумываю поднять виртуальную машину с FreeBSD и попробовать на ней — вдруг там сетевой стек лучше реализован и такой проблемы нет. Правда, перспектива полной переустановки системы на VDS с ботами и кучей всего остального тоже как-то не радует.
UPD: пока писал, совершенно случайно выяснилось, что проблема была совсем в другом. Я тестировал бота на домашнем компьютере, и от большого количества соединений переполнялась таблица NAT на роутере. Перенёс бота на сервер с прямым IP — всё заработало как надо даже при 200 параллельных проверках (на большее количество я пока не решился, тем более, что даже по сравнению со 120 ускорение было весьма незначительным — всего на пару секунд) + параллельном прогоне через сервер видеотраффика с YouTube. Единственный минус — время получения ответа от проверяемых серверов выросло раза в два, что может вызвать больше срабатываний о медленном ответе.
Ещё никак не могу обновить страницу про свои компьютеры на втором личном сайте. А ещё хочу закончить статью про мир школы и мир улицы, позавчера немного продвинулся, но потом снова дело встало. И ещё висит задача по freelance-деятельности. Вроде и небольшая, но никак не могу настроиться.
Но вообще, к вечеру, после того, как решилась проблема с ботами, жизнь как-то наладилась. Хоть и не успел ничего больше, кроме этого.