🛠 Почему сайт тормозил и падал 27–28 октября
С утра 27 октября chaptify то зависал, то не открывался совсем. Я разобралась, в чём дело.
На сайт налетели роботы: поисковый робот китайского Baidu и пара сборщиков данных, которые притворялись обычными браузерами. Они перебирали каталог со всеми возможными сочетаниями фильтров: жанр × переводчик × сортировка × время…
В цифрах:
• 146 тысяч запросов за 10 минут, это около 240 в секунду;
• из каждых 100 запросов 98 были от роботов и только 2 от живых читателей;
• сервер собирал каждую такую страницу с нуля, память разбухала, сайт падал. За полтора дня он упал 13 раз.
28 октября в 15:30 по МСК закрыла этим роботам вход. Теперь сервер отбивает тысячи их запросов в секунду, и до сайта они не доходят. Страницы снова открываются примерно за секунду.
Подписки, закладки и прогресс чтения не пострадали: база данных всё это время работала. Если что-то ещё тормозит, напишите мне, Tenebris, куда угодно.
Спасибо за терпение 💜