Post #248

🔥 Good news, everyone! The past few weeks have been extremely eventful. — A week ago, there was a massive failure in Telegram. Bots were stripped of the ability to send messages, resulting in an error when trying to deliver notifications to a channel or group. This was caused by a malfunction in Telegram itself, and we had to tag and deactivate almost all chats in the system. The issue was fixed in 6 hours, but we had to re-check all channels, which took a lot of time and slowed down the bot's operation. — The next "surprise" came from Twitter. Unexpectedly, the Twitter API started returning the exact same set of links leading to strange Asian pornography for all accounts. And all subscriptions that were under review at that time received them. We noticed this fairly quickly and had to shut down Twitter for nearly two days. Now everything is working properly, Twitter fixed everything on their end, and on our part, we have added a few checks to prevent this from happening again. — In the last month, the system has not been very stable. We constantly observed slowdowns, process hang-ups, and queues through monitoring. We decided to investigate and conducted a full audit of the entire system. The results were not very pleasant, curious users are actively trying to kill the system: generating hundreds of clones, creating RSS feeds with links leading to logical bombs (infinite files), flooding with links, and so on. Basically, because of this, we have been actively working on fixes and optimizations for the past week, and the results in terms of figures look promising. As a negative point, the system occasionally overloaded or "went inwards" for a while. To compensate for this, we have credited an additional 5 days to all premium accounts. In a couple of days, there will be another post with a detailed description of all the changes, it is impossible to cover everything in this post, we have reached the limits of Telegram. We continue to check and test. If you encounter any problems, feel free to write to the support group @madbots_talk. ———————— 🔥 Хорошие новости! Последние несколько недель были крайне насыщенными. — Неделю назад в Telegram был массовый сбой. Боты были лишены права на отправку сообщений, что вызвало ошибку при попытке доставить нотификацию в канал или группу. Это было вызвано неисправностью в самом Telegram, и мы были вынуждены пометить и деактивировать почти все чаты в системе. Проблема была исправлена через 6 часов, но нам пришлось заново проверить все каналы, что заняло много времени и замедлило работу ботов. — Следующий "сюрприз" прилетел от Твиттера. Cовершенно неожиданно API Твиттера начало возвращать абсолютно для всех аккаунтов одинаковый набор ссылок, ведущих на странную азиатскую порнографию. И все подписки, которые были на тот момент на проверке, получили их. Мы заметили это достаточно быстро и пришлось выключить Твиттер почти на два дня. Сейчас все работает как надо, Твиттер всё починил на своей стороне, а мы в свою очередь добавили несколько проверок, чтобы это не повторялось. — Последний месяц система работала не особо стабильно, мы постоянно наблюдали тормоза, зависания процессов и очередей через мониторинг. Решили разобраться и провели полноценный аудит всей системы. Результаты оказались не особо радостными, любопытные пользователи всячески пытаются убить систему: генерируют сотни клонов, создают RSS-ленты со ссылками, ведущими на логические бомбы (бесконечные файлы), заваливают ссылками и так далее. Собственно, из-за этого последнюю неделю мы очень активно занимались исправлениями, оптимизациями, и пока результаты по цифрам выглядят оптимистично. Как отрицательный момент, система периодически перегружалась или "уходила в себя" на некоторое время. Чтобы это компенсировать, мы начислили дополнительные 5 дней всем премиум-аккаунтам. Черех пару дней будет еще один пост с подробным описанием всех изменений, в этом посте все не расписать, уперлись в лимиты Телеги. Проверяем, тестируем. Если вы обнаружите проблемы, не стесняйтесь писать в группу поддержки @madbots_talk.