Бессонный кодер

Лучший навык в работе — умение признавать свои ошибки. Ошибаются все, а вот учатся на них и выносят пользу — далеко не многие. 3 мая вы могли заметить, что Имперский Стражник с ночи работал не очень стабильно: не отвечал на некоторые запросы, а на другие отвечал по несколько минут. Мы признаём — мы накосячили. И сильно. Давайте вместе посмотрим, что мы делали и где всё пошло не так. Уже давно у нас стояла задача на создание второй, текстовой модели для ИИ-модерации. Сейчас мы умеем проверять только визуал, но если запрещённый контент находится в тексте — мы его не видим. Тут и должна помочь текстовая модель. 27 апреля — 1 мая Мы берём в активную разработку задачу на создание и интеграцию текстовой модели. Первая итерация: для хранения угрозы используется единое поле danger с приоритизацией по опасности. На наш взгляд, это была рабочая и вполне нормальная логика. Мы дописали код и выкатили релиз в продакшен. 2 мая, 13:00 — первый звоночек Нам присылают репорт и интересное предложение. Суть: Стражник выдал ограничение за порнографию в ответ на стикер, где был лишь шуточный текст про половой акт. Предложение звучало так:

«А ты не думал им отдельные категории выдать? Потому что порнография текстом и порнография картинкой — вещи немного разные».

Мы задумываемся и понимаем: поинт крайне корректный. Нужно срочно исправлять ситуацию, пока массовые ограничения с такой логикой не улетели всем подряд. 2 мая, 14:15 Создаём задачу IG-132841, в рамках которой планируем рефактор: intent_media intent_text Разделяем текстовую и визуальную угрозу. 3 мая, 1:26 Выкатываемся на прод (не с первого раза). Пропускная способность крайне низкая, при этом Load Average — 23. Потеряли индексы в БД. Спустя 20 минут восстанавливаем индексы, чиним медленные запросы и продолжаем жить. 3 мая, 1:52 Отваливается Prometheus. Мы уже понимаем: вечер будет весёлый. За 7 минут дебага находим кривой запрос сбора статистики и правим его. 3 мая, 2:27 После ещё пары хотфиксов мы наконец в проде. Всё работает. Без даунтайма внедрили фичу. Красота. Тогда мы ещё не знали, что натворили. За пару минут система разгоняется до 11 ops. Что такое 11 ops? Это 11 файлов, которые скачиваются, проверяются и сохраняются каждую секунду. 3 мая, 3:01 — первый звонок армагеддона Начинаем получать от BOT API: TelegramError: 429: Too Many Requests: retry after 60 Мы подумали, что упёрлись в лимит getFile. Ну бывает. Сейчас ограничим скорость и пойдём спать. Ага. Конечно. Оказалось, мы упёрлись в лимит общего количества запросов к BOT API. Ошибки начали ловить вообще все методы бота. Через 8 минут внедряем rate limiter и заканчиваем рабочий день. 3 мая, 14:17 Замечаем странное поведение. Несмотря на лимитер, Too Many Requests становится только больше. Очень странно. Я решаю написать миксин, который будет отдавать в Prometheus статистику запросов в разрезе бота и метода. 3 мая, 14:40 Дописываю логику, собираю дашборд… и тут становится понятно то, что мы уже начинали подозревать. Лимитер. Не работает. При лимите в 20 ops… МЫ ДЕЛАЕМ 95 OPS. 3 мая, 16:36 Релизим новый лимитер, который уже нормально работает с потоками и не допускает ошибок прошлой версии. Но за время разработки у нас случился тот самый:

«пик, после которого лимиты Telegram посадили нас на пику».

Из-за разгона до 173 ops Telegram на минуту отрезал нам вообще все запросы. Полностью. Да, было больно. 3 мая, 17:00 Инцидент полностью разрешён. Очереди разгребены, фон ошибок снижен, всё стабилизировалось. Что можно сказать по итогу? Ну… мы очень жёстко накосячили 😅 Недостаток метрик и нормальных prod-like тестов привёл к тому, что в продакшен уехал код, который устроил харакири нашей пропускной способности. Но зато: — появились новые дашборды — алерты на рост ops — понимание, куда смотреть и чёткое осознание того, насколько опасно релизить в прод Вот как-то так :3 А у вас в проектах были подобные инциденты? Буду рад почитать истории в комментариях. Ну и да, ещё покидаю туда цитаты из рабочего чатика — там были настоящие легендарные сообщения

Настало время рассказать причину моего полного отсутствия в последнее пару недель, я переезжал) До этого не задумывался насколько у меня много всякого мерса и книг, теперь я могу стримить и делать контентик почти каждый день) Какие фандомы и художников узнали? 🥰

Clompi: Ты. Ключ. Остальное лишнее. Никаких сборов IP, cookies, кроме одной технической локальной куки для Твоего входа на сайт, никаких email, паролей, телефонов, seed фраз, лишь ключ. Полностью анонимный и зашифрованный сайт, никто не видит что Ты там делаешь, даже Я. В нём: Личное зашифрованное локальное хранилище с локальным LLM чатом, которое находится в кэше браузера, шифрование ( AES-GSM ) По мимо этого, чат, навигаторы, ассистенты, гиды, сообщество идей и т.д Я делаю обновления без громких аноснов, всё что есть и будет: Твоё. Никаких подписок, привилегий, токенов, доплат, лишь ключ разово. Ты поддержал меня и Я поддержу Тебя. Ключ навсегда 2000₽, в боте @Clompi_bot Канал: https://t.me/clompi_ai?erid=2W5zFHKRCoj Сайт: https://tglink.io/66a294b23e5ce0?erid=2W5zFHKRCoj

AI довольно сильно развился за последние пару лет. Помните времена, когда, задавая ему вопрос на русском, вы могли наблюдать весёлые игры с падежами и склонениями? А что сейчас? Есть уже не десятки, а тысячи людей, которые воспринимают текстовые (и не только) модели как друзей, напарников или даже партнёров. Даже если не говорить про полноценный ИИ, Диана из PRAGMATA поднимает рождаемость сильнее, чем добрая часть демографических программ Японии и России. Давайте попробуем понять, почему вообще так происходит и надо ли что-то с этим делать. Лучший способ понять тему — изучить её с самого начала. Сначала была Элиза. Дело было в 1966 году. Профессор MIT Джозеф Вейценбаум хотел разработать программу, которая смогла бы пройти тест Тьюринга. Он решил для своего эксперимента использовать программу диалогового формата (чат-бот до того, как это стало мейнстримом, да и до того, как это слово вообще появилось). Так как мощности тех лет были сильно ограничены, Элизе надо было выбрать роль, которая объясняла бы примитивные фразы и короткие открытые вопросы. Для этого выбрали амплуа верджинского психотерапевта, хотя он и после много раз указывал, что не закладывал идеи создания системы-психотерапевта. У него была одна задача: создать программу, которая убедит её пользователя в своей разумности. Итоговый результат оказался очень даже хорошим, учитывая год создания. Под капотом Элиза имела речевую модель, которая могла генерировать предложения с использованием ключевых слов — простые предложения, но для 1966 года (да и в массовости до 2020-х) это представлялось чистой магией. Как она это делала, рассмотрим детальнее в следующих постах этой рубрики. А пока, поделитесь в комментариях, есть ли ИИ или другие цифровые образы, которые пробуждают в вас что-то большее :3

Ты вроде бы «состоялся» в своей карьере, но не знаешь, как развиваться дальше? 🧐Если прежние ориентиры не работают, и понятного вектора нет - нужна осознанная работа над собой и своими карьерными целями. На практическом интенсиве от DevOps Фабрики мы:🟠 Разберем, как устроено карьерное продвижение и как его получить🟠 Найдем ошибки, которые мешают твоему росту прямо сейчас🟠 Проанализируем твою ситуацию и дадим рекомендации, что делать📅 Мероприятие пройдет 20 сентября в 10:00 МСК, онлайн➡️ Узнать подробнее и записаться можно 'https://t.me/devops_factory/191?erid=2W5zFHn1zrL' rel='nofollow'>тут

Помогаем экономить на батарейках🔋 Обычные батарейки в играх: ❌ Садятся неожиданно ❌ Текут - могут убить дорогую мышь или клавиатуру ❌ Их надо менять каждый месяц, если играешь много 💡Выход - аккумуляторы АА "Заряжай" 2800 mAh. ⚡️ 2800 mAh реальной ёмкости ⚡️ Стабильное напряжение 1.5V ⚡️ Не греются ⚡️ До 1000 циклов заряд-разряд Главное: зарядили где угодно от Type-C и забыли.  Один аккумулятор заменяет до 1000 одноразовых батареек. ♻️ Набор из 4 штук: 2 в девайсы, 2 на зарядке. Играешь без перерывов. 👉 Артикул Ozon  Размер АА: 3626892050 Размер ААА: 1558732102 Предоставляем промокод со скидкой 5% только для тебя: ZRZH3F484F2F https://www.ozon.ru/highlight/podborka-tovarov-4206505/ Реклама. ООО "ЗАРЯЖАЙ", ИНН 0800015912, ЕРИД: 2VSb5wPsrAe

Я чуть высвободился, перераспределил нагрузку по работе и постам, думал, щас как допишу все драфты, но... А вы и сами видите. Но кстати судьба намекает мне, что надо всё-таки для вас писать, я потерял аккумулятор от геймпада(

Начинаем) https://www.twitch.tv/sleepless_code

Кто я? Хороший вопрос, но сегодня на него два ответа: бессонный и раб тех. долга. Нет ничего лучше чем закрытие тех. долга за 2 года перед сном, так что, готовьтесь наслаждаться, а возможно и засыпать под мои страдания. Уже чуть более как обычно, на твиче в 23:30 по МСК: https://www.twitch.tv/sleepless_code

Ну и ну. Решил узнал мнение у аудитории, а аудитория только сильнее запутала :D Голоса жёстко идут в майн, но при этом сообщения в чате, директ, бота, личку (аж до сюда добрались) хотят и второго. Ну что же.... Будем смотреть и я думаю попробуем совместить, но в пропорции где будет больше Java, и меньше TS. 75 на 25)