eleday

Пропадаю, пропадаю До ЕГЭ меньше месяца, готовлюсь, ребята, поэтому до канала руки не доходят, к сожалению Вернуться в темп планирую, когда — не знаю

Разбираемся с устройством баз данных При разработке практически любого программного продукта очень скоро возникает потребность в хранении данных. Для этого используют специальные сервисы — СУБД (система управления базами данных) Сегодня залезем внутрь и разберёмся, как они работают. Для начала немного вводных Оговорка: обсуждаем стандартные SQL СУБД, не углубляемся в разновидности и их особенности - Взаимодействие с БД Программе, которой необходимо сохранить или получить какую-то информацию, абсолютно не нужно знать, как устроены базы данных, в каком формате и как там все хранится. Вместо этого она использует SQL (Structured Query Language) — специальный язык для общения с СУБД Например, чтобы получить имя пользователя с id = 42: SELECT name FROM users WHERE id = 42; А чтобы добавить красную лампу INSERT INTO devices (type, color) VALUES ('lamp', 'red'); - Схема В SQL-базах данные сохраняются в таблицы. В каждой таблице есть колонки — поля с определённым типом и строки — записи об отдельных объектах, например: Таблица users id name age admin 1 Вася 45 false 2 Петя 67 true - Лезем внутрь Чтобы разобраться с тем, как работает СУБД, проследим путь от SQL-запроса до возвращенных данных 1. Прием запроса, парсинг СУБД принимает SQL-запрос от пользователя, проверяет его на синтаксические ошибки и из набора букв преобразует в AST (Abstract Syntax Tree) Когда-то подробно коснёмся этой темы 2. Семантический анализ Запрос сопоставляется с реальной базой. Проверяется, существуют ли запрашиваемые таблицы, совпадают ли типы данных 3. Планирование СУБД определяет оптимальный план выполнения задачи: генерирует различные варианты, оценивает их сложность и выбирает лучший 4. Исполнение Каждый узел плана — оператор, который вызывает следующий. Например: - Взять строку из таблицы - Проверить, выполняется ли условие (id = 42) - Добавить строку в результат, если выполняется - Повторить для следующей строки 5. Хранение данных Перед записью данные сериализуются в бинарный формат и сохраняются на диск блоками по 4–16 КБ — страницами 6. Индексы Специальная структура — индекс — позволяет осуществлять более быстрый поиск. Он хранит отсортированные ключи и соответствующие указатели на реальные данные. Для поиска по проиндексированному полю не нужно перебирать всю таблицу, можно просто взять уже сохраненный указатель Если индекса нет, СУБД выполняет полный перебор таблицы, проверяя каждую строку 7. Кэширование Диск медленный, поэтому СУБД хранит часто используемые страницы в оперативной памяти, что позволяет реже читать диск и ускоряет работу 8. Транзакции Транзакция — группа операций, которые должны выполниться вместе Обычно СУБД следуют наборам требований ACID: - Atomicity (атомарность) — транзакция рассматривается как единое целое: либо выполнится все, либо ничего - Consistency (согласованность) — исполнение транзакции приводит систему в корректное состояние - Isolation (изоляция) — транзакции, исполняющиеся в одно время не должны мешать друг другу - Durability (устойчивость) — после успешного выполнения транзакции ее результат сохраняется даже при сбое системы 9. Журналирование Перед тем, как выполнить действие, СУБД записывает его в журнал. Это позволяет восстанавливать данные в случае сбоя 10. Конкурентность Может случится такое, что несколько транзакций одновременно обращаются к одним и тем же данным. Чтобы избежать конфликтов, используются блокировки и MVCC (версионность данных) После обработки данные возвращаются клиенту. В случае, если возвращать ничего не требуется (при добавлении, изменении или удалении записей), возвращается статус: успешно или нет Итоговая схема от запроса до данных: - SQL - парсинг - AST - план выполнения - исполнение - индексы / диск - результат Что думаете про такой формат больших постов? На какие темы хотели бы видеть ещё? @eleday

Готовишься к Python-собеседованию? В @CrackPythonBot — реальные вопросы, которые сейчас задают в Яндексе, Тинькофф, Авито и FAANG. Не учебные, а живые — те самые, что прозвучат на твоём собесе. — Сотни вопросов: Python, Django, async, SQL, системный дизайн — От джуна до сеньора — реальные вопросы со всех уровней — Подробный разбор: не просто «правильный ответ», а как ответить, чтобы впечатлить — 5 минут в день, прямо в Telegram. Бесплатно. 👉 Открыть бота →

IP vs MAC — почему у устройств в сети есть сразу два адреса Серия WEB с нуля  1. IP — логический адрес, может меняться. Используется на уровне L3 для маршрутизации между сетями 2. MAC — уникальный физический адрес. Я бы скорее назвал его идентификатором, чем адресом. Используется на уровне L2 внутри локальных сетей @eleday // MAX

Kubernetes: это сложно? Мы разберем основные ошибки, чтобы вы не наступали на те же грабли Приглашаем на вебинар: «Неочевидные проблемы Kubernetes, которые легко упустить» 👉 Этот вебинар создан для тех, кто ещё ни разу не работал с Kubernetes, боится первых шагов Спикеры: Виталий Лихачев 🔹 Инженер по надёжности сайта (SRE) в нидерландской компании в туристической отрасли (TravelTech) 🔹 10+ лет опыта Всеволод Севостьянов 🔹Ведущий инженер в Lokalise 🔹10+ лет на разных языках (php, java, Go) О чем поговорим? ✅Архитектура k8s ✅Мифы о k8s ✅Проблемы ресурсов и планирования ✅Механизмы, позволяющие системе регулярно проверять состояние контейнеров и приложений, работающих в подах (healthchecks) и жизнь подов ✅Хранение данных в кубах ✅Наблюдаемость (observability) ✅Релизные циклы ✅Риски инфраструктуры 🗓 6 мая, 19:00 мск ✍️ ЗАНЯТЬ МЕСТО НА ВЕБИНАРЕ

Появился удобный AI-инструмент для подготовки к найму и прохождения собеседований - Sobes Copilot. Это ассистент, который помогает прямо во время интервью: слушает диалог, распознаёт речь в реальном времени и подсказывает, как лучше ответить. Работает в Zoom, Google Meet, Teams, VK Calls и других платформах, и не виден при демонстрации экрана. Что есть в Sobes Copilot: • Подсказки в реальном времени во время собеседований • Пост-анализ интервью - сервис разбирает прошедший созвон, выделяет сильные и слабые места, удачные формулировки и зоны роста • Генератор и улучшение резюме - помогает собрать сильное резюме под конкретную вакансию • Мок-собеседования (и System Design) - тренировки с ИИ, приближённые к реальным интервью • Авто-отклики на HH - автоматизируют массовую подачу на вакансии по заданным фильтрам Если хочешь проходить собеседования спокойнее, увереннее и системнее - посмотри, что умеет Sobes Copilot.

Модели OSI и TCP/IP 1⃣ OSI Данные в интернете между двумя клиентами проходят длинный путь. Чтобы определить и упростить его понимание, придумали модель OSI В ней данные проходят семь уровней: Например, есть текстовое сообщение "Привет, мир" 7. Прикладной — то, что видит пользователь (HTTP, FTP и т. д.) Сообщение становится HTTP-запросом со своими заголовками и форматом 6. Представления — кодировка, шифрование HTTP-запрос кодируется (например, UTF-8) и шифруется (TLS) 5. Сеансовый — управление сессиями С нашим запросом ничего не будет, да и в реальных условиях этот уровень обычно не выделяется, а о объединяется с прикладным 4. Транспортный — доставка (TCP/UDP) Сообщение разбивается на сегменты, каждый из которых получает дополнительные заголовки 3. Сетевой — маршрутизация (IP) Добавляется информация об IP-адресе отправителя и получателя 2. Канальный — передача внутри сети, например, Ethernet IP-пакеты упаковываются в кадры, к ним добавляются MAC-адреса 1. Физический — провода, биты Сообщение превращается в электрические или радиосигналы Полученные физические сигналы передаются на следующее устройство (маршрутизатор или конечный клиент) и проходят обратный процесс "разборки" по схеме снизу вверх 2⃣ TCP/IP На практике OSI оказывается сложной и излишне подробной, поэтому чаще используется более простая и удобная модель — TCP/IP 4. Прикладной — HTTP, DNS и др. 3. Транспортный — TCP/UDP 2. Интернет — IP и маршруты 1. Сетевой доступ — всё про физику и локальную сеть А еще, если увидите L1, L2, ..., L7 — это про OSI. L — layer, то есть это сокращённое обозначение уровней А что поделать, буду дублировать и так — MAX @eleday

ой, чтош делается, ничего не работает

А если нехорошо, то что именно? Буду рад в комментариях услышать, это очень поможет сделать так, как удобно вам