Масштабирование базы данных: что проверить бизнесу
Масштабирование базы данных начинается с проверки конкретной операции. На примере каталога и оформления заказа покажем, когда помогают оптимизация, кэш или реплика, какие данные должны оставаться актуальными и как оценить стоимость восстановления.
Масштабирование базы данных нужно, когда хранилище перестаёт справляться с ростом запросов или объёма данных. Начните с измерения скорости конкретных операций, проверьте запросы и индексы, затем сравните увеличение мощности, кэш, реплики и разделение данных. Вместе со скоростью оцените актуальность результатов, цену хранения и время восстановления. Эти условия определяют, какой способ подходит бизнесу.
Как отличить перегрузку базы от медленного приложения
Возьмите операцию, где задержка влияет на работу. Например, покупатель открывает каталог, добавляет товар и подтверждает заказ. Измерьте время каждого шага. Открытие каталога может зависеть от запроса к базе, а подтверждение заказа — от внешней проверки оплаты. Если сравнивать только общее время, дорогой сервер может не изменить результат.
Соберите показатели за обычный период и за пик. Смотрите время ответа, долю ошибок, число одновременных запросов, ожидание соединений, нагрузку на процессор и диск. По выбранным операциям отметьте, какая часть времени приходится на базу. Для отдельного отчёта, который замедляет работу всех, полезно проверить, когда он запускается и какие данные читает.
Определите порог для пользователя. Например, форма заказа должна подтверждать сохранение за две секунды при определённом числе одновременных покупателей. Для ночного отчёта можно выделить отдельное окно. Тогда команда сможет доказать результат на том же сценарии после изменения.
Когда достаточно настроить запрос или увеличить мощность
Представим условный каталог, где страница отображает 30 товаров, а база проверяет сотни тысяч записей по нескольким фильтрам. Разбор плана выполнения может показать, что запрос читает больше строк, чем нужно. Команда проверяет индекс и изменение способа получения данных. Затем измеряет время чтения и влияние на запись, потому что дополнительные индексы занимают место и требуют обновления при изменениях.
Увеличение ресурсов одного сервера помогает, если причина связана с нехваткой памяти, процессора или скорости хранилища. Сравните стоимость и срок изменения с ростом нагрузки. При сезонном всплеске может хватить временного расширения. При постоянном росте оцените предел выбранной конфигурации и запас на время миграции.
Для бизнеса важно знать, какую проблему решает вложение. Если задержка возникает из-за одновременных обновлений одного объекта, дополнительная память может дать меньший эффект, чем изменение маршрута записи. Попросите команду показать измерения, на которых основана оценка.
Если вам нужно проверить архитектуру и работу системы при росте нагрузки, пригодится материал «Масштабирование и отказоустойчивость: в чём разница».
Что можно отдавать из кэша
Кэш хранит заранее полученные или подготовленные результаты. Он полезен там, где многие пользователи читают одни данные и допустима задержка обновления. Например, главную витрину можно готовить заранее. Для оформления заказа нужно отдельно проверить доступность товара и итоговую цену.
Задайте срок актуальности для каждой группы данных. Если товар участвует в короткой акции, согласуйте, когда новая цена должна появиться на витрине и что покажет покупателю система в момент заказа. Проверьте сценарий после изменения цены и сценарий с пустым кэшем.
Кэш тоже требует ресурсов и работы команды. Если после истечения срока тысячи запросов одновременно обращаются к базе, задержка возвращается. Для приёмки сравните не только обычное чтение, но и запуск после очистки или перезапуска.
Когда помогают реплики
Реплика получает изменения от основной базы. Если её можно использовать для чтения, на неё передают отчёты или часть запросов витрины. Это уменьшает нагрузку на основной сервер. Для данных, которые пользователь только что изменил, важно учитывать задержку репликации. Сразу после создания заказ должен отображаться в кабинете, даже если копия пока его не получила.
Спросите, какие операции продолжают писать в основную базу. Перенос отчётов на реплику помогает чтению. Если предел достигнут из-за потока записей, потребуется другая мера. Например, можно сократить число обновлений, переносить старые данные в архив или рассмотреть разделение нагрузки между хранилищами.
Разделение данных по нескольким базам меняет сопровождение. Операции между группами становятся сложнее, а перенос данных и изменение схемы требуют отдельного плана. Сначала оцените, какие операции действительно независимы. Документация PostgreSQL о резервировании и репликации.
Как оценить стоимость и восстановление
Посчитайте серверы, хранилище, передачу данных, резервные копии, наблюдение и время дежурной команды. Если база занимает 600 ГБ, каждая полная копия добавляет сопоставимый объём до учёта сжатия, срока хранения и способа резервирования. Проверьте расчёт у команды по данным реального стенда.
Назначьте целевое время восстановления и допустимый объём потери данных. Например, для каталога допустимо восстановление за час, а для принятых заказов требуется меньшая потеря последних изменений. Условия для этих данных нужно проверять отдельно. Реплика помогает при некоторых сбоях, а резервная копия позволяет вернуться к предыдущему состоянию. Пробный запуск восстановления покажет, сколько времени займут чтение данных, переключение приложения и сверка заказов.
Что спросить у команды перед изменением
Попросите предложить два варианта для одного и того же срока работы. Например, первый предполагает оставить один сервер и оптимизировать отчёт. Второй предусматривает реплику для аналитики. Для каждого варианта укажите срок внедрения, необходимое окно, возможность отката и расходы после запуска. Если оба дают нужную скорость, сравните риски сопровождения и ожидаемый рост через полгода.
Уточните, кто проверит результат после изменения. Для магазина подойдёт совместная проверка технической командой и человеком, который отвечает за оформление заказов. Исполнитель видит очередь соединений и нагрузку диска, а сотрудник замечает, что пропало сообщение о подтверждении. Вместе они могут связать метрики с потерянными продажами или задержками.
Подготовьте порядок остановки эксперимента. Например, если новые цены видны с недопустимым запозданием, отключите чтение из копии для витрины и повторите проверку.
Как принять результат масштабирования
Проверьте восстановление на данных сопоставимого объёма. Копия небольшого тестового набора может развернуться быстро, а для рабочей базы время будет зависеть от канала передачи, мощности хранилища и объёма журнала изменений.
На встречу по инфраструктуре можно взять карту нагрузки, условия актуальности и отчёт о восстановлении. Так проще обсуждать подходы со специалистами, которые запускали похожие сервисы. Программы ближайших встреч доступны в афише деловых мероприятий.
Ближайшие практикумы, вебинары и конференции: сравните программу, дату и условия участия.
Выбрать мероприятие →- ✓Выберите важный пользовательский сценарий
- ✓Найдите реальную причину задержки
- ✓Сравните стоимость вариантов
- ✓Проверьте актуальность данных
- ✓Восстановите рабочий объём на тестовом стенде
