Возможности системы резервного копирования WAL-G, полезные для администраторов данных
На PGConf.СПб 2024 Андрей Бородин, руководитель подразделения разработки РСУБД с открытым исходным кодом, Yandex Cloud, расскажет про несколько полезных функций WAL-G. Эту систему резервного копирования Андрей разрабатывает с 2017 года!
✔️Настройка троттлинга для изменения обычного режима «дешевое резервное копирование — быстрое восстановление»
✔️Расширенные возможности мониторинга согласованности для обеспечения надёжности резервных копий
✔️Catchup для быстрого сокращения лага и другие функции кластера высокой доступности
✔️Методы извлечения набора изменений для инкрементного резервного копирования
⚡️ Также Андрей расскажет о планах разработок, среди которых — создание согласованных резервных копий для шардированных кластеров и использование расширенных возможностей S3.
🔥PGConf.СПб 2024 пройдет в Санкт-Петербурге уже 1 октября. Специалисты представят технические доклады, пройдут демонстрации решений на базе Postgres Pro, участники обменяются опытом и пообщаются с сообществом PostgreSQL.
Регистрация на PGConf.СПб 2024
На PGConf.СПб 2024 Андрей Бородин, руководитель подразделения разработки РСУБД с открытым исходным кодом, Yandex Cloud, расскажет про несколько полезных функций WAL-G. Эту систему резервного копирования Андрей разрабатывает с 2017 года!
✔️Настройка троттлинга для изменения обычного режима «дешевое резервное копирование — быстрое восстановление»
✔️Расширенные возможности мониторинга согласованности для обеспечения надёжности резервных копий
✔️Catchup для быстрого сокращения лага и другие функции кластера высокой доступности
✔️Методы извлечения набора изменений для инкрементного резервного копирования
🔥PGConf.СПб 2024 пройдет в Санкт-Петербурге уже 1 октября. Специалисты представят технические доклады, пройдут демонстрации решений на базе Postgres Pro, участники обменяются опытом и пообщаются с сообществом PostgreSQL.
Регистрация на PGConf.СПб 2024
Please open Telegram to view this post
VIEW IN TELEGRAM
Postgres Professional — на «Cтачке» 2024!
27-28 сентября мы будем в Санкт-Петербурге на международной IT-конференции «Cтачка»:
✔️Расскажем о Postgres Pro Shardman — распределенной реляционной СУБД, которая справится даже с самой большой нагрузкой. Сначала демонстрация решения, затем — ответы на вопросы о СУБД
✔️Проведем секцию «Базы данных», где выступят наши эксперты и специалисты К2Тех, Unison Technologies, Базис-Центр, КБ Панорама и коммитеры PostgreSQL
✔️Выступим с несколькими докладами: «Лечим PostgreSQL под высокими нагрузками»; «Дело о пропавшей производительности в PostgreSQL»; «Как выбрать датацентр для своего любимого проекта?»
✔️Организуем квиз и представим масштабный стенд!
📍27-28 сентября, Санкт-Петербург, гостиница «Cosmos Прибалтийская». Билеты — на сайте. Следите за обновлениями — будем делиться кадрами с конференции!
27-28 сентября мы будем в Санкт-Петербурге на международной IT-конференции «Cтачка»:
✔️Расскажем о Postgres Pro Shardman — распределенной реляционной СУБД, которая справится даже с самой большой нагрузкой. Сначала демонстрация решения, затем — ответы на вопросы о СУБД
✔️Проведем секцию «Базы данных», где выступят наши эксперты и специалисты К2Тех, Unison Technologies, Базис-Центр, КБ Панорама и коммитеры PostgreSQL
✔️Выступим с несколькими докладами: «Лечим PostgreSQL под высокими нагрузками»; «Дело о пропавшей производительности в PostgreSQL»; «Как выбрать датацентр для своего любимого проекта?»
✔️Организуем квиз и представим масштабный стенд!
📍27-28 сентября, Санкт-Петербург, гостиница «Cosmos Прибалтийская». Билеты — на сайте. Следите за обновлениями — будем делиться кадрами с конференции!
Как сжатие работает в резервном копировании?
В докладе на PGConf.СПб 2023 — о важности работы компрессии в резервном копировании:
✔️Как использовать доступные алгоритмы: pglz, zlib, zstd, lz4 — в разных редакциях pg_probackup?
✔️Как сделать инкрементальное копирование и восстановление еще быстрее с PTRACK и CFS — сжатым табличным пространством в СУБД Postgres Pro?
✔️Какие есть планы разработки и интеграции с СРК-системами?
1 октября снова встретимся в Питере на PGConf.СПб 2024! Регистрируйтесь и участвуйте в крупнейшей конференции по PostgreSQL в Санкт-Петербурге.
👉 Смотрите доклад: Rutube, Дзен, ВК, YouTube
В докладе на PGConf.СПб 2023 — о важности работы компрессии в резервном копировании:
✔️Как использовать доступные алгоритмы: pglz, zlib, zstd, lz4 — в разных редакциях pg_probackup?
✔️Как сделать инкрементальное копирование и восстановление еще быстрее с PTRACK и CFS — сжатым табличным пространством в СУБД Postgres Pro?
✔️Какие есть планы разработки и интеграции с СРК-системами?
1 октября снова встретимся в Питере на PGConf.СПб 2024! Регистрируйтесь и участвуйте в крупнейшей конференции по PostgreSQL в Санкт-Петербурге.
👉 Смотрите доклад: Rutube, Дзен, ВК, YouTube
Нейронные оптимизаторы запросов в реляционных базах данных
Чем сложнее запрос — тем больше вариантов его исполнения внутри системы. Для снижения вариативности используются эмпирические правила, они сокращают пространство поиска на несколько порядков. Но с такими правилами есть риск отсечь оптимальный план выполнения запроса.
С развитием ML появляются новые решения при работе над оптимизацией выполнения запроса — нейронные оптимизаторы, которые сами находят закономерности в выполнении сложных планов.
В статье на Хабре — о трех таких решениях:
✔️MSCN (2018) — модель для оценки кардинальности запросов;
✔️DQN (2018) — модель построения плана выполнения запроса;
✔️NEO (2019) — end-to-end-подход, объединивший в себе как обучаемую функцию оценки скорости выполнения заданного плана, так и само его построение
🔥 Это первая часть разбора нейронных оптимизаторов, позже продолжим рассказывать о решениях, следите за обновлениями.
Читать статью
Чем сложнее запрос — тем больше вариантов его исполнения внутри системы. Для снижения вариативности используются эмпирические правила, они сокращают пространство поиска на несколько порядков. Но с такими правилами есть риск отсечь оптимальный план выполнения запроса.
С развитием ML появляются новые решения при работе над оптимизацией выполнения запроса — нейронные оптимизаторы, которые сами находят закономерности в выполнении сложных планов.
В статье на Хабре — о трех таких решениях:
✔️MSCN (2018) — модель для оценки кардинальности запросов;
✔️DQN (2018) — модель построения плана выполнения запроса;
✔️NEO (2019) — end-to-end-подход, объединивший в себе как обучаемую функцию оценки скорости выполнения заданного плана, так и само его построение
Читать статью
Please open Telegram to view this post
VIEW IN TELEGRAM
Миграция с Oracle на PostgreSQL: переносим крупные базы данных при помощи oracle_fdw
На PGConf.СПб 2023 Владимир Хаймин, администратор БД PostgreSQL Банка ВТБ, рассказал о том, как значительно ускорить миграцию БД, используя oracle_fdw отдельно, либо в сочетании с ora2pg.
Из доклада узнаете: в каких случаях стоит использовать oracle_fdw, как значительно ускорить миграцию БД используя это расширение, какой инструмент выбрать при переносе метаданных для сокращения времени простоя.
🔥 1 октября снова встретимся в Питере на PGConf.СПб 2024! Регистрируйтесь и участвуйте в крупнейшей конференции по PostgreSQL в Санкт-Петербурге.
👉 Смотрите доклад: Rutube, Дзен, ВК, YouTube
На PGConf.СПб 2023 Владимир Хаймин, администратор БД PostgreSQL Банка ВТБ, рассказал о том, как значительно ускорить миграцию БД, используя oracle_fdw отдельно, либо в сочетании с ora2pg.
Из доклада узнаете: в каких случаях стоит использовать oracle_fdw, как значительно ускорить миграцию БД используя это расширение, какой инструмент выбрать при переносе метаданных для сокращения времени простоя.
Please open Telegram to view this post
VIEW IN TELEGRAM
Какие патчи приняты в PostgreSQL 17 в ходе мартовского коммитфеста?
В статье на Хабре разбираем последний коммитфест в новую версию опенсорс-СУБД, которая выйдет уже 26 сентября.
Всего в блоге вышло 5 статей про коммитфесты PostgreSQL 17, вместе материалы представляют детальный обзор новой версии СУБД. Впереди — обзоры коммитфестов PostgreSQL 18.
🔥 1 октября на PGConf.СПб 2024 Павел Лузанов, руководитель отдела образовательных программ Postgres Professional, проведет обзор PostgreSQL 17. Регистрируйтесь на конференцию, чтобы не пропустить этот и другие доклады.
Читать статью
В статье на Хабре разбираем последний коммитфест в новую версию опенсорс-СУБД, которая выйдет уже 26 сентября.
Всего в блоге вышло 5 статей про коммитфесты PostgreSQL 17, вместе материалы представляют детальный обзор новой версии СУБД. Впереди — обзоры коммитфестов PostgreSQL 18.
Читать статью
Please open Telegram to view this post
VIEW IN TELEGRAM
Решаем проблемы с выполнением запросов
В большинстве клиентских приложений существуют ключевые запросы, время выполнения которых не может превышать критических значений. Но часто оптимизатор Postgres не может найти оптимальный план, что приводит к недопустимым задержкам.
Исправить такие ошибки со стороны клиентского приложения сложно или невозможно, так как запросы создаются автоматически. Что делать в такой ситуации расскажет Александр Котин, старший технический менеджер продукта Postgres Professional, на PGConf.СПб 2024.
👉 Разберемся, как решать такие проблемы со стороны СУБД. Александр покажет, как с помощью набора инструментов Postgres Pro:
✔️Идентифицировать такие запросы
✔️Исправлять и фиксировать планы
✔️Переносить планы на реплики в автоматическом режиме
✔️Осуществить перенос планов при апгрейде с 15-й версии
🔥PGConf.СПб 2024 пройдет в Санкт-Петербурге уже 1 октября. Специалисты представят технические доклады, пройдут демонстрации решений на базе Postgres Pro, участники обменяются опытом и пообщаются с сообществом.
Регистрация на PGConf.СПб 2024
В большинстве клиентских приложений существуют ключевые запросы, время выполнения которых не может превышать критических значений. Но часто оптимизатор Postgres не может найти оптимальный план, что приводит к недопустимым задержкам.
Исправить такие ошибки со стороны клиентского приложения сложно или невозможно, так как запросы создаются автоматически. Что делать в такой ситуации расскажет Александр Котин, старший технический менеджер продукта Postgres Professional, на PGConf.СПб 2024.
✔️Идентифицировать такие запросы
✔️Исправлять и фиксировать планы
✔️Переносить планы на реплики в автоматическом режиме
✔️Осуществить перенос планов при апгрейде с 15-й версии
🔥PGConf.СПб 2024 пройдет в Санкт-Петербурге уже 1 октября. Специалисты представят технические доклады, пройдут демонстрации решений на базе Postgres Pro, участники обменяются опытом и пообщаются с сообществом.
Регистрация на PGConf.СПб 2024
Please open Telegram to view this post
VIEW IN TELEGRAM
Только что вышла PostgreSQL 17 🔥
В карточках — самое главное о новой версии открытой СУБД. Обзор подготовил Павел Лузанов, руководитель отдела образовательных программ Postgres Professional.
⚡️ Большой доклад со всеми деталями релиза ждет вас на PGConf.СПб 2024! Еще можно успеть на онлайн-участие вот тут.
А прямо сейчас можно изучить:
✔️Запись апрельского выступления Павла Лузанова на PGConf.Russsia 2024 про изменения PostgreSQL 17. Смотрите на Rutube или YouTube
✔️Подробный обзор изменений в новой версии по коммитфестам — в блоге на Хабре
В карточках — самое главное о новой версии открытой СУБД. Обзор подготовил Павел Лузанов, руководитель отдела образовательных программ Postgres Professional.
А прямо сейчас можно изучить:
✔️Запись апрельского выступления Павла Лузанова на PGConf.Russsia 2024 про изменения PostgreSQL 17. Смотрите на Rutube или YouTube
✔️Подробный обзор изменений в новой версии по коммитфестам — в блоге на Хабре
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
Приехать на «Стачку» и показать, что такое реальная мощь СУБД — это база!
Сегодня и завтра мы участвуем в XII Международной IT-Конференции «Стачка»: рассказываем гостям о СУБД Postgres Pro Shardman, разыгрываем мерч, модерируем секцию «Базы данных» и выступаем с несколькими докладами.
⚡️ Кадры с места событий — в нашем видео.
Сегодня и завтра мы участвуем в XII Международной IT-Конференции «Стачка»: рассказываем гостям о СУБД Postgres Pro Shardman, разыгрываем мерч, модерируем секцию «Базы данных» и выступаем с несколькими докладами.
Please open Telegram to view this post
VIEW IN TELEGRAM
👆Павел Конотопов, руководитель кластерной группы Postgres Professional — о распределенной СУБД Shardman. Заглядывайте на наш стенд, завтра проведем еще две демонстрации:
✔️12:00 — демонстрация и обзор распределенной СУБД Postgres Pro Shardman. Система подходит для крупнейших инсталляций до ста и больше ТБ!
✔️14:00 доклад про особенности SQL в распределенной СУБД Postgres Pro Shardman
Подробнее о Shardman — на сайте.
✔️12:00 — демонстрация и обзор распределенной СУБД Postgres Pro Shardman. Система подходит для крупнейших инсталляций до ста и больше ТБ!
✔️14:00 доклад про особенности SQL в распределенной СУБД Postgres Pro Shardman
Подробнее о Shardman — на сайте.