64-битный счетчик транзакций — как в Postgres Professional решили проблемы при работе с большой транзакционной нагрузкой
Использование коммерческих СУБД на базе PostgreSQL для решения задач большого бизнеса требует особого подхода, доработки нескольких элементов системы в сторону производительности.
Среди узких мест при работе с серьезной нагрузкой — переполнение 32-битного счетчика транзакций. Возможностей открытой СУБД здесь недостаточно и мы в Postgres Professional придумали решение для работы с большой транзакционной нагрузкой.
Подробности — в статье на Хабре:
✔️Как PostgreSQL обрабатывает транзакции, в чем особенности механизма многоверсионности MVCC, история счетчика транзакций
✔️Где начинаются сложности и почему, если с принципом работы механизма проблем нет, стабильная работа больших систем без доработок, реализованных в СУБД Postgres Pro, находится под угрозой
✔️Что сделали специалисты Postgres Professional — первый в мире 64-bit xid — расширение пространства идентификаторов транзакций до 2 в степени 64!
✔️Как 64-bit xid используется в большинстве форков PostgreSQL (в том числе коммерческих), что с принятием в комьюнити
Читать статью
Использование коммерческих СУБД на базе PostgreSQL для решения задач большого бизнеса требует особого подхода, доработки нескольких элементов системы в сторону производительности.
Среди узких мест при работе с серьезной нагрузкой — переполнение 32-битного счетчика транзакций. Возможностей открытой СУБД здесь недостаточно и мы в Postgres Professional придумали решение для работы с большой транзакционной нагрузкой.
Подробности — в статье на Хабре:
✔️Как PostgreSQL обрабатывает транзакции, в чем особенности механизма многоверсионности MVCC, история счетчика транзакций
✔️Где начинаются сложности и почему, если с принципом работы механизма проблем нет, стабильная работа больших систем без доработок, реализованных в СУБД Postgres Pro, находится под угрозой
✔️Что сделали специалисты Postgres Professional — первый в мире 64-bit xid — расширение пространства идентификаторов транзакций до 2 в степени 64!
✔️Как 64-bit xid используется в большинстве форков PostgreSQL (в том числе коммерческих), что с принятием в комьюнити
Читать статью
Каким был 2024 год?
Без лишних предисловий — делимся ключевыми показателями за прошедший год, цифры говорят лучше, чем любые слова.
Спасибо, что в 2024 году были с нами, дальше — больше⚡️
Без лишних предисловий — делимся ключевыми показателями за прошедший год, цифры говорят лучше, чем любые слова.
Спасибо, что в 2024 году были с нами, дальше — больше
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
Поздравляем с наступающим 2025 годом!
Благодарим партнеров и заказчиков за доверие и продуктивную совместную работу, читателей и гостей конференций — за интерес к Postgres Professional.
В новом году нас ждет еще больше ярких событий, интересных анонсов и мероприятий!
До встречи в 2025,
Postgres Pro Team ❤️
Благодарим партнеров и заказчиков за доверие и продуктивную совместную работу, читателей и гостей конференций — за интерес к Postgres Professional.
В новом году нас ждет еще больше ярких событий, интересных анонсов и мероприятий!
До встречи в 2025,
Postgres Pro Team ❤️
Любишь базы данных? Разбираешься в SQL? Прими участие в конкурсе «СУБД Postgres Pro»!
В этом году мы снова организуем состязание на знание языка SQL, где участникам предстоит решать интересные и непростые задачи в открытой СУБД PostgreSQL.
Конкурс проходит на международной олимпиаде «IT-Планета 2025»:
✔️Участники — студенты и дипломированные специалисты от 16 до 27 лет
✔️Первый этап — тестирование на знание основ теории БД и основ языка SQL, второй этап и финал — решение задач на разработку нестандартных SQL-запросов. Отборочные этапы проходят онлайн, финал — очный
✔️Участие поможет получить практический опыт, познакомиться с командой Postgres Professional. Финалисты получат мерч компании, победители — денежные призы, ваучеры на прохождение сертификации по PostgreSQL
🧐 Как подготовиться? На Хабре опубликованы разборы задач прошлых лет — советуем почитать (второй и третий этап 2023 года, второй и третий этап 2024 года). Также мы предоставим участникам доступ к курсу «Язык SQL» — его изучение поможет в прохождении конкурса.
Регистрация
В этом году мы снова организуем состязание на знание языка SQL, где участникам предстоит решать интересные и непростые задачи в открытой СУБД PostgreSQL.
Конкурс проходит на международной олимпиаде «IT-Планета 2025»:
✔️Участники — студенты и дипломированные специалисты от 16 до 27 лет
✔️Первый этап — тестирование на знание основ теории БД и основ языка SQL, второй этап и финал — решение задач на разработку нестандартных SQL-запросов. Отборочные этапы проходят онлайн, финал — очный
✔️Участие поможет получить практический опыт, познакомиться с командой Postgres Professional. Финалисты получат мерч компании, победители — денежные призы, ваучеры на прохождение сертификации по PostgreSQL
🧐 Как подготовиться? На Хабре опубликованы разборы задач прошлых лет — советуем почитать (второй и третий этап 2023 года, второй и третий этап 2024 года). Также мы предоставим участникам доступ к курсу «Язык SQL» — его изучение поможет в прохождении конкурса.
Регистрация
This media is not supported in your browser
VIEW IN TELEGRAM
Опубликовали расписание нашей первой продуктовой конференции, переходите на сайт, изучайте список тем и находите наиболее интересные доклады для вас.
Всего пройдет 11 выступлений, также специалисты проведут демонстрации решений, расскажут о новых продуктах и поделятся планами развития компании.
Заместитель генерального директора Postgres Professional Иван Панченко рассказал, что еще интересного ждет гостей конференции.
📍Встречаемся 28 января, онлайн и офлайн. Москва, Цифровое деловое пространстве (ЦДП), ул. Покровка, д. 47.
Регистрация на PGProDay 2025
Please open Telegram to view this post
VIEW IN TELEGRAM
📍Серия статей про нейронные оптимизаторы в реляционных базах данных
Развитие машинного обучения способствует появлению новых решений для оптимизации выполнения запросов — нейронных оптимизаторов. Эти инструменты сами находят закономерности в выполнении сложных планов. На Хабре подготовили цикл статей про нейрооптимизаторы:
✔️Пионеры в области нейросетевых оптимизаторов
Говорим про модель для оценки кардинальности запросов MSCN, модель построения плана выполнения запроса DQN, а также NEO — end-to-end-подход, который объединил обучаемую функцию оценки скорости выполнения заданного плана и его построение.
✔️Стабильные подходы
Рассматриваем решения, которые не требуют гигантских вычислительных кластеров и удовлетворяют большинство потребностей бизнеса: Bao, Balsa и AQO (Adaptive Query Optimization), решение от Postgres Professional.
✔️Ранжирование
Говорим про ранжирование — этот тип задач обособлен и от классификации, и от регрессии. Рассматриваем его в целом, а также адаптацию методов поиска оптимального плана исполнения запроса.
Больше полезных технических материалов — в блоге на Хабре⚡️
Развитие машинного обучения способствует появлению новых решений для оптимизации выполнения запросов — нейронных оптимизаторов. Эти инструменты сами находят закономерности в выполнении сложных планов. На Хабре подготовили цикл статей про нейрооптимизаторы:
✔️Пионеры в области нейросетевых оптимизаторов
Говорим про модель для оценки кардинальности запросов MSCN, модель построения плана выполнения запроса DQN, а также NEO — end-to-end-подход, который объединил обучаемую функцию оценки скорости выполнения заданного плана и его построение.
✔️Стабильные подходы
Рассматриваем решения, которые не требуют гигантских вычислительных кластеров и удовлетворяют большинство потребностей бизнеса: Bao, Balsa и AQO (Adaptive Query Optimization), решение от Postgres Professional.
✔️Ранжирование
Говорим про ранжирование — этот тип задач обособлен и от классификации, и от регрессии. Рассматриваем его в целом, а также адаптацию методов поиска оптимального плана исполнения запроса.
Больше полезных технических материалов — в блоге на Хабре
Please open Telegram to view this post
VIEW IN TELEGRAM
Находим и оптимизируем проблемные запросы в PostgreSQL
База данных разрослась и запросы стали тормозить? Специально для таких случаев мы подготовили пошаговый план поиска и отлова долгих запросов. На Хабре говорим об этапах оптимизации, разбираем варианты решений, а еще — делимся утилитами и расширениями, которые пригодятся в работе.
✔️Поиск проблемных запросов: критерии подозрительных запросов, что можно считать по-настоящему долгим запросом, как найти «быстрые», но избыточные запросы
✔️Ревизия запросов: находим, что нужно исправить и оптимизировать, какие запросы удалить, в каких случаях запуск стоит перенести на период с меньшей нагрузкой
✔️Действия после нахождения проблем: находим запущенные запросы и заблокированные процессы, смотрим процент выполнения запроса
Читать статью
База данных разрослась и запросы стали тормозить? Специально для таких случаев мы подготовили пошаговый план поиска и отлова долгих запросов. На Хабре говорим об этапах оптимизации, разбираем варианты решений, а еще — делимся утилитами и расширениями, которые пригодятся в работе.
✔️Поиск проблемных запросов: критерии подозрительных запросов, что можно считать по-настоящему долгим запросом, как найти «быстрые», но избыточные запросы
✔️Ревизия запросов: находим, что нужно исправить и оптимизировать, какие запросы удалить, в каких случаях запуск стоит перенести на период с меньшей нагрузкой
✔️Действия после нахождения проблем: находим запущенные запросы и заблокированные процессы, смотрим процент выполнения запроса
Читать статью
Эволюция средств обеспечения отказоустойчивости СУБД Postgres Pro
На конференции PGProDay 2025 представим решения, которые защитят СУБД от любых сбоев инфраструктуры, даже катастроф на уровне всего ЦОД:
✔️Proxima — новая технология, позволяющая автоматически управлять соединениями клиентов СУБД
✔️Multimaster — кластер из нескольких узлов, доступных на запись одновременно, на основе логической репликации
✔️BiHA — встроенный отказоустойчивый кластер на основе физической репликации с автоматическим переключением в случае сбоя
⚡️ Про развитие этих решений расскажут специалисты Postgres Professional: Андрей Забелин, старший технический консультант, и Дарья Репина, старший технический менеджер продукта.
📍Конференция пройдет 28 января, онлайн и офлайн. Участие — бесплатное, необходима регистрация. Присоединяйтесь к чату мероприятия.
Регистрация на PGProDay 2025
На конференции PGProDay 2025 представим решения, которые защитят СУБД от любых сбоев инфраструктуры, даже катастроф на уровне всего ЦОД:
✔️Proxima — новая технология, позволяющая автоматически управлять соединениями клиентов СУБД
✔️Multimaster — кластер из нескольких узлов, доступных на запись одновременно, на основе логической репликации
✔️BiHA — встроенный отказоустойчивый кластер на основе физической репликации с автоматическим переключением в случае сбоя
📍Конференция пройдет 28 января, онлайн и офлайн. Участие — бесплатное, необходима регистрация. Присоединяйтесь к чату мероприятия.
Регистрация на PGProDay 2025
Please open Telegram to view this post
VIEW IN TELEGRAM
Опыт внедрения искусственного интеллекта (AI) в Postgres Pro
С LLM-агентами можно создать новый интерфейс взаимодействия с реляционными базами данных. На PGProDay 2025 расскажем, как создать последовательность шагов для преобразования запросов с естественного языка на SQL и Cypher для общения с СУБД.
Также обсудим организацию генерации ответа на запрос с дополнением по документации Postgres Professional, спискам рассылки, проблемам со StackOverflow и Telegram-чату. RAG (Retrieval-Augmented Generation) помогает СУБД улучшить точность и полноту ответа путём дополнения базового запроса внешними данными.
Подробности — в докладе Савелия Батурина, старшего инженера по машинному обучению Postgres Professional.
📍Конференция пройдет 28 января, онлайн и офлайн. Участие — бесплатное, необходима регистрация. Актуальная информация — в чате мероприятия.
Регистрация на PGProDay 2025
С LLM-агентами можно создать новый интерфейс взаимодействия с реляционными базами данных. На PGProDay 2025 расскажем, как создать последовательность шагов для преобразования запросов с естественного языка на SQL и Cypher для общения с СУБД.
Также обсудим организацию генерации ответа на запрос с дополнением по документации Postgres Professional, спискам рассылки, проблемам со StackOverflow и Telegram-чату. RAG (Retrieval-Augmented Generation) помогает СУБД улучшить точность и полноту ответа путём дополнения базового запроса внешними данными.
Подробности — в докладе Савелия Батурина, старшего инженера по машинному обучению Postgres Professional.
📍Конференция пройдет 28 января, онлайн и офлайн. Участие — бесплатное, необходима регистрация. Актуальная информация — в чате мероприятия.
Регистрация на PGProDay 2025
Postgres Pro Enterprise 17 — главный релиз года 🔥
Postgres Pro Enterprise 17 — новая версия флагманской редакции СУБД Postgres Pro для высоконагруженных систем. Мы сделали СУБД еще более мощной, адаптируемой и управляемой, чтобы заказчики могли еще эффективнее решать самые сложные задачи.
В релизе — все возможности Postgres Pro Enterprise 16, PostgreSQL 17, корректирующего выпуска PostgreSQL 17.2, а также большое количество новых возможностей.
⚡️ Среди новых разработок: расширение Proxima, управление очередями, удобная работа с планами запросов и другие решения для производительности, удобства и надежности СУБД. Подробности — в карточках.
Больше информации про Postgres Pro Enterprise 17 доступно на сайте, технические детали — в замечаниях к выпускам: 17.2.1 и 17.2.2.
🖥 Закажите тестирование системы
Postgres Pro Enterprise 17 — новая версия флагманской редакции СУБД Postgres Pro для высоконагруженных систем. Мы сделали СУБД еще более мощной, адаптируемой и управляемой, чтобы заказчики могли еще эффективнее решать самые сложные задачи.
В релизе — все возможности Postgres Pro Enterprise 16, PostgreSQL 17, корректирующего выпуска PostgreSQL 17.2, а также большое количество новых возможностей.
Больше информации про Postgres Pro Enterprise 17 доступно на сайте, технические детали — в замечаниях к выпускам: 17.2.1 и 17.2.2.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM