data lake ? lake house? stream house!
https://www.youtube.com/watch?v=m5KeFafcl-0&ab_channel=sql-ninja
https://www.youtube.com/watch?v=m5KeFafcl-0&ab_channel=sql-ninja
YouTube
Streamhouse Architecture - единообразный способ работы с пакетными и потоковыми данными
Расскажу про новый виток в способе ведения обработки данных. Унификация инфраструктуры хранения и инструмента обработки данных как для пакетных так и потоковых задач на примере flink, flink-cdc, paimon
Debezium - инструмент получения данных с источников, используя паттерн CDC
https://www.youtube.com/watch?v=NPJFVYXplv8&ab_channel=sql-ninja
(сори за звук… в этом году исправил)
https://www.youtube.com/watch?v=NPJFVYXplv8&ab_channel=sql-ninja
(сори за звук… в этом году исправил)
YouTube
Debezium
Расскажем про Debezium как о инструменте получения данных с источников, используя паттерн CDC. Два Андрея вам расскажут о том, какие есть плюсы и минусы в такой интеграции для разных баз и какие особенности есть у каждой из них в контексте данного инструмента.…
🔥3
Apache iceberg: tips and trics
https://www.youtube.com/watch?v=VbAqsLHfrqs&ab_channel=sql-ninja
https://www.youtube.com/watch?v=VbAqsLHfrqs&ab_channel=sql-ninja
YouTube
Apache iceberg: tips and tricks
Из этого доклада вы узнаете про наш опыт эксплуатации apache iceberg на петабайтных таблицах, о том с какими проблемами столкнулись и как решали. Бонусом набор полезных советов.
👍3❤1🔥1
ksqlDB Расчёт эффективности сотрудников: эволюция витрин от батча к стримингу
https://www.youtube.com/watch?v=1PrgVMWaRME&ab_channel=sql-ninja
https://www.youtube.com/watch?v=1PrgVMWaRME&ab_channel=sql-ninja
YouTube
ksqlDB Расчёт эффективности сотрудников: эволюция витрин от батча к стримингу
Потоковые витрины для 10 команд с минимальной задержкой: звучит как утопия? Расскажем, как реализовали это с помощью Kafka и ksqlDB, какими инструментами пользовались, какие технические сложности в реализации и осознании потоковых операций есть (join’ы, нарушение…
🔥1
а ещё вот вам видео с последнего бигдатника!
Шардированный кластер ClickHouse
https://www.youtube.com/watch?v=rxjADQ19D8U&t=165s&ab_channel=sql-ninja
Шардированный кластер ClickHouse
https://www.youtube.com/watch?v=rxjADQ19D8U&t=165s&ab_channel=sql-ninja
YouTube
Шардированный кластер ClickHouse
Расскажу про MPP-архитектуру ClickHouse, про движок таблиц Distributed и особенности работы с шардированным кластером: что стоит учитывать при вставке данных и как оптимизировать запросы на чтение
🔥5❤🔥2
24 Апреля CedrusData рассказывают про внедрение Trino в Лемана Тех, опыт работы с Nessie в Азбуке Вкуса и будет круглый стол о проблемах lakehouse. Я иду, если интересно вот ссылочка
https://cedrusdata.timepad.ru/event/3299844/
https://cedrusdata.timepad.ru/event/3299844/
cedrusdata.timepad.ru
Lakehouse Meetup #3: внедрение Trino в Лемана Тех, опыт работы с Nessie в Азбуке Вкуса, круглый стол о проблемах lakehouse / События…
Рассмотрим реальный опыт внедрения современных технологий анализа данных: реализация lakehouse на Trino в Лемана Тех, использование Nessie в Азбуке Вкуса. После этого обсудим за круглым столом насущные проблемы lakehouse с инженерами Лемана Тех, S7 Airlines…
👍1
видели 22 апреля ArenaDay 2025 ?
я ходил разик, они в него 10-15 лямов вкидывают, оч. крутая конфа
не рекламирую, сам иду и вас зову
https://arenadata.tech/events/arenaday-2025/
я ходил разик, они в него 10-15 лямов вкидывают, оч. крутая конфа
не рекламирую, сам иду и вас зову
https://arenadata.tech/events/arenaday-2025/
Arenadata - корпоративная платформа хранения и обработки данных • Российская корпоративная платформа хранения и обработки данных с открытым исходным кодом.
ArenaDAY 2025
ArenaDAY — одна из крупнейших конференций по теме DATA.
22 апреля на одной площадке соберутся топовые CDO, CTO, CIO и архитекторы, чтобы разобрать бизнес-кейсы, обсудить новые дата-продукты и наладить профессиональные связи.
…
22 апреля на одной площадке соберутся топовые CDO, CTO, CIO и архитекторы, чтобы разобрать бизнес-кейсы, обсудить новые дата-продукты и наладить профессиональные связи.
…
🔥3👍1
сразу после него 23 апреля будет RETAIL TECH
я там буду в экспертной дискуссии что-то говорить
https://retailtech.ru/varianty-uchastiya-v-russian-retail-show/
регайтесь =)
я там буду в экспертной дискуссии что-то говорить
https://retailtech.ru/varianty-uchastiya-v-russian-retail-show/
регайтесь =)
retailtech.ru
Варианты участия в Retail TECH -
Retail TECH - Форум о трансформации ритейла
и ещё 24 апреля будет Lakehouse Meetup #3
https://gomeetup.ru/events/44832-lakehouse-meetup-3-vnedrenie-trino-v-lemana-teh-opit-raboti-s-nessie-v-azbuke-vkusa-kruglii-stol-o-problemah-lakehouse
я тож зарегался
Nessie кстати интересный git like каталог, жаль релиз пока 0.103.2, не готов его в прод брать
но интересно послушать про опыт
https://gomeetup.ru/events/44832-lakehouse-meetup-3-vnedrenie-trino-v-lemana-teh-opit-raboti-s-nessie-v-azbuke-vkusa-kruglii-stol-o-problemah-lakehouse
я тож зарегался
Nessie кстати интересный git like каталог, жаль релиз пока 0.103.2, не готов его в прод брать
но интересно послушать про опыт
gomeetup.ru
Круглый стол Lakehouse Meetup #3 внедрение Trino в Лемана Тех, опыт работы с Nessie в Азбуке Вкуса, круглый стол о проблемах lakehouse…
Обсуждение опыта внедрения современных технологий анализа данных и проблем lakehouse. Митап в Москве и онлайн. - (24.04.2025 в 18:30 Москва) | GoMeetup
👍1
Друзья, у нас есть 15 проходок на ArenaDay 22 апреля. Регайтесь, если ваш запрос на офлайн отклонили и предложили только онлайн - пишите мне @lestvt
и организуем вам проход
бесплатно
https://arenaday.io/
p.s. мероприятие не только для пиджаков
и организуем вам проход
бесплатно
https://arenaday.io/
p.s. мероприятие не только для пиджаков
митап у МТС почему не стоит инвестировать 2 года в платформу инференса LLM
потому что 20-30 милиардов рублей надо на суперкомпьютер отдать 🤣
и стойки наших русских датацентров выдают по 10.5 кВт электричества, а столько потребляет один сервачок прошлого поколения HGX 200, куда уж там B100 или B200
и супер комп потребляет 3-4 мегаватт, а столько выдает целый дата-центр
потому что 20-30 милиардов рублей надо на суперкомпьютер отдать 🤣
и стойки наших русских датацентров выдают по 10.5 кВт электричества, а столько потребляет один сервачок прошлого поколения HGX 200, куда уж там B100 или B200
и супер комп потребляет 3-4 мегаватт, а столько выдает целый дата-центр
mws.ru
Почему не стоит инвестировать 2 года в платформу инференса LLM? | События MWS
На вебинаре расскажем, почему разработка платформы для инференса LLM с нуля не всегда лучший выбор и как MWS GPT может существенно упростить и ускорить работу с большими языковыми моделями
😢1
Коллеги, https://sqltest.online/ru/test/start
приготовили тест для нас узнать свой уровень владения SQL
Дайте комменты на сколько он актуален, пожалуйста
приготовили тест для нас узнать свой уровень владения SQL
Дайте комменты на сколько он актуален, пожалуйста
SQLtest.online
Тренажёр SQL
SQLtest.online: Ваш бесплатный интерактивный тренажер SQL. Практикуйтесь и улучшайте свои практические навыки SQL с реальными задачами и мгновенной обратной связью для различных баз данных, таких как MySQL, MS SQL и SQLite.
👍1
sql_ninja_news
и ещё 24 апреля будет Lakehouse Meetup #3 https://gomeetup.ru/events/44832-lakehouse-meetup-3-vnedrenie-trino-v-lemana-teh-opit-raboti-s-nessie-v-azbuke-vkusa-kruglii-stol-o-problemah-lakehouse я тож зарегался Nessie кстати интересный git like каталог, жаль…
будет сегодня кто? самый интересный для инженеров митап наверное в этом месяце
💯2
Под Брянском взорвали ключевого разработчика российской системы радиоэлектронной борьбы "Красуха"
Евгений Рытников был руководителем конструкторского бюро электромеханического завода. Его автомобиль подорвали при помощи СВУ в ночь с 17 на 18 апреля. Взрывное устройство, начиненное поражающими элементами, под днищем авто сработало в тот момент, когда Рытников вместе со своим коллегой садился в салон. Мужчины скончались на месте.
Евгений Рытников был руководителем конструкторского бюро электромеханического завода. Его автомобиль подорвали при помощи СВУ в ночь с 17 на 18 апреля. Взрывное устройство, начиненное поражающими элементами, под днищем авто сработало в тот момент, когда Рытников вместе со своим коллегой садился в салон. Мужчины скончались на месте.
😱6😢3🤔2
вышел Airflow 3.0
зацените что есть нового
https://airflow.apache.org/blog/airflow-three-point-oh-is-here/
зацените что есть нового
https://airflow.apache.org/blog/airflow-three-point-oh-is-here/
Apache Airflow
Apache Airflow® 3 is Generally Available!
We're proud to announce that Apache Airflow 3.0.0 has been released.
🔥4👍3❤1
Media is too big
VIEW IN TELEGRAM
В Петербурге курсант-айтишник попался на взломе системы Минобороны РФ: парень пытался продать софт на Авито
Гений из Академии Можайского решил подзаработать на своих навыках — написал программу для взлома и думал остаться незамеченным. ФСБ оперативно вычислили военнослужащего и задержали его.
Теперь молодому человеку светит пожизненное😐
Гений из Академии Можайского решил подзаработать на своих навыках — написал программу для взлома и думал остаться незамеченным. ФСБ оперативно вычислили военнослужащего и задержали его.
Теперь молодому человеку светит пожизненное
Please open Telegram to view this post
VIEW IN TELEGRAM
🫡4