#developer #вакансия #vacancy #middle+ #удаленка #job #senior #elt #dwh #yandex #dwh #data
Вакансия: Data Engineer
Компания: SConsulting
Город и адрес офиса: удаленка (без ограничений: пол, возраст, здоровье)
Локации: СНГ/Весь мир. Москва (UTC+03:00, Europe/Moscow) ± 2 ч
Занятость и формат работы: part-time/full-time/remote
ЗП: от 250 000 до 290 000
Приглашаем Data Engineer - эксперта, специализирующегося на data-продуктах – хранилищах данных, платформах данных (YDL/ADL).
Обязанности:
Построение цепочек загрузки и трансформации данных и промежуточных витрин данных в Yandex Data Lake:
• выявление существующих цепочек трансформации данных, используемых для отчетов в текущих DWH - SAP BW и Azure DL;
• создание аналогичных потоков трансформации данных в Yandex DL;
• создание промежуточных витрин данных для последующего построения отчетов;
• оптимизация цепочек загрузки и трансформации данных (при наличии такой возможности) в новом DWH;
• создание технической документации для дальнейшей поддержки нового DWH, цепочек загрузки/трансформации данных, промежуточных витрин данных;
Требования:
• Опыт работы в области управления и обработки данными от 3 лет;
• Профессиональное владение SQL;
• Более двух лет практического опыта работы с Python, Spark;
• Опыт работы с технологиями на основе Hadoop (HDInsight, Spark, Hive, Pig, Scala и т. Д);
• Обширный опыт работы с инструментами ETL, такими как Azure Data Factory, SSIS, Pentaho и т.д.;
• Обширный опыт работы с технологиями хранения Azure и Yandex;
• Практический опыт использования инструментов управления конфигурацией и автоматизации, таких как Azure DevOPS, Ansible, DSC, Puppet, Chef, Salt и т.д.
Мы предлагаем:
Оформление в соответствии с требованиями законодательства РФ;
Конкурентный уровень зарплаты с индексацией;
Карьерный и профессиональный рост;
Работа в стабильной компании;
Дружелюбный процесс интервью с заказчиком;
Комфортные условия удалённой работы в дружном и сплочённом коллективе;
Чётко выстроенные процессы;
Культура наставничества и сильная техническая экспертиза в команде;
Проекты внедрения в крупнейших компаниях России.
Удаленная работа.
Контакты: @scons2000
Вакансия: Data Engineer
Компания: SConsulting
Город и адрес офиса: удаленка (без ограничений: пол, возраст, здоровье)
Локации: СНГ/Весь мир. Москва (UTC+03:00, Europe/Moscow) ± 2 ч
Занятость и формат работы: part-time/full-time/remote
ЗП: от 250 000 до 290 000
Приглашаем Data Engineer - эксперта, специализирующегося на data-продуктах – хранилищах данных, платформах данных (YDL/ADL).
Обязанности:
Построение цепочек загрузки и трансформации данных и промежуточных витрин данных в Yandex Data Lake:
• выявление существующих цепочек трансформации данных, используемых для отчетов в текущих DWH - SAP BW и Azure DL;
• создание аналогичных потоков трансформации данных в Yandex DL;
• создание промежуточных витрин данных для последующего построения отчетов;
• оптимизация цепочек загрузки и трансформации данных (при наличии такой возможности) в новом DWH;
• создание технической документации для дальнейшей поддержки нового DWH, цепочек загрузки/трансформации данных, промежуточных витрин данных;
Требования:
• Опыт работы в области управления и обработки данными от 3 лет;
• Профессиональное владение SQL;
• Более двух лет практического опыта работы с Python, Spark;
• Опыт работы с технологиями на основе Hadoop (HDInsight, Spark, Hive, Pig, Scala и т. Д);
• Обширный опыт работы с инструментами ETL, такими как Azure Data Factory, SSIS, Pentaho и т.д.;
• Обширный опыт работы с технологиями хранения Azure и Yandex;
• Практический опыт использования инструментов управления конфигурацией и автоматизации, таких как Azure DevOPS, Ansible, DSC, Puppet, Chef, Salt и т.д.
Мы предлагаем:
Оформление в соответствии с требованиями законодательства РФ;
Конкурентный уровень зарплаты с индексацией;
Карьерный и профессиональный рост;
Работа в стабильной компании;
Дружелюбный процесс интервью с заказчиком;
Комфортные условия удалённой работы в дружном и сплочённом коллективе;
Чётко выстроенные процессы;
Культура наставничества и сильная техническая экспертиза в команде;
Проекты внедрения в крупнейших компаниях России.
Удаленная работа.
Контакты: @scons2000
#вакансия #dwh #hrtech #sql #pyspark
Инженер данных в команду DWH HR Tech
Москва, Санкт-Петербург
Офис или гибрид
Ищем дата-инженера, который будет заниматься созданием и развитием DWH в HR. Вы будете в центре создания экосистемы аналитических продуктов по ключевым метрикам: найму, движению, обучению, вовлечённости и другим аспектам жизни сотрудников компании. Этими продуктами ежедневно пользуются руководители подразделений всего Яндекса и сотрудники отдела персонала при принятии решений.
Вам предстоит участвовать в процессе создания и проработки архитектуры DWH. Вы будете тесно общаться с аналитиками, заказчиками и держателями данных для улучшения качества поставляемых данных в DWH.
Мы ждём, что вы уверенно владеете SQL и Python, имеете опыт работы с PySpark.
По всем вопросам, а также с резюме в лс к @irinavlsv.
Инженер данных в команду DWH HR Tech
Москва, Санкт-Петербург
Офис или гибрид
Ищем дата-инженера, который будет заниматься созданием и развитием DWH в HR. Вы будете в центре создания экосистемы аналитических продуктов по ключевым метрикам: найму, движению, обучению, вовлечённости и другим аспектам жизни сотрудников компании. Этими продуктами ежедневно пользуются руководители подразделений всего Яндекса и сотрудники отдела персонала при принятии решений.
Вам предстоит участвовать в процессе создания и проработки архитектуры DWH. Вы будете тесно общаться с аналитиками, заказчиками и держателями данных для улучшения качества поставляемых данных в DWH.
Мы ждём, что вы уверенно владеете SQL и Python, имеете опыт работы с PySpark.
По всем вопросам, а также с резюме в лс к @irinavlsv.
#вакансия #Системный #аналитик #DWH #job #ETL #удаленно #вакансия
🔎 Системный аналитик DWH
Занятость: Полная
Вилка: 260к gross (+квартальные премии)
Формат: Удаленный.
Город: Москва
СИНХРО — аккредитованная IT-компания, осуществляет деятельность, направленную на развитие цифровых сервисов в различных отраслях экономики.
В поиске Системного Аналитика DWH на проект ИФД - хранилище данных, обеспечивающие надежность выполнения критичных бизнес-процессов, своевременное проведения транзакций и перемещений.
❓Чем предстоит заниматься?
- Бизнес анализ и системный анализ задач по разработке и внедрению DWH;
- Сбор, анализ, формализация и согласование требований от бизнес-подразделений;
- Проектирование модели данных;
- Разработка прототипов витрин данных и передача постановок в разработку;
- Подготовка сценариев тестирования для тестирования разработанных ETL-процессов;
- Профилирование источников данных;
- Разбор и решение инцидентов, 3-я линия поддержки;
- Ведение проектной документации, актуализация базы знаний.
✔️Ваш опыт:
- Опыт работы с DWH от 2 лет;
- Понимание принципов построения DWH хранилищ;
- Уверенное знание SQL;
- Высокие коммуникативные навыки в части сбора требований, презентации решений и систематизации больших объемов информации;
🪄Стек: Oracle; SQL; Jira/Confluence
📌А что взамен?
- Аккредитованная ИТ компания
- ДМС (со стоматологией и страховкой для выезжающих за рубеж) + льготное страхование для семьи
- Доплата по больничному 7 дней
- Материальная помощь в знаковых событиях
- Бюджет на обучение и развитие сотрудников
- Prime-Zone (сервис корпоративных скидок и предложений)
- Предоставляется рабочая техника - после 3-х лет она твоя👌🏻
📩Контакты:👉 @Alena_platonycheva
🔎 Системный аналитик DWH
Занятость: Полная
Вилка: 260к gross (+квартальные премии)
Формат: Удаленный.
Город: Москва
СИНХРО — аккредитованная IT-компания, осуществляет деятельность, направленную на развитие цифровых сервисов в различных отраслях экономики.
В поиске Системного Аналитика DWH на проект ИФД - хранилище данных, обеспечивающие надежность выполнения критичных бизнес-процессов, своевременное проведения транзакций и перемещений.
❓Чем предстоит заниматься?
- Бизнес анализ и системный анализ задач по разработке и внедрению DWH;
- Сбор, анализ, формализация и согласование требований от бизнес-подразделений;
- Проектирование модели данных;
- Разработка прототипов витрин данных и передача постановок в разработку;
- Подготовка сценариев тестирования для тестирования разработанных ETL-процессов;
- Профилирование источников данных;
- Разбор и решение инцидентов, 3-я линия поддержки;
- Ведение проектной документации, актуализация базы знаний.
✔️Ваш опыт:
- Опыт работы с DWH от 2 лет;
- Понимание принципов построения DWH хранилищ;
- Уверенное знание SQL;
- Высокие коммуникативные навыки в части сбора требований, презентации решений и систематизации больших объемов информации;
🪄Стек: Oracle; SQL; Jira/Confluence
📌А что взамен?
- Аккредитованная ИТ компания
- ДМС (со стоматологией и страховкой для выезжающих за рубеж) + льготное страхование для семьи
- Доплата по больничному 7 дней
- Материальная помощь в знаковых событиях
- Бюджет на обучение и развитие сотрудников
- Prime-Zone (сервис корпоративных скидок и предложений)
- Предоставляется рабочая техника - после 3-х лет она твоя👌🏻
📩Контакты:👉 @Alena_platonycheva
#job #вакансия #удаленка #analyst #аналитик #Middle #Senior #fulltime #remote #BI #DWH
📌Вакансия: BI-аналитик/ Аналитик хранилищ данных
📌Компания: DPD IT 📦 (SDS RUS аккредитованная IT компания)
❗️Грейд: middle-senior (опыт от 2х лет работы аналитиком BI)
📌Формат работы: удалённо
📌 Гражданство РФ
📌ЗП: до 280т.р.
📌Занятость: Полная занятость по ТК РФ
Ищем в команду
Аналитика данных для построения централизованной платформы данных.
Продуктово-ориентированная команда с функциями развития новых технологических направлений, отражающих современный подход компании к данным и их дальнейшему использованию (аналитика/BI). Команда будет заниматься созданием и развитием решений на базе MPP Vertica и их интеграции в ИТ-ландшафт Компании.
📌 Ваши задачи:
- Сбор и формализация требований заказчиков к программному обеспечению (DWH);
- Оценка объёмов работ по поступающим задачам;
- Проектирование моделей данных, базовых сущностей и витрин (DWH);
4 Подготовка функциональных требований и технических спецификаций на загрузку и обработку данных (ETL);
5 Контроль выполнения работ (приемочное тестирование);
6 Создание наборов данных и аналитических отчетов/дашбордов (Power BI Report server + SSAS);
7 Анализ поступающих инцидентов.
📌Наши ожидания:
1 Знание/понимание архитектурных принципов построения корпоративных хранилищ данных и аналитических систем;
- Хорошее знание SQL;
- Навыки разработки отчетов/дашбордов средствами Power BI Report server + SSAS;
- Опыт написания технической документации.
Будет плюсом:
- Знание методов и инструментов распределенного хранения и анализа данных (MPP/Vertica);
- Знание бизнес-процессов и продуктов логистики;
- Понимание принципов финансового анализа.
📌 Мы предлагаем:
- Удаленный формат работы (или офис в Мск, м.Электрозаводская);
- График работы: 9:30-18:00 (по МСК), в пятницу до 16:00;
- Оформление по ТК РФ;
- Возможности для профессионального роста;
- Работа в команде профессионалов, атмосфера взаимопомощи и поддержки в коллективе;
- Преимущества аккредитованной IT-компании;
- Предоставляем ДМС;
- Поддерживаем участие в профильных конференциях и другое обучение;
- Корпоративная библиотека, инструменты для саморазвития;
- Скидки от компаний-партнеров, ДМС.
✏️ Александра @al_v1a
📌Вакансия: BI-аналитик/ Аналитик хранилищ данных
📌Компания: DPD IT 📦 (SDS RUS аккредитованная IT компания)
❗️Грейд: middle-senior (опыт от 2х лет работы аналитиком BI)
📌Формат работы: удалённо
📌 Гражданство РФ
📌ЗП: до 280т.р.
📌Занятость: Полная занятость по ТК РФ
Ищем в команду
Аналитика данных для построения централизованной платформы данных.
Продуктово-ориентированная команда с функциями развития новых технологических направлений, отражающих современный подход компании к данным и их дальнейшему использованию (аналитика/BI). Команда будет заниматься созданием и развитием решений на базе MPP Vertica и их интеграции в ИТ-ландшафт Компании.
📌 Ваши задачи:
- Сбор и формализация требований заказчиков к программному обеспечению (DWH);
- Оценка объёмов работ по поступающим задачам;
- Проектирование моделей данных, базовых сущностей и витрин (DWH);
4 Подготовка функциональных требований и технических спецификаций на загрузку и обработку данных (ETL);
5 Контроль выполнения работ (приемочное тестирование);
6 Создание наборов данных и аналитических отчетов/дашбордов (Power BI Report server + SSAS);
7 Анализ поступающих инцидентов.
📌Наши ожидания:
1 Знание/понимание архитектурных принципов построения корпоративных хранилищ данных и аналитических систем;
- Хорошее знание SQL;
- Навыки разработки отчетов/дашбордов средствами Power BI Report server + SSAS;
- Опыт написания технической документации.
Будет плюсом:
- Знание методов и инструментов распределенного хранения и анализа данных (MPP/Vertica);
- Знание бизнес-процессов и продуктов логистики;
- Понимание принципов финансового анализа.
📌 Мы предлагаем:
- Удаленный формат работы (или офис в Мск, м.Электрозаводская);
- График работы: 9:30-18:00 (по МСК), в пятницу до 16:00;
- Оформление по ТК РФ;
- Возможности для профессионального роста;
- Работа в команде профессионалов, атмосфера взаимопомощи и поддержки в коллективе;
- Преимущества аккредитованной IT-компании;
- Предоставляем ДМС;
- Поддерживаем участие в профильных конференциях и другое обучение;
- Корпоративная библиотека, инструменты для саморазвития;
- Скидки от компаний-партнеров, ДМС.
✏️ Александра @al_v1a
#вакансия #работа #DWH
☁️Позиция: Senior DWH Analyst
🏙Компания: IT Pearls
💰зп: вилка: 150 - 293 тр
📅формат работы: удаленка
Локация/Гражданство: РФ
📅занятость: Full-time
Контакт: @Hash_Pub
📌Что предстоит делать:
- Проектирование и разработка ПО: разработка потоков данных в корпоративном хранилище данных на Системе Greenplum для проекта
🔺Мы ждем от кандидата:
- Опыт работы на позиции DWH минимум 3 года
- Реляционные БД:
- Первичный/внешний ключ;
- DDL/DML;
- Типы объектов: view, table, external table.
- Знание sql: все виды join'ов;
- Операция группировки, фильтрации по агрегатам;
- Вложенные запросы.
- Знание хранилищ данных: задачи, решаемые хранилищем (зачем оно нужно?);
- Аббревиатуры DWH, BI, ETL и то, что за ними кроется;
Kimball.
🔥Если все нравится - пиши @Hash_Pub
☁️Позиция: Senior DWH Analyst
🏙Компания: IT Pearls
💰зп: вилка: 150 - 293 тр
📅формат работы: удаленка
Локация/Гражданство: РФ
📅занятость: Full-time
Контакт: @Hash_Pub
📌Что предстоит делать:
- Проектирование и разработка ПО: разработка потоков данных в корпоративном хранилище данных на Системе Greenplum для проекта
🔺Мы ждем от кандидата:
- Опыт работы на позиции DWH минимум 3 года
- Реляционные БД:
- Первичный/внешний ключ;
- DDL/DML;
- Типы объектов: view, table, external table.
- Знание sql: все виды join'ов;
- Операция группировки, фильтрации по агрегатам;
- Вложенные запросы.
- Знание хранилищ данных: задачи, решаемые хранилищем (зачем оно нужно?);
- Аббревиатуры DWH, BI, ETL и то, что за ними кроется;
Kimball.
🔥Если все нравится - пиши @Hash_Pub
#вакансия #работа #DWH #Analyst
☁️Позиция: Middle DWH Analys
🏙Компания: IT Pearls
💰зп: вилка: 180 - 300 net
📅формат работы: удаленный
📲Контакты: @Natali_HRit
📌Что предстоит делать:
- Разработка нового и доработки существующего функционала в КХД;
- Анализ процессов и разработка на их основе алгоритмов преобразования данных;
- Оптимизация алгоритмов загрузки данных.
📌Проекты:
- Команда занимается подготовкой данных для отчетности розничного направления.
- Предстоит развивать и сопровождать загрузку данные из систем-источников в слои ODS (оперативные данные), DDS (детальные данные), витрины данных с использованием ETL и sql функций.
- Мы предоставляем инструмент для оперативного и стратегического анализа для развития бизнеса.
📌Ты нам подходишь, если у тебя есть:
- Опыт проектирования потоков загрузки данных в хранилища DWH (опыт работы с промышленными ETL средством InfORMatica PowerCenter как плюс);
- Знание sql на высоком уровне (разработка PL/sql функций и процедур, оптимизация сложных запросов);
- Опыт работы с БД большого объема;
- Понимание общей специфики банковской деятельности;
- Опыт работы на проектах внедрения/развития хранилищ данных от 3-х лет;
🔥Если все нравится - пиши @Natali_HRit
☁️Позиция: Middle DWH Analys
🏙Компания: IT Pearls
💰зп: вилка: 180 - 300 net
📅формат работы: удаленный
📲Контакты: @Natali_HRit
📌Что предстоит делать:
- Разработка нового и доработки существующего функционала в КХД;
- Анализ процессов и разработка на их основе алгоритмов преобразования данных;
- Оптимизация алгоритмов загрузки данных.
📌Проекты:
- Команда занимается подготовкой данных для отчетности розничного направления.
- Предстоит развивать и сопровождать загрузку данные из систем-источников в слои ODS (оперативные данные), DDS (детальные данные), витрины данных с использованием ETL и sql функций.
- Мы предоставляем инструмент для оперативного и стратегического анализа для развития бизнеса.
📌Ты нам подходишь, если у тебя есть:
- Опыт проектирования потоков загрузки данных в хранилища DWH (опыт работы с промышленными ETL средством InfORMatica PowerCenter как плюс);
- Знание sql на высоком уровне (разработка PL/sql функций и процедур, оптимизация сложных запросов);
- Опыт работы с БД большого объема;
- Понимание общей специфики банковской деятельности;
- Опыт работы на проектах внедрения/развития хранилищ данных от 3-х лет;
🔥Если все нравится - пиши @Natali_HRit
#вакансия #офис #Python #ETL #DWH #middle #разработчик #Москва #Питер #Самара #Тольятти #офис
Привет!
Мы в поисках ETL/DWH разработчика для разработки корпоративного хранилища данных для банка. Команду собираем с 0, что позволит участвовать во внедрении КХД с самого начала и повлиять на архитектуру.
Х-он с 2005 года помогает реализовывать IT–проекты для компаний: от авторских бизнес-идей и наставничества до комплексного анализа, сопровождения и развития проекта. Среди клиентов: Сбербанк, Дикси, РАНХиГС, Allianz и другие.
Предстоящие задачи:
- Построение корпоративного хранилища данных (КХД) по методологии Data Vault 2.0 на базе Arenadata DB (Greenplum).
- Разработка и поддержка интеграционных потоков c различными источниками данных Informatica PowerCenter (Developer), Airflow, Apache NiFi.
- Участие в оптимизации/автоматизации процесса разработки, подготовке шаблонов и методик, проектной документации.
- Апробация новых инструментов разработки и систем в рамках развития КХД.
- Обеспечение непрерывной работы хранилища данных.
Что нам важно:
- Опыт работы в банках или рисках;
- Знание Python или Java
- Опыт работы на аналогичной позиции от 2 лет;
- Опыт работы с MS SQL(или Oracle, DB2, PostgreSQL),
- Опыт с MPP системами Greenplum/Teradata/Vertica;
- Опыт работы с Airflow или Pentaho;
Будет плюсом:
- Знание CI/CD (gitlab, jenkins);
- Опыт работы с kafka.
Что мы предлагаем:
- Офис/гибрид: Москва (м. Краснопресненская), Санкт-Петербург (м. Невский проспект), Самара, Тольятти
- Заработная плата от 170тыс до 250тыс на руки
- Оформление по ИП/СМЗ
- Возможность закрепиться в штате по результатам работы
Интересен проект и задачи? Отправляйте мне резюме: @ME_Merkulova и я обязательно расскажу подробнее😊
Привет!
Мы в поисках ETL/DWH разработчика для разработки корпоративного хранилища данных для банка. Команду собираем с 0, что позволит участвовать во внедрении КХД с самого начала и повлиять на архитектуру.
Х-он с 2005 года помогает реализовывать IT–проекты для компаний: от авторских бизнес-идей и наставничества до комплексного анализа, сопровождения и развития проекта. Среди клиентов: Сбербанк, Дикси, РАНХиГС, Allianz и другие.
Предстоящие задачи:
- Построение корпоративного хранилища данных (КХД) по методологии Data Vault 2.0 на базе Arenadata DB (Greenplum).
- Разработка и поддержка интеграционных потоков c различными источниками данных Informatica PowerCenter (Developer), Airflow, Apache NiFi.
- Участие в оптимизации/автоматизации процесса разработки, подготовке шаблонов и методик, проектной документации.
- Апробация новых инструментов разработки и систем в рамках развития КХД.
- Обеспечение непрерывной работы хранилища данных.
Что нам важно:
- Опыт работы в банках или рисках;
- Знание Python или Java
- Опыт работы на аналогичной позиции от 2 лет;
- Опыт работы с MS SQL(или Oracle, DB2, PostgreSQL),
- Опыт с MPP системами Greenplum/Teradata/Vertica;
- Опыт работы с Airflow или Pentaho;
Будет плюсом:
- Знание CI/CD (gitlab, jenkins);
- Опыт работы с kafka.
Что мы предлагаем:
- Офис/гибрид: Москва (м. Краснопресненская), Санкт-Петербург (м. Невский проспект), Самара, Тольятти
- Заработная плата от 170тыс до 250тыс на руки
- Оформление по ИП/СМЗ
- Возможность закрепиться в штате по результатам работы
Интересен проект и задачи? Отправляйте мне резюме: @ME_Merkulova и я обязательно расскажу подробнее😊
#вакансия #lead #DataEngineer #DWH #hadoop #spark #airflow #clickhouse #SODA #remote
Ищу к себе в команду DWH в AliExpress Lead Data Engineer
Стек: Hadoop, Spark, Airflow, ClickHouse, SODA (DQ).
Удаленка, возможность оформления вне РФ.
Зона ответственности команды DWH - качественные и своевременные данные в удобном для аналитики виде. За платформу данных и подключение источников к озеру данных отвечает отдельная платформенная команда. Объемы данных в компании исчисляются петабайтами.
Чем предстоит заниматься:
- Оптимизация производительности сложных процессов загрузки данных (Spark);
- Развитие используемых в команде практик и подходов (доработки CI/CD, мониторингов, внутренних библиотек)
- Разработка NRT пайплайнов (Kafka, Spark Structured Streaming, CH);
- Разработка витрин данных (Spark);
- Менторинг разработчиков и контроль за соблюдением стандартов.
Мы ожидаем от Вас:
- Опыт работы со Spark и глубокое понимание его устройства;
- Опыт работы с Python или Java от 3-х лет;
- Опыт работы c ClickHouse;
- Опыт написания дата пайплайнов, опыт работы с Airflow;
- Понимание подходов к организации разработки (CI/CD, DevOps).
Будет плюсом:
- Опыт разработки потоковой обработки данных;
- Опыт работы с форматом iceberg;
- Опыт управления небольшой командой.
По вопросам и с резюме: @shh1_01
Ищу к себе в команду DWH в AliExpress Lead Data Engineer
Стек: Hadoop, Spark, Airflow, ClickHouse, SODA (DQ).
Удаленка, возможность оформления вне РФ.
Зона ответственности команды DWH - качественные и своевременные данные в удобном для аналитики виде. За платформу данных и подключение источников к озеру данных отвечает отдельная платформенная команда. Объемы данных в компании исчисляются петабайтами.
Чем предстоит заниматься:
- Оптимизация производительности сложных процессов загрузки данных (Spark);
- Развитие используемых в команде практик и подходов (доработки CI/CD, мониторингов, внутренних библиотек)
- Разработка NRT пайплайнов (Kafka, Spark Structured Streaming, CH);
- Разработка витрин данных (Spark);
- Менторинг разработчиков и контроль за соблюдением стандартов.
Мы ожидаем от Вас:
- Опыт работы со Spark и глубокое понимание его устройства;
- Опыт работы с Python или Java от 3-х лет;
- Опыт работы c ClickHouse;
- Опыт написания дата пайплайнов, опыт работы с Airflow;
- Понимание подходов к организации разработки (CI/CD, DevOps).
Будет плюсом:
- Опыт разработки потоковой обработки данных;
- Опыт работы с форматом iceberg;
- Опыт управления небольшой командой.
По вопросам и с резюме: @shh1_01