#вакансия #алматы #удаленка #workITkz #dataengineer
Должность: Data engineer (junior+)
Компания: Autodoc
https://autodoc.group/de/career/all-jobs
Город: Казахстан
Занятость: удаленка
Оплата: Вилка net: middle в тенге 700K-1000K KZT в мес

AUTODOC is a technology company with a leading e-commerce platform for vehicle parts and accessories in Europe. Founded in 2008 in Berlin, we are now 5,000 people from 68 nationalities, collaborating to make mobility easy and sustainable. By placing technology at the core of everything we do, we manage to serve customers in 27 European countries in 23 languages. Curious minds, adventurous experts and tech-savvy professionals - one team, one billion euros revenue. Catch the ride!
Описание вакансии:
Стек:
Python | JupyterHub | Clickhouse,MySQL,Postgres | AirFlow, Kafka | GitLab | Jira,Confluence | Google Cloud Platform, Linux | Spark | Superset, Metabase | grafana

Чем предстоит заниматься:
* опыт 1-3
* Разработка и оптимизация архитектуры систем обработки баз данных на кластере clickhouse и проектирование слоев DWH
* Репликация баз данных , много тащим с mysql боевого, снижение нагрузки при репликации Change Data Capture
* Разработка и поддержка инфраструктуры кластера clickhouse в среде Google Cloud Platform
* Потоковая обработка данных Spark
* Автоматизация ETL в AirFlow
* Пишем мониторинги и инструменты для контроля качества данных, отслеживания и происхождения данных в многих пайплайнах
* Администрирование Superset|Metabase и grafana

* полное оформление
* дмс
* более 650+ курсов
* офис в Алмате или удаленно
* техника предоставляется

Контакт tg: https://yangx.top/shadow_tvo
email: [email protected]

#вакансия #DataEngineer

Компания: TN Digital
ЗП: 300-450к на руки + премия
Формат: офис в Москве/гибрид/удаленка

TN Digital отвечает за все цифровые продукты компании «ТЕХНОНИКОЛЬ».

В связи с расширением штата ищем человека в команду разработки EDWH.

Задачи:
-организация пайплайнов потоков данных (конвейера движения данных в компании);
-разработка, поддержка и оптимизация производительности EDWH;
-разработка и настройка ETL/ELT-процессов (сбор, структурирование и обеспечение сохранности данных);
-настройка инфраструктуры для обеспечения качества данных.

Наши ожидания:
-знание современных технологий обработки больших данных;
-хорошее знание Python;
-хорошее знание SQL и реляционных баз данных (желательно, Greenplum или PostgreSQL), опыт написания сложных запросов.

Стек проекта: Python, Greenplum, PostgreSQL, Data Build Tool (DBT), Spark, Kafka, Airflow, Kubernetes, Terraform, Ansible, GitLab, SonarQube, Prometheus, Grafana, AlertManager.

Условия:
-белая зп, оформление по ТК РФ;
-проф обучение за счет компании, ДМС, скидки на занятия спортом, компенсация обучения английского языка, оплата мобильной связи.

Для связи @ryabin_ka

Всем привет! Делюсь актуальной вакансией в Авито Тех:
#вакансия #dataengineer #удаленка #senior #python #sql

Ищем Data Engineer в команду Integration Авито (senior)

Офис: Москва, Санкт-Петербург, Самара, Ереван
Формат работы: офис или удаленка
Занятость: полная
З/П: от 320 до 500 тыс рублей на руки

В команде вы будете:
— участвовать в процессе перехода с Vertica и делать Trino основным местом для создания новых расчетов в хранилище;
— оптимизировать запросы и модели данных, ускорять процессы обращения к данным в ceph и метаданным в hive.

Требования:
— имеете опыт работы с аналитическими СУБД (Vertica, Snowflake, Clickhouse, StarRocks, Presto, Trino);
— умеете выполнять SQL-запросы для СУБД и оптимизировать аналитические запросы;
— имеете опыт разработки пайплайнов обработки данных.

Мы предлагаем:
— конкурентную зарплату, ДМС со стоматологией и дополнительные дни отпуска;
— возможность работать удалённо или из офисов в Москве, Санкт-Петербурге, Самаре или Ереване;
— интересные и сложные задачи на большом масштабе для прокачки вашего стека — создавайте алгоритмы с нуля и доводите их до прода;
— возможность изучать и пробовать новое — мы предлагаем для этого мощное железо и выделяем бюджет на обучающие курсы или профессиональную литературу;
— сильную команду, которая обожает опенсорс и всегда готова прийти на помощь.

Контакт для отклика: @oooozhegovaaaa

#job #вакансия #DataEngineer #Greenplum #MPP #фултайм #remote

Вакансия: Data Engineer
Формат работы: на выбор - офис, гибрид, удаленка (можно вне РФ)
Занятость: full-time с гибким началом рабочего дня
Офис: г. Москва, м. Тульская, Варшавское шоссе, 9с1Б, БЦ “Даниловская Мануфактура”
Зарплатная вилка: 300 - 390 тыс руб gross + ДМС + курсы англ языка и разговорная практика с европейским офисом + ежегодно повышаем ЗП + техника (Macbook или PC @Dell) + отсрочка от призыва и мобилизации (аккредитованная ИТ компания)
Оформление: ТК, ИП
Гражданство: РФ

Компания: https://mokka.ru — международная fintech компания, лидер сегмента BNPL в России и Восточной Европе (Buy Now Pay Later – покупай сейчас, плати потом). Сервисы Мокка представлены в более 7 тыс. торговых точек наших партнеров, таких как Lamoda, OneTwoTrip, OZON, М.Видео, Эльдорадо, Детский мир и др, а количество пользователей уже 15+ млн. Сервис работает в РФ, Польше, Румынии, Болгарии.

Команда аналитической платформы:
— Head of Data and Analytics;
— Data Engineer - 3;
— BI Analyst - 3;
— ML Engineer - 4.

Стек DE: Greenplum, S3, Apache NiFi, Apache Kafka, Apache Airflow, Python, DBT, CI\CD - Gitlab, REST API, Docker, Soda core.

Смежные команды: 7 продуктовых команд, в РФ и Европе, команда DevOps, команда саппорта и др.

Зона ответственности:
— проектирование, разработка и оптимизация архитектуры DWH (Greenplum, Data Vault);
— разработка и поддержка ETL-процессов с использованием Nifi и Airflow, подключение новых источников данных;
— написание трансформаций и моделирование данных с использованием DBT;
— мониторинг и контроль работы регламентных процессов обновления данных;
— решение инцидентов с качеством данных;
— создание витрин данных;
— поддержка CI/CD процессов для обработчиков и загрузчиков данных;
— документация обработчиков данных и витрин, которые часто используются;
— рефакторинг имеющихся обработчиков с целью оптимизации;
— создавать решения (например, для заливки моделей / фичей) оптимизированные под запись;
— наполнение базы знаний;

Пожелания к опыту:
— знание методологий проектирования DWH;
— опыт в разработке и поддержке DWH и ETL от 3 лет;
— знание SQL на хорошем уровне: оконные функции, иерархические запросы, оптимизация производительности запросов;
— опыт работы с DBT;
— хорошее знание Python: знать что такое virtualenv, уметь remote-development, уметь оформлять тесты и настраивать линтеры;
— хорошее знание Airflow: уметь писать собственные hooks и operators, умение пользоваться внутренними возможностями airflow по хранению параметров соединений, создание и поддержание документации по дагам;
— Linux: знание основных команд, умение писать bash-скрипты, умение работать с pipe;
— умение работать с docker контейнерами;
— опыт работы с git, настройка пайплайнов в gitlab-ci;
— опыт настройки и использования Apache Kafka, знание Avro формата;
— хорошее знание REST API;

Nice to have:
— опыт работы с S3;
— опыт работы с колоночными СУБД (Greenplum, Vertica, Teradata, Clickhouse): уметь разворачивать, проектировать схемы для витрин в зависимости от назначения, настраивать мониторинг и бэкапы, анализ и оптимизация запросов;
— Apache NiFi: хотя бы уверенные теоретические знания;
— Soda Core;
— знание Cloud concepts (Yandex Cloud, AWS);

Условия:
— формат работы: на выбор - офис, гибрид, удаленка (можно вне РФ);
— оформление: ТК РФ, ИП;
— оклад: 300-390К руб gross + ежегодное повышение ЗП;
— ДМС со стоматологией;
— отсрочка от призыва и мобилизации (аккредитованная ИТ компания);
— гибкое начало рабочего дня (с 08:00 до 11:00 мск);
— техника на выбор: MacBook Pro или PC @Dell;
— открытая простая коммуникация в команде;
— приятные корпоративы: https://www.instagram.com/p/CScEi9iqgUL/.

Как устроен процесс найма:
Видео-звонок с HR → Техническое вью → Финальное вью → Оффер.

Контакты для связи:
Гульжана Менажиева @akssld