Дата инженер в компанию Летуаль
04 Ноября 2024
Город:
Минск
Занятость:
Полная занятость
Компания "ЖентиТрейд"
Обязанности:-
·Участвовать в проектировании, создании, развертывании и управлении общей архитектуры платформы данных
·Выстраивать процессы взаимодействия DWH и других компонент экосистемы данных компании
·Проектировать модели данных детального слоя под бизнес требования с оптимальным хранением данных
·Разрабатывать процедуры формирования детального слоя данных и слоя витрин
·Поддерживать текущие автоматизированные регулярные ETL процессы
·Настраивать поток данных с использованием распределенных систем обмена сообщениями, в частности Kafka
·Разрабатывать схемы подключения новых источников, включая получение структурированных и неструктурированных данных из различных источников
·Реализовывать процессы CI/CD и мониторинга разработанных процессов обработки данных
·Создавать и улучшать процессы обработки данных
·Участвовать в проектировании, внедрении и развитии каталога данных
·Участвовать в развитии процессов Data Governance
·Документировать свою работу в JIRA/Confluence
-
· опыт от 3-х лет в роли Data Engineer
· знание современных инструментов ETL/ELT, CDC и способов их автоматизации
· умение извлекать данные из различных источников (БД, логи, сторонние системы и т.п.)
· умение осуществлять автоматизированный сбор и структурирование информации с сайтов (parsing) при помощи программы/cервиса
· умение выбирать технологию для хранения данных и их обработки
· опыт проектирования и внедрения архитектуры хранилища данных с применением практик и технологий Data management, DWH/BI, Big Data и Data streaming
· понимание смежных технологических областей (инфраструктура, DevOps, DevSecops, Data Science, Cloud native и др.)
· владение языками программирования (SQL на уровне не ниже Middle, Python, либо другом скриптовом языке программирования)
· опыт работы с планировщиками задач (MS SQL, Airflow)
· опыт работы с ClickHouse, PostgreSQL, Google Analytics, BigQuery, Appsflyer
· опыт работы с микро-сервисной архитектурой
· опыт работы с очередями и брокерами сообщений Kafka/RabbitMQ
· опыт работы с BI инструментами MSOLAP/PowerBI/QlikView/различные российские решения
-
Интересные задачи;
Уникальную профессиональную команду;
Достойный уровень вознаграждения;
Работа офисе
-
Доход от 1 500 BYN на руки и выше без ограничений. Оклад определяется по факту интервью.
-
Natalia Novikova
HR Director IT,
Тел. +7-916-212-00-43
телефон: +375(44)777-86-67
Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя
Прикрепите резюме для отклика
Уже с нами?
Войдите, чтобы отправить резюме
26 Октября
Инженер производственно-технического отдела( Минский Вагонный Участок Белорусской Железной Дороги )
Минск
Компания "Минский Вагонный Участок Белорусской Железной Дороги" Обязанности: 1. Разрабатывать совместно с причастными мероприятия по...
26 Октября
Инженер по эксплуатации( 1AK-GROUP )
Минск
Компания "1AK-GROUP" Обязанности: Организация и контроль работы подчиненных сотрудников: энергетика, сторожей-охранников, подсобных рабочих...
27 Октября
Инженер-конструктор/ Инженер-технолог / Ученик
Минск
Компания "Филиал МебельДизайн УП ФУРМАН" Компания "ФУРМАН" (www.furman.by) - это собственное производство мягкой и корпусной мебели, сочетающей...
27 Октября
Инженер по эксплуатации сооружений и оборудования ВКХ( Пятый элемент, сеть магазинов )
Минск
Компания "Пятый элемент, сеть магазинов" Ваша зона ответственности: эксплуатация и ремонт сетей отопления и теплоснабжения; подготовка к...
27 Октября
Ведущий инженер по сметной работе (сметчик)( Национальная библиотека Беларуси )
Минск
Компания "Национальная библиотека Беларуси" Обязанности: знание нормативных документов, других методических и руководящих материалов по...
Вакансия размещена в отрасли