Lead Big Data Engineer Ukraine or Remote
Lead Big Data Engineer Description
Наш клієнт – міжнародний виробник косметики, парфумерії, засобів для догляду за шкірою та волоссям. Метою проєкту є створення рішення для інтеграції неструктурованих даних для Data Lake нашого клієнта з використанням власних хмарних сервісів Azure.
#LI-DNI
Чим ви будете займатися у цій ролі
- Координувати та контролювати роботу команди розробників ПЗ для обробки даних
- Налагоджувати та підтримувати процес розробки та інструменти для забезпечення ефективного та результативного виконання відповідно до найкращих галузевих практик (EngX)
- Очолювати та сприяти реалізації MVP для неструктурованих даних, що надходять до системи
- Брати участь у підтримці беклогу та Scrum-процесах
- Брати участь у створенні BRD, SAD та подальшому впровадженні беклогу та інструкцій для наступних етапів проєкту
- Очікувані результати: MVP для введення неструктурованих даних до корпоративного сховища даних на основі хмарних сервісів Azure для ETL, OCR, NER та кастомного коду Python
Навички
- Досвід роботи з Data Platform & Solution engineering and Azure’s PaaS offerings
- Компетентність в Azure: Data Factory, Data Lake, Databricks, Microsoft Purview, Monitor, Storage Services, ADLS, Azure Functions, Log Analytics, Serverless Architecture, Azure Cognitive Services, Azure Form Recognizer
- Практичний досвід і високий рівень володіння Python і GraphQL
- Знання кращих практик безпеки (наприклад, використання Azure Key Vault, IAM, RBAC, Monitor і т.д.)
- Вміння інтегрувати, трансформувати і консолідувати дані з різних структурованих і неструктурованих систем даних в структуру, придатну для побудови різних аналітичних рішень
- Досвід організації та дотримання ефективного та результативного процесу розробки для Agile-команди
- Хороші комунікативні навички, вміння працювати в команді
- Високий рівень розуміння Azure DevOps, досвід роботи в Agile середовищі (Scrum, Kanban)
- Досвід роботи з Azure ML буде перевагою
- Знання письмової та усної англійської мови на рівні Upper-Intermediate і вище (B2+)
Що ми пропонуємо
- Відпустку та лікарняні дні (в тому числі без медичної довідки)
- Широку лінійку страхових програм Добровільного Медичного Страхування (ДМС) із забезпеченням як медичного лікувавання, так і різних профілактичних опцій (включно із спортивними активностями)
- Оформлення медичного страхування для членів родини за корпоративними тарифами
- Підтримку від компанії під час знакових життєвих подій (народження або всиновлення дитини, шлюб та інше)
- Підтримку психологічного комфорту: знижки на послуги спеціалістів з ментального здоров'я або коучів, тематичні тренінги
- E-kids - безкоштовну програму навчання для дітей EPAM-ерів мовам програмування
- Приємні корпоративні подарунки