Модельєр даних

Це віддалена позиція.
Розробка концептуальних, логічних і фізичних моделей даних (ER-діаграми, розмірні/зіркові схеми, сховище даних, де це можливо) для проміжних доменів даних — планування та призначення конвеєрів, об’ємне вимірювання та розподіл, збір і обробка, інвентаризація терміналів/сховищ, тарифи та нормативна звітність, а також комерційні контракти. Скористайтеся стратегією розподілу рівнів «Бронза» → «Срібло» → «Золото» у партнерстві з розробкою даних: визначте, що належить до сирих/постановочних і відповідних бізнес-об’єктів, а до фактів і розмірів рівня презентації. Створюйте та підтримуйте розмірні моделі (дизайн фактів/вимірів, стратегія SCD типу 1/2, сурогатні та природні ключі, узгоджені розміри в бізнес-підрозділах) для звітності та використання аналітики. Співпрацюйте з інженерами з обробки даних, щоб перевести моделі в джерела dbt, проміжні моделі та вітрини, а також перевірити PR на дотримання стандартів моделювання та іменування. Визначайте та обслуговуйте словник корпоративних даних, документацію про взаємозв’язки сутностей і метадані на рівні стовпців (визначення бізнесу, дійсні значення, походження даних) для проміжних предметних областей. Оцініть вихідні системи, отримані через Informatica IDMC/CDIR і dbt, і моделюйте, як вони узгоджуються в єдине узгоджене подання. Проведіть перевірку моделей даних із зацікавленими сторонами (комерційними, плановими, бухгалтерськими, регуляторними), щоб підтвердити, що моделі правильно відображають контракти, розподіли та об’ємні відносини. Підтримуйте керування основними даними для основних довідкових об’єктів (активи, лічильники/точки вимірювання, контракти, контрагенти, тарифні розклади). Сприяти управлінню даними: угоди про найменування, стандарти моделювання, правила якості даних і процеси управління. Оцініть вплив нових джерел даних або змін у бізнесі (нових конвеєрних систем, придбань, нормативних змін) на існуючі моделі та пропонують стратегії еволюції схем, які уникають поломки наступних споживачів. Необхідні кваліфікації Понад 5 років досвіду моделювання даних (концептуального, логічного, фізичного), включаючи розмірне моделювання та нормалізований/3NF дизайн. Безпосередній досвід роботи з нафтою та газом — практичне знайомство принаймні з одним із: планування/номінації трубопроводів, об’ємні вимірювання та розподіл, балансування газу/рідин, операції на терміналах чи сховищах або нормативна звітність Сильні навички SQL та досвід моделювання для хмарного сховища даних (Snowflake, Redshift, BigQuery тощо). Практичний досвід роботи з dbt (або аналогічною структурою трансформації) — розуміє, як моделі перетворюються на залежності, тести та документацію source()/ref(). Тверде розуміння просторового моделювання у стилі Кімбола (зіркова схема, розміри, що повільно змінюються, узгоджені розміри, безфактичні факти) і коли замість цього використовувати Data Vault або 3NF. Досвід роботи з інструментами моделювання даних (erwin, ER/Studio, SqlDBM, dbdiagram тощо) і створення чітких діаграм ER для технічної та бізнес-аудиторії. Комфортно працювати безпосередньо з малими та середніми підприємствами, щоб отримувати та формалізувати бізнес-правила в моделі даних — ця роль вимагає перекладу неоднозначних оперативних знань у структуровані схеми, а не просто впровадження наданої вам специфікації. Розуміння основ управління даними: керування метаданими, походження даних, правила якості даних та управління. Бажані кваліфікації Досвід роботи з Informatica IDMC (або подібними інструментами реплікації ETL/ELT і CDC) і розуміння того, як шаблони прийому (пакетне проти CDC) впливають на розробку моделі нижче. Досвід роботи з Airflow або іншою оркестровальною платформою та те, як дизайн DAG впливає на свіжість даних і керування залежностями для моделей ви володієте. Знайомство з архітектурою медальйону/озерного дому (бронза/срібло/золото) і компромісами між шарами відповідних бізнес-моделей проти необробленого прийому. Попередній досвід управління даними або управління даними.

Спочатку опубліковано на Гімалаях

Джерело: Himalayas (https://himalayas.app/companies/elfonze-technologies/jobs/data-modeler?utm_source=api)