Старший інженер з даних

Clarity Innovations є надійним партнером у сфері національної безпеки, який займається захистом інтересів нашої країни та надає інноваційні рішення, які дають змогу розвідувальному співтовариству (IC) і Міністерству оборони (DoD) перетворювати дані в розвідувальну інформацію, що діє, забезпечуючи успіх місії в світі, що розвивається.

Наше перше програмне забезпечення та платформа розробки даних модернізує операції з даними, використовуючи розширені робочі процеси, CI/CD і безпечні практики DevSecOps. Ми зосереджуємося на викликах у сфері інформаційної війни, кібероперацій, операційної безпеки та структурування даних, створюючи наскрізні рішення, які забезпечують оперативний вплив.

Ми прагнемо надавати передові інструменти та можливості, які вирішують найскладніші виклики національній безпеці, даючи нашим партнерам можливість випереджати нові загрози та забезпечуючи успіх їхніх важливих завдань. У Clarity ми зосереджені на людях і налаштовані на те, щоб стати роботодавцем для кращих талантів, пропонуючи середовище, де процвітають інновації, розвивається кар’єра та цінуються особистості. Приєднуйтесь до нас, оскільки ми продовжуємо розвивати інновації та вирішувати найнагальніші виклики національній безпеці.

Роль

Цей інженер даних безпосередньо підтримує командування спеціальних операцій в Африці (SOCAF), яке базується в казармах Келлі в Штутгарті, Німеччина. Інженери з обробки даних у цій програмі підтримують команду шляхом поєднання зусиль з управління даними та їх модернізації. Інженери даних будуть інтегровані в SOCAF, щоб надавати знання та технічні можливості для інтеграції складних даних, які використовуються командуванням. Інженери даних у цій програмі підтримують ініціативу SOCAF, щоб бути більш спроможними та ефективними при використанні своїх ресурсів даних.

Обов'язки
Інженер з даних має глибоке розуміння оптимізації продуктивності та конвеєрної обробки даних. Окрім базових навичок аналітика даних, інженери обробки даних можуть зробити необроблені дані більш корисними для підприємства. Інженери з обробки даних можуть створювати та інтегрувати інтерфейси прикладного програмування (API). Їхні технічні навички, як правило, включають декілька мов програмування та глибоке знання дизайну баз даних SQL.

Роль Data Engineer вимагає більш глибоких знань у програмуванні для інтеграції складних моделей і використання розширених бібліотек програмного забезпечення для розповсюдження великих кластерних наборів даних. Інженери з обробки даних збирають і впорядковують дані у формі, корисній для аналітики. Базові знання в області машинного навчання також необхідні для створення ефективних і точних каналів даних для задоволення потреб подальших користувачів, таких як спеціалісти з обробки даних, для створення моделей і аналітики, які дають розуміння.

Старший інженер з даних повинен виконувати такі завдання:

• Розробка, підтримка та тестування інфраструктур для генерації даних для перетворення даних з різних структурованих і неструктурованих джерел даних.

• Розробляйте складні запити, щоб забезпечити доступність, одночасно оптимізуючи продуктивність NoSQL та інфраструктури великих даних. Створення та підтримка оптимальної архітектури конвеєра даних.

• Створення та підтримка інфраструктури для підтримки видобування, перетворення та завантаження (ETL) даних із різноманітних джерел даних. Витягуйте дані з багатьох джерел даних, реляційних баз даних SQL і NoSQL та інших API платформи для прийому та інтеграції даних.

• Налаштовуйте аналітичні структури та конвеєри даних і керуйте ними за допомогою баз даних і інструментів, таких як NoSQL, SQL, HDInsight, MongoDB, Cassandra, Neo4j, GraphDB, OrientDB, Spark, Hadoop, Kafka, Hive і Pig.

• Застосовувати концепції та принципи розподілених систем, такі як послідовність і доступність, живучість і безпека, довговічність, надійність, відмовостійкість, консенсусні алгоритми.

• Адмініструвати хмарні обчислення та конвеєри CI/CD для включення Azure, Google і Amazon Web Service (AWS).

• Координуйте роботу із зацікавленими сторонами, включаючи команди продуктів, даних і дизайнерів, щоб допомогти вирішити технічні проблеми, пов’язані з даними, і підтримати їхні потреби в інфраструктурі даних

Вимоги

• Досвід роботи не менше 3 років.

• Ступінь бакалавра в галузі STEM з перевагою в галузі комп’ютерних наук та розробки програмного забезпечення.

• Перевірений досвід роботи зі структурами даних, керування базами даних, розподіленими обчисленнями та архітектурами, керованими API, із використанням механізмів SQL і No-SQL.

• Досконале володіння фреймворками моделювання, такими як універсальна мова моделювання (UML), гнучка розробка та операції Git.

• Для початку потрібен секретний дозвіл

Бажані кваліфікації

• Знайомство з Palantir та/або MSS

• Знайомство з Міністерством оборони.

• Дозвіл цілком таємно з правом SCI

Діапазон зарплати: $90 000 - $217 000
Діапазон виплат

Розміщений діапазон заробітної плати відображає очікуваний діапазон базової заробітної плати для цієї посади та надається, щоб дати кандидатам загальне уявлення про можливість компенсації. Пропонована фактична зарплата визначатиметься на основі вимог до посади та різноманітних факторів, пов’язаних із роботою, які можуть включати географічне розташування, відповідні категорії та ставки заробітної плати за контрактом Федерального уряду, відповідний досвід, навички та компетенцію, освіту, сертифікати, а також обсяг і обов’язки посади.

Оскільки ця посада може працювати в кількох місцях і може підпадати під різні вимоги до контракту, кінцева пропонована зарплата може відрізнятися залежно від відповідного місця та контракту. Опублікований діапазон не є гарантією конкретної початкової зарплати або вказівкою на те, що пропозиція буде зроблена в будь-якій конкретній точці діапазону.

Загальна кількість винагород

Окрім конкурентоспроможної базової винагороди, Clarity надає пакет Total Rewards, розроблений для залучення та утримання виняткових професіоналів, які прагнуть до досконалості. Наші переваги відображають цінність, яку ми надаємо кваліфікованим спеціалістам, які керують нашим впливом у критичних цифрових місіях.…

Джерело: Arbeitnow (https://www.arbeitnow.com/jobs/companies/clarityinnovates/senior-data-engineer-kelley-barracks-315875)