Старший инженер данных

Clarity Innovations — надежный партнер в области национальной безопасности, призванный защищать интересы нашей страны и предоставлять инновационные решения, которые позволяют разведывательному сообществу (IC) и Министерству обороны (DoD) преобразовывать данные в полезную разведывательную информацию, обеспечивая успех миссии в развивающемся мире.

Наша передовая платформа программного обеспечения и обработки данных модернизирует операции с данными, используя передовые рабочие процессы, CI/CD и безопасные практики DevSecOps. Мы фокусируемся на задачах в области информационной войны, киберопераций, операционной безопасности и структурирования данных, предлагая комплексные решения, обеспечивающие оперативный эффект.

Мы стремимся предоставлять передовые инструменты и возможности, которые помогут решить самые сложные проблемы национальной безопасности, предоставив нашим партнерам возможность опережать возникающие угрозы и обеспечить успех их важнейших задач. В Clarity мы ориентированы на людей и стремимся стать работодателем для лучших талантов, предлагая среду, в которой процветают инновации, растет карьера и ценятся люди. Присоединяйтесь к нам, поскольку мы продолжаем возглавлять инновации и решать самые насущные проблемы национальной безопасности.

Роль

Этот инженер по обработке данных напрямую поддерживает Командование специальных операций в Африке (SOCAF), базирующееся в казармах Келли в Штутгарте, Германия. Инженеры по обработке данных в этой программе поддерживают команду, сочетая усилия по управлению данными и модернизации данных. Инженеры по обработке данных будут включены в состав SOCAF для предоставления экспертных знаний и технических возможностей для интеграции сложных данных, используемых командованием. Инженеры по обработке данных в этой программе поддерживают инициативу SOCAF, направленную на повышение эффективности и эффективности использования своих ресурсов данных.

Обязанности
Инженер по обработке данных имеет глубокое понимание оптимизации производительности и конвейерной обработки данных. В дополнение к базовым навыкам аналитика данных инженеры по данным могут сделать необработанные данные более полезными для предприятия. Инженеры по обработке данных могут создавать и интегрировать интерфейсы прикладного программирования (API). Их технические навыки обычно включают несколько языков программирования и глубокие знания в области проектирования баз данных SQL.

Роль инженера по обработке данных требует более глубоких знаний в области программирования для интеграции сложных моделей и использования передовых программных библиотек для распространения больших кластеризованных наборов данных. Инженеры по обработке данных собирают и упорядочивают данные в форме, удобной для аналитики. Базовые знания в области машинного обучения также необходимы для создания эффективных и точных конвейеров данных для удовлетворения потребностей последующих пользователей, таких как специалисты по обработке данных, в создании моделей и аналитики, которые дают ценную информацию.

Старший дата-инженер выполняет следующие задачи:

• Разработка, поддержка и тестирование инфраструктур генерации данных для преобразования данных из различных структурированных и неструктурированных источников данных.

• Разрабатывайте сложные запросы для обеспечения доступности и оптимизации производительности NoSQL и/или инфраструктуры больших данных. Создайте и поддерживайте оптимальную архитектуру конвейера данных.

• Создавать и поддерживать инфраструктуру для поддержки извлечения, преобразования и загрузки (ETL) данных из самых разных источников данных. Извлекайте данные из нескольких источников данных, реляционных баз данных SQL и NoSQL и других API-интерфейсов платформы для приема и интеграции данных.

• Настраивайте платформы и конвейеры анализа данных и управляйте ими с помощью баз данных и инструментов, таких как NoSQL, SQL, HDInsight, MongoDB, Cassandra, Neo4j, GraphDB, OrientDB, Spark, Hadoop, Kafka, Hive и Pig.

• Применять концепции и принципы распределенных систем, такие как согласованность и доступность, живучесть и безопасность, долговечность, надежность, отказоустойчивость, алгоритмы консенсуса.

• Администрирование облачных вычислений и конвейеров CI/CD, включая Azure, Google и Amazon Web Service (AWS).

• Координировать свои действия с заинтересованными сторонами, включая группы по продуктам, данным и проектированию, для оказания помощи в решении технических проблем, связанных с данными, и поддержки их потребностей в инфраструктуре данных.

Требования

• Требуется минимум 3-летний опыт работы.

• Степень бакалавра в области STEM с предпочтением информатики и разработки программного обеспечения.

• Подтверждаемый опыт работы со структурами данных, управлением базами данных, распределенными вычислениями и архитектурами на основе API с использованием механизмов SQL и No-SQL.

• Владение такими средами моделирования, как универсальный язык моделирования (UML), Agile Development и Git Operations.

• Для начала требуется секретный допуск

Предпочтительные квалификации

• Знакомство с Palantir и/или MSS.

• Знакомство с Министерством обороны.

• Совершенно секретное разрешение с правом SCI

Диапазон зарплат: 90 000–217 000 долларов США.
Диапазон оплаты

Указанный диапазон заработной платы отражает ожидаемый диапазон базового оклада для этой должности и предоставляется для того, чтобы дать кандидатам общее представление о возможностях компенсации. Фактическая предлагаемая заработная плата будет определяться на основе требований должности и множества факторов, связанных с работой, которые могут включать географическое местоположение, применимые категории рабочей силы по контракту федерального правительства и ставки заработной платы, соответствующий опыт, навыки и компетенции, образование, сертификаты, а также объем и обязанности должности.

Поскольку эта должность может выполняться в нескольких местах и ​​на нее могут распространяться разные требования контракта, предлагаемая в конечном итоге зарплата может варьироваться в зависимости от применимого местоположения и контракта. Указанный диапазон не является гарантией конкретной стартовой зарплаты или указанием на то, что предложение будет сделано в какой-либо конкретной точке диапазона.

Всего наград

В дополнение к конкурентоспособной базовой заработной плате Clarity предлагает пакет Total Rewards, предназначенный для привлечения и удержания исключительных специалистов, стремящихся к совершенству. Наши преимущества отражают ценность, которую мы придаем квалифицированным специалистам, которые оказывают влияние на нашу работу в критически важных цифровых миссиях…

Источник: Arbeitnow (https://www.arbeitnow.com/jobs/companies/clarityinnovates/senior-data-engineer-kelley-barracks-315875).