Yazılım Mühendisi – Sorgu Motorları

Dünyayı Değiştiren Bir Şirket

Palantir, veriye dayalı kararlar ve operasyonlar için dünyanın önde gelen yazılımını oluşturur. Platformlarımız, ihtiyacı olan kişilere doğru verileri sunarak ortaklarımıza hayat kurtaran ilaçlar geliştirme, tedarik zinciri kesintilerini tahmin etme, kayıp çocukları bulma ve daha fazlasını yapma konusunda güç veriyor.

Rol

Dünyanın en zor ve en önemli sorunlarından bazılarına açık kaynaklı veri teknolojilerini uygulayan bir yazılım mühendisliği ekibiyiz. Palantir Foundry'nin temelini oluşturan veri işleme altyapısını inşa ediyoruz; hastanelerin daha fazla hastaya bakım yapmasına, klinik ekiplerinin zamanında teşhisleri koordine etmesine yardımcı olan ve küresel kesintilere rağmen temel malzemelerin taşınmasını sağlayan uygulamaları destekliyoruz.

Bunu mümkün kılan sistemlerin derinliklerinde çalışacaksınız: hesaplamaların nasıl temsil edildiği, sorgu planlarının nasıl optimize edildiği, operatörlerin nasıl yürütüldüğü ve verilerin nasıl verimli bir şekilde okunup yazıldığı. Apache Spark, Apache DataFusion ve Apache Iceberg'i geliştirip genişleterek, müşterilerimizin faaliyet gösterdiği zorlu ortamlara açık kaynak motorlarda ve tablo formatlarında ilerlemeler getiriyoruz. Çalışmalarımız, Foundry genelinde, kodsuz işlem hatları, etkileşimli analiz ve Ontolojiyi güncel tutan işlemler de dahil olmak üzere birçok ürüne ve iş yüküne hizmet ediyor.

İster bir planlama kuralı geliştirmek, ister yerel bir yürütme motorunu genişletmek, ister büyük tabloların taranma ve güncellenme biçimini geliştirmek olsun, tasarımdan üretime kadar iyileştirmelere sahip olacaksınız. Doğruluk, uyumluluk ve öngörülebilir performans, ürettiğimiz her şeyin merkezinde yer alır. Paylaşılan bir motorda yapılacak bir değişiklik, platformdaki uygulamalara ve bunlara güvenen kişilere fayda sağlayabilir.

Modern veri sistemlerinin yeteneklerini geliştirmek ve bu çalışmayı önemli sorunlara uygulamak istiyorsanız bize katılın.

Kullandığımız Teknolojiler

• Java, Scala, Rust ve Python

• Veri işleme ve sorgu yürütme için Apache Spark, Apache DataFusion, Apache Comet ve Velox

• Tablo yönetimi ve katalog birlikte çalışabilirliği için Apache Iceberg

• Bellek içi veri işleme ve sütunlu depolama için Apache Arrow ve Apache Parquet

• Gradle, Cargo ve GitHub dahil olmak üzere endüstri standardında yapı araçları.

Temel Sorumluluklar

• Karmaşık hesaplamaları verimli yürütme planlarına dönüştüren sorgu planlama ve optimizasyon yeteneklerinin tasarlanması ve uygulanması

• Yürütme motorlarının yeni yeteneklerle genişletilmesi ve sorgu operatörlerinin, paralelliğin, bellek yönetiminin ve veri hareketinin iyileştirilmesi

• Tablo meta verileri, işlemler ve verimli okuma ve yazmalar dahil olmak üzere Foundry'nin Iceberg kataloğunu ve motor entegrasyonlarını geliştirmek

• Foundry'nin ürünleri ve platform hizmetleri genelinde iş yükleri için ortak dönüşüm semantiği ve yürütme arayüzleri oluşturma

• İşlem hatlarının önceki sonuçları yeniden kullanabilmesi ve yeni verileri verimli bir şekilde işleyebilmesi ve aynı zamanda doğruluğu koruyabilmesi için artımlı işlemenin iyileştirilmesi

• Açık kaynak veri sistemlerindeki ilerlemeleri değerlendirmek ve entegre etmek, davranışlarını ve performanslarını gerçek dünyadaki iş yüklerine göre doğrulamak

• Planlama, yürütme ve depolama genelinde doğruluk ve performans konularını araştırmak ve gerilemeleri önleyen testler ve kıyaslamalar oluşturmak

• Operasyonel ihtiyaçları Foundry'nin güvenliği, veri yönetimi ve altyapı yapısıyla entegre olan motor yeteneklerine dönüştürmek için ürün ekipleri ve müşterilerle birlikte çalışmak

Neye Değer Veriyoruz

• Sahiplenme zihniyeti ve doğruluk konusunda yüksek bir çıta. Sistemlerimiz müşterilerin güvendiği kararları ve operasyonları destekler.

• Sorgu iyileştiricilerden ve yürütme operatörlerinden tablo formatlarına ve dağıtılmış işlemeye kadar veri sistemlerinin nasıl çalıştığına dair merak.

• Güçlü hata ayıklama becerileri ve bir sorunu diller, hizmetler ve yığın katmanları genelinde takip etme motivasyonu.

• Performansa yönelik, profil oluşturmaya, temsili iş yüklerine ve ölçülebilir iyileştirmelere dayanan pratik bir yaklaşım.

• Yazılımımızı kullanan ve ona bağımlı olan insanlarla empati kurarak derin sistem mühendisliğini gerçek dünya sorunlarına uygulamaya ilgi.

• Spark, DataFusion, Iceberg veya benzer teknolojiler gibi sistemler oluşturma veya genişletme deneyimi ve yığın genelinde öğrenmeye ilgi.

• Ekipler arasında işbirliği yapma ve üzerine inşa ettiğimiz açık kaynaklı projelerle etkili bir şekilde çalışma becerisi. Açık kaynaklı projelere katkıda bulunan deneyime değer verilir, ancak gerekli değildir.

Neye ihtiyacımız var

• Üretim sistemleri oluşturma ve işletmede 4 yılı aşkın profesyonel yazılım mühendisliği deneyimi.

• Bilgisayar Bilimleri, Matematik, Yazılım Mühendisliği, Fizik veya benzer bir alanda mühendislik geçmişi veya eşdeğer pratik deneyim.

• Java, Rust, Scala veya C++ gibi bir veya daha fazla dilde kanıtlanmış yeterliliğe sahip güçlü kodlama becerileri.

• Sorgu planlama, yürütme veya performans optimizasyonu gibi alanlarda derinlemesine veritabanı motorları, dağıtılmış veri işleme sistemleri, depolama sistemleri veya karşılaştırılabilir altyapı geliştirme deneyimi.

• Algoritmalar, veri yapıları ve eşzamanlılık konusunda güçlü temeller ve karmaşık sistemlerde doğruluk ve performans sorunlarını teşhis etme deneyimi.

• Güçlü yazılı ve sözlü iletişim becerileri ve ekipler arasında etkili bir şekilde çalışma, geri bildirimi dahil etme ve kalite konusunda yüksek çıtayı koruma becerisi.

Palantir'de Yaşam

Her Palantirian'ın en iyi sonuçlara ulaşmasını istiyoruz, bu nedenle geleneksel kariyer basamaklarına güvenmek yerine, ilk görüşmenizden uzun vadeli gelişiminize kadar bireylerin güçlü yönlerini, becerilerini ve ilgi alanlarını kutluyoruz. Topluluğumuzun ihtiyaçlarına dikkat etmek, büyüme fırsatlarımızı optimize etmemizi sağlar ve Palantir'de başarıya giden birçok yolun sağlanmasına yardımcı olur. Palantirians'ın yaşamının her alanında sağlık ve refahı teşvik etmek, toplumumuza yatırım yapmanın yollarından sadece bir tanesidir. Life at Palantir'de daha fazla bilgi edinin ve tekliflerimizin bölgeye göre değişebileceğini unutmayın.…

Kaynak: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/palantir/software-engineer-query-engines-london-united-kingdom-116121)