Software Engineer – Query Engines

Μια εταιρεία που αλλάζει τον κόσμο

Η Palantir κατασκευάζει το κορυφαίο λογισμικό στον κόσμο για αποφάσεις και λειτουργίες που βασίζονται σε δεδομένα. Φέρνοντας τα σωστά δεδομένα στους ανθρώπους που τα χρειάζονται, οι πλατφόρμες μας δίνουν τη δυνατότητα στους συνεργάτες μας να αναπτύξουν ναρκωτικά που σώζουν ζωές, να προβλέπουν διακοπές στην εφοδιαστική αλυσίδα, να εντοπίσουν τα εξαφανισμένα παιδιά και πολλά άλλα.

Ο Ρόλος

Είμαστε μια ομάδα μηχανικής λογισμικού που εφαρμόζει τεχνολογίες δεδομένων ανοιχτού κώδικα σε μερικά από τα δυσκολότερα και πιο σημαντικά προβλήματα του κόσμου. Κατασκευάζουμε την υποδομή επεξεργασίας δεδομένων που στηρίζει το Palantir Foundry, υποστηρίζοντας εφαρμογές που βοηθούν τα νοσοκομεία να φροντίζουν περισσότερους ασθενείς, βοηθούν τις κλινικές ομάδες να συντονίζουν έγκαιρες διαγνώσεις και διατηρούν τις βασικές προμήθειες που κινούνται μέσω παγκόσμιων διαταραχών.

Θα εργαστείτε βαθιά μέσα στα συστήματα που το καθιστούν δυνατό: πώς αναπαρίστανται οι υπολογισμοί, πώς βελτιστοποιούνται τα σχέδια ερωτημάτων, πώς εκτελούν οι χειριστές και πώς τα δεδομένα διαβάζονται και γράφονται αποτελεσματικά. Οικοδομούμε και επεκτείνουμε το Apache Spark, το Apache DataFusion και το Apache Iceberg, φέρνοντας προόδους σε μηχανές ανοιχτού κώδικα και μορφές πινάκων στα απαιτητικά περιβάλλοντα στα οποία λειτουργούν οι πελάτες μας. Η εργασία μας εξυπηρετεί πολλά προϊόντα και φόρτους εργασίας στο Foundry, συμπεριλαμβανομένων αγωγών χωρίς κώδικα, διαδραστικής ανάλυσης και επεξεργασίας που διατηρεί την Οντολογία ενημερωμένη.

Θα έχετε βελτιώσεις από το σχεδιασμό έως την παραγωγή, είτε αυτό σημαίνει ανάπτυξη κανόνα προγραμματισμού, επέκταση μιας εγγενούς μηχανής εκτέλεσης ή βελτίωση του τρόπου με τον οποίο σαρώνονται και ενημερώνονται οι μεγάλοι πίνακες. Η ορθότητα, η συμβατότητα και η προβλέψιμη απόδοση είναι βασικά σε ό,τι κατασκευάζουμε. Μια αλλαγή σε έναν κοινόχρηστο κινητήρα μπορεί να ωφελήσει τις εφαρμογές σε όλη την πλατφόρμα και τους ανθρώπους που βασίζονται σε αυτές.

Ελάτε μαζί μας εάν θέλετε να προωθήσετε τις δυνατότητες των σύγχρονων συστημάτων δεδομένων και να εφαρμόσετε αυτή τη δουλειά σε επακόλουθα προβλήματα.

Τεχνολογίες που χρησιμοποιούμε

• Java, Scala, Rust και Python

• Apache Spark, Apache DataFusion, Apache Comet και Velox για επεξεργασία δεδομένων και εκτέλεση ερωτημάτων

• Apache Iceberg για διαχείριση τραπεζιών και διαλειτουργικότητα καταλόγου

• Apache Arrow και Apache Parquet για επεξεργασία δεδομένων στη μνήμη και αποθήκευση στη στήλη

• Εργαλεία κατασκευής βιομηχανικών προτύπων, συμπεριλαμβανομένων των Gradle, Cargo και GitHub.

Βασικές Ευθύνες

• Σχεδιασμός και εφαρμογή δυνατοτήτων σχεδιασμού ερωτημάτων και βελτιστοποίησης που μετατρέπουν σύνθετους υπολογισμούς σε αποτελεσματικά σχέδια εκτέλεσης

• Επέκταση μηχανών εκτέλεσης με νέες δυνατότητες και βελτίωση τελεστών ερωτημάτων, παραλληλισμός, διαχείριση μνήμης και μετακίνηση δεδομένων

• Ανάπτυξη καταλόγου Foundry's Iceberg και ενσωματώσεις κινητήρων, συμπεριλαμβανομένων των μεταδεδομένων πίνακα, των συναλλαγών και της αποτελεσματικής ανάγνωσης και εγγραφής

• Δημιουργία κοινών σημασιολογικών μετασχηματισμών και διεπαφών εκτέλεσης για φόρτους εργασίας στα προϊόντα και τις υπηρεσίες πλατφόρμας του Foundry

• Βελτίωση της σταδιακής επεξεργασίας, ώστε οι αγωγοί να μπορούν να επαναχρησιμοποιούν προηγούμενα αποτελέσματα και να επεξεργάζονται νέα δεδομένα αποτελεσματικά, διατηρώντας παράλληλα την ορθότητα

• Αξιολόγηση και ενσωμάτωση προόδων σε συστήματα δεδομένων ανοιχτού κώδικα, επικύρωση της συμπεριφοράς και της απόδοσής τους έναντι του πραγματικού φόρτου εργασίας

• Διερεύνηση ζητημάτων ορθότητας και απόδοσης σε σχέση με τον σχεδιασμό, την εκτέλεση και την αποθήκευση, καθώς και τη δημιουργία δοκιμών και σημείων αναφοράς που αποτρέπουν την παλινδρόμηση

• Συνεργασία με ομάδες προϊόντων και πελάτες για τη μετατροπή των επιχειρησιακών αναγκών σε δυνατότητες κινητήρα που ενσωματώνονται με την ασφάλεια, τη διαχείριση δεδομένων και την κατασκευή υποδομής του Foundry

Τι Εκτιμούμε

• Ιδιοκτησιακή νοοτροπία και υψηλός πήχης για ορθότητα. Τα συστήματά μας υποστηρίζουν αποφάσεις και λειτουργίες από τις οποίες εξαρτώνται οι πελάτες.

• Περιέργεια για το πώς λειτουργούν τα συστήματα δεδομένων, από βελτιστοποιητές ερωτημάτων και τελεστές εκτέλεσης έως μορφές πινάκων και κατανεμημένη επεξεργασία.

• Ισχυρές δεξιότητες εντοπισμού σφαλμάτων και κίνητρο για παρακολούθηση ενός προβλήματος σε γλώσσες, υπηρεσίες και επίπεδα της στοίβας.

• Μια πρακτική προσέγγιση της απόδοσης, βασισμένη σε προφίλ, αντιπροσωπευτικό φόρτο εργασίας και μετρήσιμες βελτιώσεις.

• Ενδιαφέρον για την εφαρμογή βαθιάς μηχανικής συστημάτων σε προβλήματα του πραγματικού κόσμου, με ενσυναίσθηση για τους ανθρώπους που χρησιμοποιούν και εξαρτώνται από το λογισμικό μας.

• Απολαύστε τη δημιουργία ή την επέκταση συστημάτων όπως το Spark, το DataFusion, το Iceberg ή συγκρίσιμες τεχνολογίες και ενδιαφέρον για μάθηση σε όλη τη στοίβα.

• Δυνατότητα συνεργασίας μεταξύ ομάδων και αποτελεσματικής εργασίας με τα έργα ανοιχτού κώδικα στα οποία χτίζουμε. Η εμπειρία συνεισφοράς σε έργα ανοιχτού κώδικα εκτιμάται, αλλά δεν απαιτείται.

Τι Απαιτούμε

• 4+ χρόνια επαγγελματικής εμπειρίας στη μηχανική λογισμικού στην κατασκευή και λειτουργία συστημάτων παραγωγής.

• Μηχανολογικό υπόβαθρο στην Επιστήμη των Υπολογιστών, στα Μαθηματικά, στη Μηχανική Λογισμικού, στη Φυσική ή σε παρόμοιο πεδίο, ή αντίστοιχη πρακτική εμπειρία.

• Ισχυρές δεξιότητες κωδικοποίησης με αποδεδειγμένη επάρκεια σε μία ή περισσότερες γλώσσες όπως Java, Rust, Scala ή C++.

• Εμπειρία στην ανάπτυξη μηχανών βάσεων δεδομένων, κατανεμημένων συστημάτων επεξεργασίας δεδομένων, συστημάτων αποθήκευσης ή συγκρίσιμων υποδομών, με βάθος σε τομείς όπως ο σχεδιασμός ερωτημάτων, η εκτέλεση ή η βελτιστοποίηση απόδοσης.

• Ισχυρές βάσεις σε αλγόριθμους, δομές δεδομένων και συγχρονισμό, με εμπειρία στη διάγνωση προβλημάτων ορθότητας και απόδοσης σε πολύπλοκα συστήματα.

• Ισχυρές δεξιότητες γραπτής και προφορικής επικοινωνίας και ικανότητα αποτελεσματικής εργασίας μεταξύ ομάδων, ενσωμάτωσης ανατροφοδότησης και διατήρησης υψηλής ποιότητας.

Η ζωή στο Palantir

Θέλουμε κάθε Palantirian να επιτύχει τα καλύτερα αποτελέσματα, γι' αυτό τιμούμε τα δυνατά σημεία, τις δεξιότητες και τα ενδιαφέροντα των ατόμων, από την πρώτη σας συνέντευξη έως τη μακροπρόθεσμη ανάπτυξή σας, αντί να βασιζόμαστε σε παραδοσιακές σκάλες σταδιοδρομίας. Η προσοχή στις ανάγκες της κοινότητάς μας μάς δίνει τη δυνατότητα να βελτιστοποιήσουμε τις ευκαιρίες μας για ανάπτυξη και συμβάλλει στη διασφάλιση πολλών οδών επιτυχίας στο Palantir. Η προώθηση της υγείας και της ευημερίας σε όλους τους τομείς της ζωής των Παλαντηριωτών είναι μόνο ένας από τους τρόπους με τους οποίους επενδύουμε στην κοινότητά μας. Μάθετε περισσότερα στο Life at Palantir και σημειώστε ότι οι προσφορές μας ενδέχεται να διαφέρουν ανά περιοχή.…

Πηγή: Arbeitnow (https://www.arbeitnow.co.uk/jobs/companies/palantir/software-engineer-query-engines-london-united-kingdom-116121)