Εργασία
Από ροή συνεργάτη
Senior Data Engineer
Τιμή κατόπιν αιτήματος
Λεπτομέρειες
- Τύπος απασχόλησης
- Πλήρης απασχόληση
- Απομακρυσμένα
- Ναι
- Εταιρεία
- Clear Street
Περιγραφή
Μεταφρασμένο αυτόματα από English. Το πρωτότυπο κείμενο είναι το επίσημο. Μηχανική μετάφραση — ετοιμάζεται μια πιο ακριβής έκδοση.
Περιγραφή Εργασίας
Η Clear Street εκσυγχρονίζει το οικοσύστημα μεσιτείας. Η Clear Street, η οποία ιδρύθηκε το 2018, είναι μια διαφοροποιημένη εταιρεία χρηματοοικονομικών υπηρεσιών που αντικαθιστά την παλαιού τύπου υποδομή που χρησιμοποιείται σε όλες τις κεφαλαιαγορές.
Ξεκινήσαμε από το μηδέν, δημιουργώντας ένα πλήρως εγγενές σύστημα εκκαθάρισης και φύλαξης σε cloud, σχεδιασμένο για τη σημερινή πολύπλοκη, παγκόσμια αγορά. Η πλατφόρμα μας είναι πλήρως ενσωματωμένη με κεντρικά κέντρα συμψηφισμού και χρηματιστήρια για την υποστήριξη δισεκατομμυρίων σε όγκο συναλλαγών την ημέρα. Αγωνιστήκαμε για τις αφαιρέσεις μοντέλων δεδομένων μας, δημιουργήσαμε οριζόντια επεκτασιμότητα και δημιουργήσαμε στοχαστικά API. Όλα αυτά για να μπορούμε να παρέχουμε την καλύτερη εμπειρία στην κατηγορία των πελατών μας.
Συνδυάζοντας ταλέντο προϊόντων υψηλής εξειδίκευσης και μηχανικής με έμπειρους χρηματοοικονομικούς επαγγελματίες, χτίζουμε τα απαραίτητα για να ανταγωνιστούμε στις σημερινές αγορές με γρήγορους ρυθμούς.
Η Ομάδα:
Η αποστολή της ομάδας Clear Street Active είναι να παρέχει την καλύτερη δυνατή εκτέλεση για κάθε κατηγορία περιουσιακών στοιχείων σε κάθε αγορά. Η Active χτίζει μια νέα, υπερσύγχρονη πλατφόρμα συναλλαγών που βασίζεται στο cloud, που παρέχει στους επενδυτές υψηλών επιδόσεων πρόσβαση σε χώρους ρευστότητας σε πολλές κατηγορίες περιουσιακών στοιχείων, γραφήματα αιχμής και εξελιγμένο χειρισμό παραγγελιών.
Η ομάδα Active Data κατέχει το πώς η επιχείρηση κατανοεί τον εαυτό της και όλο και περισσότερο πώς αποφασίζει τι θα κάνει στη συνέχεια. Τα δεδομένα ρέουν στην αποθήκη μας από πλατφόρμες διαφημίσεων, αναλυτικά στοιχεία προϊόντων, CRM και συστήματα υποστήριξης και τα συστήματα της μεσιτείας. Επιστρέφει στις πλατφόρμες που στέλνουν μηνύματα στους πελάτες μας, υποβάλλουν προσφορές για νέες και διαχειρίζονται τις σχέσεις μαζί τους. Κάθε αναπήδηση είναι ένα μέρος όπου τα δεδομένα μπορούν να αντιγραφούν, να καθυστερήσουν ή να επαναπροσδιοριστούν αθόρυβα και ένα σφάλμα που φεύγει από την αποθήκη δεν παραμένει πρόβλημα αναφοράς. Ξοδεύει τον προϋπολογισμό της διαφήμισης σε λάθος άτομα, στέλνει σε έναν πελάτη λάθος μήνυμα ή αναφέρει λάθος έναν ρυθμιζόμενο αριθμό. Η μετακίνηση δεδομένων είναι στοιχήματα πίνακα. Η διατήρηση της αλήθειας καθώς ταξιδεύει είναι το πρόβλημα που έχει αυτός ο ρόλος. Είναι μια μικρή ομάδα με μεγάλη επιφάνεια και την κλιμακώνουμε καθώς η πλατφόρμα μεγαλώνει σε δεκάδες χιλιάδες λογαριασμούς.
Ο Ρόλος:
Τρεις τομείς της επιχείρησης εξαρτώνται από αυτόν τον ρόλο και θα έχετε τα δεδομένα για όλους:
• Ανάπτυξη. Εισαγάγετε δαπάνες, κλικ και μετατροπές από κάθε συνδρομητικό, συνδεδεμένο και οργανικό κανάλι, εναρμονίστε τα με τα δικά μας αρχεία και στείλτε τα αποτελέσματα των χρηματοδοτούμενων λογαριασμών πίσω στις πλατφόρμες διαφημίσεων, επομένως η υποβολή προσφορών βελτιστοποιείται για πελάτες που πραγματικά χρηματοδοτούν και εμπορεύονται.
• Κύκλος ζωής και το ταξίδι του χρήστη. Επιλύστε την ταυτότητα κάθε πελάτη από μια πρώτη ανώνυμη επίσκεψη μέσω εγγραφής, KYC, χρηματοδότησης και πρώτης συναλλαγής και διατηρήστε τα μηνύματα κύκλου ζωής, το CRM και τα συστήματα υποστήριξης σε συνάρτηση με αυτό που πραγματικά συνέβη.
• Στοιχεία μεσιτείας. Μοντέλο άνοιγμα λογαριασμού, KYC, χρηματοδότηση και μεταφορές και συναλλαγές από τα συστήματα της πλατφόρμας, με την ακρίβεια που χρειάζεται ένας ρυθμισμένος μεσίτης-διαπραγματευτής.
Και στα τρία, θα:
• Διαθέτετε ακεραιότητα δεδομένων και προς τις δύο κατευθύνσεις. Αποδείξτε ότι κάθε ροή έφτασε ολοκληρωμένη και έγκαιρα, και ότι κάθε εξερχόμενος συγχρονισμός προσγειώθηκε όπως έπρεπε. Μια διπλότυπη μετατροπή διογκώνει τη διαφημιστική δαπάνη, ένα μπαγιάτικο χαρακτηριστικό στέλνει λάθος μήνυμα και μια κατεστραμμένη σύνδεση δηλώνει λανθασμένα τους χρηματοδοτούμενους λογαριασμούς στην ηγεσία.
• Κατέχετε τα επίπεδα αποθήκης στο dbt: ακατέργαστα μοντέλα προσγείωσης, σκηνοθετημένα και επίλυσης ταυτότητας μοντέλα και τα επιμελημένα μοντέλα από τα οποία διαβάζουν οι αναλυτές, οι επιστήμονες δεδομένων, οι πίνακες ελέγχου και οι εσωτερικοί πράκτορες τεχνητής νοημοσύνης. Κάθε μοντέλο έχει δηλωμένο κόκκο και δοκιμές.
• Συνάψτε συμβάσεις δεδομένων με τη μηχανική προϊόντων και με τους ιδιοκτήτες των πλατφορμών από τις οποίες βασιζόμαστε, έτσι ώστε μια αλλαγή ανάντη να καταγράφεται στα όρια αντί να μηδενίζεται σιωπηλά ένα πεδίο τριών μοντέλων κατάντη. Θα τα ορίσετε αντί να τα κληρονομήσετε.
• Ίδια διακυβέρνηση: πρόσβαση βάσει ρόλων, απόκρυψη PII, διατήρηση και δυνατότητα ελέγχου, συμπεριλαμβανομένων εργαλείων αυτοεξυπηρέτησης που δεν παρακάμπτουν τα δικαιώματα.
• Επιλέξτε σκόπιμα μεταξύ δέσμης, αλλαγής-καταγραφής δεδομένων και ροής, με βάση το τι πραγματικά χρειάζεται κάθε καταναλωτής.
• Συνεργαστείτε με το Μάρκετινγκ, τα Προϊόντα και τις Λειτουργίες για να συλλάβετε τα γεγονότα και τους τομείς που χρειάζεται η επιχείρηση. Αυτός ο ρόλος μετριέται με βάση το αν οι αριθμοί της επιχείρησης είναι σωστοί και έγκαιρα, όχι από τους αγωγούς που παραδόθηκαν.
Τι εκτιμούμε:
• Οι μηχανικοί μέτρησαν κατά πόσο οι αριθμοί είναι σωστοί, όχι με το τι απεστάλη
• Πολύ υψηλή αντιπροσωπεία. Μεγάλο μέρος της δουλειάς εδώ ξεκινά πριν ξεκαθαρίσει η απαίτηση: η πηγή δεν έχει τεκμηρίωση, το πεδίο που χρειάζεστε δεν καταγράφηκε ποτέ και η ομάδα που το κατέχει είναι απασχολημένη με την αποστολή. Χρειαζόμαστε κάποιον που κυνηγάει μια εξάρτηση σε μια άλλη ομάδα και στέλνει κάτι αξιόπιστο χωρίς προδιαγραφές.
• Σκεπτικισμός σχετικά με τα δεδομένα, συμπεριλαμβανομένων των δικών σας αγωγών. Ελέγξτε τα κόκκους, τις ενώσεις και την πληρότητα προτού εμπιστευτείτε έναν αριθμό.
• Προτίμηση για βαρετά, παρατηρήσιμα συστήματα έναντι των έξυπνων
• Σαφής επικοινωνία με μη μηχανικούς: μπορεί να εξηγήσει σε έναν έμπορο γιατί μετακινήθηκε ο χθεσινός αριθμός και να διαπραγματευτεί μια αλλαγή σχήματος με μια ομάδα προϊόντων το ίδιο απόγευμα
• Πραγματισμός: στείλτε την έκδοση που λειτουργεί τώρα και βελτιώστε τη σκόπιμα αντί να περιμένετε την ιδανική
Απαιτήσεις:
• Τουλάχιστον πέντε χρόνια στη μηχανική δεδομένων ή στη μηχανική ανάλυσης, με αγωγούς παραγωγής για τους οποίους ήσασταν έτοιμοι όταν έσπασαν
• Βαθιά επάρκεια σε SQL και Python και εμπειρία παραγωγής με dbt σε πολυεπίπεδη αποθήκη: ακατέργαστα, σταδιακά και επιμελημένα μοντέλα με δηλωμένο κόκκο, δοκιμές και αυξητικές κατασκευές
• Πρακτική εμπειρία μεταφοράς δεδομένων τρίτων και εφαρμογών μέσω διαχειριζόμενων εφαρμογών σύνδεσης, διοχετεύσεων συμβάντων και λήψης δεδομένων αλλαγών, και χειρισμός του τι πάει στραβά με το καθένα: μετατόπιση σχήματος, επανασυγχρονισμοί, διπλότυπα και καθυστερημένες ή ελλιπείς εγγραφές
• Απολαύστε την εκ νέου αποστολή δεδομένων, μέσω αντίστροφης ροής ETL, κοινού ή ροών μετατροπών, και την απόκτηση της ορθότητάς τους μετά την έξοδο από την αποθήκη
• Ποιότητα δεδομένων στην πράξη: συμφωνία με συστήματα παρακολούθησης εγγραφής, φρεσκάδας και όγκου και η διόρθωση που εμποδίζει την επανάληψη ενός περιστατικού…
Πηγή: Jobspresso (https://jobspresso.co/job/senior-data-engineer-clear-street/)
Η Clear Street εκσυγχρονίζει το οικοσύστημα μεσιτείας. Η Clear Street, η οποία ιδρύθηκε το 2018, είναι μια διαφοροποιημένη εταιρεία χρηματοοικονομικών υπηρεσιών που αντικαθιστά την παλαιού τύπου υποδομή που χρησιμοποιείται σε όλες τις κεφαλαιαγορές.
Ξεκινήσαμε από το μηδέν, δημιουργώντας ένα πλήρως εγγενές σύστημα εκκαθάρισης και φύλαξης σε cloud, σχεδιασμένο για τη σημερινή πολύπλοκη, παγκόσμια αγορά. Η πλατφόρμα μας είναι πλήρως ενσωματωμένη με κεντρικά κέντρα συμψηφισμού και χρηματιστήρια για την υποστήριξη δισεκατομμυρίων σε όγκο συναλλαγών την ημέρα. Αγωνιστήκαμε για τις αφαιρέσεις μοντέλων δεδομένων μας, δημιουργήσαμε οριζόντια επεκτασιμότητα και δημιουργήσαμε στοχαστικά API. Όλα αυτά για να μπορούμε να παρέχουμε την καλύτερη εμπειρία στην κατηγορία των πελατών μας.
Συνδυάζοντας ταλέντο προϊόντων υψηλής εξειδίκευσης και μηχανικής με έμπειρους χρηματοοικονομικούς επαγγελματίες, χτίζουμε τα απαραίτητα για να ανταγωνιστούμε στις σημερινές αγορές με γρήγορους ρυθμούς.
Η Ομάδα:
Η αποστολή της ομάδας Clear Street Active είναι να παρέχει την καλύτερη δυνατή εκτέλεση για κάθε κατηγορία περιουσιακών στοιχείων σε κάθε αγορά. Η Active χτίζει μια νέα, υπερσύγχρονη πλατφόρμα συναλλαγών που βασίζεται στο cloud, που παρέχει στους επενδυτές υψηλών επιδόσεων πρόσβαση σε χώρους ρευστότητας σε πολλές κατηγορίες περιουσιακών στοιχείων, γραφήματα αιχμής και εξελιγμένο χειρισμό παραγγελιών.
Η ομάδα Active Data κατέχει το πώς η επιχείρηση κατανοεί τον εαυτό της και όλο και περισσότερο πώς αποφασίζει τι θα κάνει στη συνέχεια. Τα δεδομένα ρέουν στην αποθήκη μας από πλατφόρμες διαφημίσεων, αναλυτικά στοιχεία προϊόντων, CRM και συστήματα υποστήριξης και τα συστήματα της μεσιτείας. Επιστρέφει στις πλατφόρμες που στέλνουν μηνύματα στους πελάτες μας, υποβάλλουν προσφορές για νέες και διαχειρίζονται τις σχέσεις μαζί τους. Κάθε αναπήδηση είναι ένα μέρος όπου τα δεδομένα μπορούν να αντιγραφούν, να καθυστερήσουν ή να επαναπροσδιοριστούν αθόρυβα και ένα σφάλμα που φεύγει από την αποθήκη δεν παραμένει πρόβλημα αναφοράς. Ξοδεύει τον προϋπολογισμό της διαφήμισης σε λάθος άτομα, στέλνει σε έναν πελάτη λάθος μήνυμα ή αναφέρει λάθος έναν ρυθμιζόμενο αριθμό. Η μετακίνηση δεδομένων είναι στοιχήματα πίνακα. Η διατήρηση της αλήθειας καθώς ταξιδεύει είναι το πρόβλημα που έχει αυτός ο ρόλος. Είναι μια μικρή ομάδα με μεγάλη επιφάνεια και την κλιμακώνουμε καθώς η πλατφόρμα μεγαλώνει σε δεκάδες χιλιάδες λογαριασμούς.
Ο Ρόλος:
Τρεις τομείς της επιχείρησης εξαρτώνται από αυτόν τον ρόλο και θα έχετε τα δεδομένα για όλους:
• Ανάπτυξη. Εισαγάγετε δαπάνες, κλικ και μετατροπές από κάθε συνδρομητικό, συνδεδεμένο και οργανικό κανάλι, εναρμονίστε τα με τα δικά μας αρχεία και στείλτε τα αποτελέσματα των χρηματοδοτούμενων λογαριασμών πίσω στις πλατφόρμες διαφημίσεων, επομένως η υποβολή προσφορών βελτιστοποιείται για πελάτες που πραγματικά χρηματοδοτούν και εμπορεύονται.
• Κύκλος ζωής και το ταξίδι του χρήστη. Επιλύστε την ταυτότητα κάθε πελάτη από μια πρώτη ανώνυμη επίσκεψη μέσω εγγραφής, KYC, χρηματοδότησης και πρώτης συναλλαγής και διατηρήστε τα μηνύματα κύκλου ζωής, το CRM και τα συστήματα υποστήριξης σε συνάρτηση με αυτό που πραγματικά συνέβη.
• Στοιχεία μεσιτείας. Μοντέλο άνοιγμα λογαριασμού, KYC, χρηματοδότηση και μεταφορές και συναλλαγές από τα συστήματα της πλατφόρμας, με την ακρίβεια που χρειάζεται ένας ρυθμισμένος μεσίτης-διαπραγματευτής.
Και στα τρία, θα:
• Διαθέτετε ακεραιότητα δεδομένων και προς τις δύο κατευθύνσεις. Αποδείξτε ότι κάθε ροή έφτασε ολοκληρωμένη και έγκαιρα, και ότι κάθε εξερχόμενος συγχρονισμός προσγειώθηκε όπως έπρεπε. Μια διπλότυπη μετατροπή διογκώνει τη διαφημιστική δαπάνη, ένα μπαγιάτικο χαρακτηριστικό στέλνει λάθος μήνυμα και μια κατεστραμμένη σύνδεση δηλώνει λανθασμένα τους χρηματοδοτούμενους λογαριασμούς στην ηγεσία.
• Κατέχετε τα επίπεδα αποθήκης στο dbt: ακατέργαστα μοντέλα προσγείωσης, σκηνοθετημένα και επίλυσης ταυτότητας μοντέλα και τα επιμελημένα μοντέλα από τα οποία διαβάζουν οι αναλυτές, οι επιστήμονες δεδομένων, οι πίνακες ελέγχου και οι εσωτερικοί πράκτορες τεχνητής νοημοσύνης. Κάθε μοντέλο έχει δηλωμένο κόκκο και δοκιμές.
• Συνάψτε συμβάσεις δεδομένων με τη μηχανική προϊόντων και με τους ιδιοκτήτες των πλατφορμών από τις οποίες βασιζόμαστε, έτσι ώστε μια αλλαγή ανάντη να καταγράφεται στα όρια αντί να μηδενίζεται σιωπηλά ένα πεδίο τριών μοντέλων κατάντη. Θα τα ορίσετε αντί να τα κληρονομήσετε.
• Ίδια διακυβέρνηση: πρόσβαση βάσει ρόλων, απόκρυψη PII, διατήρηση και δυνατότητα ελέγχου, συμπεριλαμβανομένων εργαλείων αυτοεξυπηρέτησης που δεν παρακάμπτουν τα δικαιώματα.
• Επιλέξτε σκόπιμα μεταξύ δέσμης, αλλαγής-καταγραφής δεδομένων και ροής, με βάση το τι πραγματικά χρειάζεται κάθε καταναλωτής.
• Συνεργαστείτε με το Μάρκετινγκ, τα Προϊόντα και τις Λειτουργίες για να συλλάβετε τα γεγονότα και τους τομείς που χρειάζεται η επιχείρηση. Αυτός ο ρόλος μετριέται με βάση το αν οι αριθμοί της επιχείρησης είναι σωστοί και έγκαιρα, όχι από τους αγωγούς που παραδόθηκαν.
Τι εκτιμούμε:
• Οι μηχανικοί μέτρησαν κατά πόσο οι αριθμοί είναι σωστοί, όχι με το τι απεστάλη
• Πολύ υψηλή αντιπροσωπεία. Μεγάλο μέρος της δουλειάς εδώ ξεκινά πριν ξεκαθαρίσει η απαίτηση: η πηγή δεν έχει τεκμηρίωση, το πεδίο που χρειάζεστε δεν καταγράφηκε ποτέ και η ομάδα που το κατέχει είναι απασχολημένη με την αποστολή. Χρειαζόμαστε κάποιον που κυνηγάει μια εξάρτηση σε μια άλλη ομάδα και στέλνει κάτι αξιόπιστο χωρίς προδιαγραφές.
• Σκεπτικισμός σχετικά με τα δεδομένα, συμπεριλαμβανομένων των δικών σας αγωγών. Ελέγξτε τα κόκκους, τις ενώσεις και την πληρότητα προτού εμπιστευτείτε έναν αριθμό.
• Προτίμηση για βαρετά, παρατηρήσιμα συστήματα έναντι των έξυπνων
• Σαφής επικοινωνία με μη μηχανικούς: μπορεί να εξηγήσει σε έναν έμπορο γιατί μετακινήθηκε ο χθεσινός αριθμός και να διαπραγματευτεί μια αλλαγή σχήματος με μια ομάδα προϊόντων το ίδιο απόγευμα
• Πραγματισμός: στείλτε την έκδοση που λειτουργεί τώρα και βελτιώστε τη σκόπιμα αντί να περιμένετε την ιδανική
Απαιτήσεις:
• Τουλάχιστον πέντε χρόνια στη μηχανική δεδομένων ή στη μηχανική ανάλυσης, με αγωγούς παραγωγής για τους οποίους ήσασταν έτοιμοι όταν έσπασαν
• Βαθιά επάρκεια σε SQL και Python και εμπειρία παραγωγής με dbt σε πολυεπίπεδη αποθήκη: ακατέργαστα, σταδιακά και επιμελημένα μοντέλα με δηλωμένο κόκκο, δοκιμές και αυξητικές κατασκευές
• Πρακτική εμπειρία μεταφοράς δεδομένων τρίτων και εφαρμογών μέσω διαχειριζόμενων εφαρμογών σύνδεσης, διοχετεύσεων συμβάντων και λήψης δεδομένων αλλαγών, και χειρισμός του τι πάει στραβά με το καθένα: μετατόπιση σχήματος, επανασυγχρονισμοί, διπλότυπα και καθυστερημένες ή ελλιπείς εγγραφές
• Απολαύστε την εκ νέου αποστολή δεδομένων, μέσω αντίστροφης ροής ETL, κοινού ή ροών μετατροπών, και την απόκτηση της ορθότητάς τους μετά την έξοδο από την αποθήκη
• Ποιότητα δεδομένων στην πράξη: συμφωνία με συστήματα παρακολούθησης εγγραφής, φρεσκάδας και όγκου και η διόρθωση που εμποδίζει την επανάληψη ενός περιστατικού…
Πηγή: Jobspresso (https://jobspresso.co/job/senior-data-engineer-clear-street/)
Αυτή η αγγελία προέρχεται από ροή συνεργάτη. Εφαρμόστε την στη ιστοσελίδα προέλευσης.
Πηγή: Clear Street
Καταχώριση από Clear Street.