Junior Data Engineer

Junior Data Engineer
Τίτλος εργασίας: Junior Data Engineer
Είδος Εργασίας: Πλήρης απασχόληση
Διευθέτηση εργασίας: Απομακρυσμένη / Υβριδική / Επί τόπου
Επίπεδο εμπειρίας: Εισαγωγικό επίπεδο έως πρώιμη σταδιοδρομία (0–3 έτη)
Εύρος μισθού: $75.000–$115.000 ετησίως
Θέσεις εργασίας: Seattle, WA | Ώστιν, Τέξας | Ντάλας, Τέξας | Νέα Υόρκη, Νέα Υόρκη | Ατλάντα, GA
Απαίτηση τοποθεσίας υποψηφίου: Πρέπει να διαμένει επί του παρόντος στις Ηνωμένες Πολιτείες.
Σχετικά με τον Ρόλο
Αναζητούμε έναν Junior Data Engineer με κίνητρα και προσανατολισμό στις λεπτομέρειες για να συμμετάσχει στην ομάδα μηχανικών δεδομένων μας. Ο ιδανικός υποψήφιος θα έχει θεμελιώδη κατανόηση των διεργασιών Python, SQL, ETL και Apache Spark, με έντονο ενδιαφέρον για τη δημιουργία αξιόπιστων, κλιμακούμενων αγωγών δεδομένων.
Σε αυτόν τον ρόλο, θα βοηθήσετε στην ανάπτυξη και διατήρηση ροών εργασιών απορρόφησης δεδομένων, θα μετατρέψετε τα ανεπεξέργαστα δεδομένα σε χρησιμοποιήσιμα σύνολα δεδομένων και θα υποστηρίξετε πρωτοβουλίες ενοποίησης δεδομένων. Θα συνεργαστείτε με μηχανικούς δεδομένων, αναλυτές δεδομένων, επιστήμονες δεδομένων και άλλες τεχνικές ομάδες για να διασφαλίσετε ότι τα δεδομένα είναι ακριβή, προσβάσιμα και έτοιμα για αναφορά και ανάλυση.
Αυτή η ευκαιρία είναι ιδανική για πρόσφατους πτυχιούχους και επαγγελματίες πρώιμης σταδιοδρομίας που θέλουν να αναπτύξουν τις δεξιότητές τους στη μηχανική δεδομένων, την επεξεργασία μεγάλων δεδομένων και τις σύγχρονες πλατφόρμες δεδομένων.
Απαίτηση επιλεξιμότητας: Οι υποψήφιοι πρέπει να διαμένουν επί του παρόντος στις Ηνωμένες Πολιτείες. Η εξ αποστάσεως εργασία είναι διαθέσιμη μόνο όπου επιτρέπεται από τις απαιτήσεις απασχόλησης και μισθοδοσίας του εργοδότη.
Βασικές Ευθύνες

• Ανάπτυξη, δοκιμή και συντήρηση αγωγών δεδομένων χρησιμοποιώντας Python και SQL.

• Βοηθά στη δημιουργία και διαχείριση ροών εργασιών ETL (Extract, Transform, Load).

• Εξαγωγή δεδομένων από βάσεις δεδομένων, API, αρχεία και άλλα συστήματα προέλευσης.

• Καθαρισμός, μετατροπή, επικύρωση και φόρτωση δεδομένων σε συστήματα προορισμού.

• Χρησιμοποιήστε το Apache Spark για κατανεμημένη επεξεργασία δεδομένων και μετασχηματισμούς δεδομένων μεγάλης κλίμακας.

• Γράψτε αποτελεσματικά ερωτήματα SQL για ανάκτηση, ένωση, συγκέντρωση και χειρισμό συνόλων δεδομένων.

• Παρακολουθήστε τις σωληνώσεις δεδομένων και αντιμετωπίστε βλάβες, ζητήματα απόδοσης και προβλήματα ποιότητας δεδομένων.

• Υποστήριξη της ανάπτυξης ροών εργασιών επεξεργασίας κατά παρτίδες και, όπου ισχύει, ροής δεδομένων.

• Εφαρμόστε ελέγχους επικύρωσης δεδομένων για τη διατήρηση της ακρίβειας και της συνέπειας των δεδομένων.

• Συνεργαστείτε με ομάδες ανάλυσης και επιχειρηματικής ευφυΐας για την υποστήριξη των αναφορών και των αναλυτικών απαιτήσεων.

• Λογική αγωγών εγγράφων, πηγές δεδομένων, μετασχηματισμοί και τεχνικές διαδικασίες.

• Ακολουθήστε τα πρότυπα κωδικοποίησης, τις πρακτικές ελέγχου έκδοσης και τις οδηγίες ασφάλειας δεδομένων.

• Συμμετέχετε σε αναθεωρήσεις κώδικα, δοκιμές και πρωτοβουλίες συνεχούς βελτίωσης.

Απαιτούμενα Προσόντα

• Πτυχίο Πληροφορικής, Πληροφορικής, Μηχανικής Δεδομένων, Μηχανικών Λογισμικού ή συναφούς κλάδου ή αντίστοιχη πρακτική εμπειρία.

• 0–3 χρόνια εμπειρίας στη μηχανική δεδομένων, στην ανάπτυξη λογισμικού, στην ανάλυση δεδομένων ή σε σχετικό τεχνικό τομέα.

• Εργασιακή γνώση Python για scripting, επεξεργασία δεδομένων και αυτοματισμό.

• Επάρκεια στην SQL , συμπεριλαμβανομένων των συνδέσεων, των συναθροίσεων, των υποερωτημάτων και της χειραγώγησης δεδομένων.

• Κατανόηση των εννοιών ETL/ELT και ανάπτυξη αγωγών δεδομένων.

• Βασική εξοικείωση με το Apache Spark και την κατανεμημένη επεξεργασία δεδομένων.

• Γνώση σχεσιακών βάσεων δεδομένων και βασικών αρχών μοντελοποίησης δεδομένων.

• Κατανόηση των τεχνικών καθαρισμού, επικύρωσης και μετασχηματισμού δεδομένων.

• Εξοικείωση με το Git ή άλλα εργαλεία ελέγχου έκδοσης.

• Ισχυρή αναλυτική σκέψη, επίλυση προβλημάτων και δεξιότητες εντοπισμού σφαλμάτων.

• Καλές δεξιότητες γραπτής και προφορικής επικοινωνίας.

• Πρέπει να διαμένουν αυτήν τη στιγμή στις Ηνωμένες Πολιτείες.

Προτιμώμενα Προσόντα

• Έκθεση στο PySpark για μετασχηματισμούς δεδομένων μεγάλης κλίμακας.

• Εξοικείωση με πλατφόρμες cloud όπως AWS, Microsoft Azure ή Google Cloud Platform.

• Βασικές γνώσεις αποθηκών δεδομένων όπως το Snowflake, το Amazon Redshift ή το Google BigQuery.

• Κατανόηση των αρχιτεκτονικών λιμνών και λιμνοκατοικιών δεδομένων.

• Εξοικείωση με εργαλεία ενορχήστρωσης ροής εργασιών όπως το Apache Airflow.

• Έκθεση σε Docker, CI/CD ή αυτοματοποιημένες δοκιμές.

• Κατανόηση της επεξεργασίας κατά παρτίδες, των αυξητικών φορτίων και του προγραμματισμού αγωγών δεδομένων.

• Εξοικείωση με τη μοντελοποίηση διαστάσεων και τον σχεδιασμό αποθήκης δεδομένων.

• Ακαδημαϊκά έργα, πρακτικής άσκησης ή προσωπικά έργα που περιλαμβάνουν αγωγούς δεδομένων ή τεχνολογίες μεγάλων δεδομένων.

Τεχνικές Δεξιότητες
Κατηγορία δεξιοτήτων Απαιτούμενη / Προτιμώμενες δεξιότητες Προγραμματισμός Python Ερώτημα βάσης δεδομένωνSQLD ενσωμάτωση ETL/ELT αγωγοί Big Data ProcessingApache Spark, βασικές PySparkDatabasesΣχεσιακές έννοιες βάσης δεδομένωνVersion ControlGit, GitHub ή GitLabCloud PlatformsAWS ή GoogleDloure προτιμώμενα WarehousingSnowflake, Redshift ή BigQuery — preferredWorkflow OrchestrationApache Airflow — preferredCore CompetenciesDebugging, ποιότητα δεδομένων, επίλυση προβλημάτων
Μισθός και παροχές

• Ετήσιος βασικός μισθός: 75.000$–115.000$ USD.

• Πλήρης απασχόληση.

• Απομακρυσμένες, υβριδικές ή επιτόπιες ρυθμίσεις εργασίας, ανάλογα με τη θέση.

• Τα πιθανά οφέλη μπορεί να περιλαμβάνουν ασφάλιση υγείας, συνταξιοδοτικά προγράμματα, άδεια μετ' αποδοχών και ευκαιρίες επαγγελματικής εξέλιξης, ανάλογα με τον εργοδότη.

• Ευκαιρίες για ανάπτυξη δεξιοτήτων στη μηχανική δεδομένων cloud, στους κατανεμημένους υπολογιστές και στην κλιμακούμενη αρχιτεκτονική δεδομένων.

Το εύρος μισθών είναι ενδεικτικό και όχι επαληθευμένη προσφορά. Η πραγματική αποζημίωση μπορεί να διαφέρει ανάλογα με τον εργοδότη, την εμπειρία, την τοποθεσία και τις απαιτήσεις ρόλου.
Τοποθεσίες εργασίας
Ευκαιρίες μπορεί να είναι διαθέσιμες στις ακόλουθες αγορές των ΗΠΑ:

• Σιάτλ, Ουάσιγκτον

• Ώστιν, Τέξας
• Ντάλας, Τέξας

• Νέα Υόρκη, Νέα Υόρκη

• Ατλάντα, Τζόρτζια

Απαιτήσεις εξ αποστάσεως εργασίας

• Οι υποψήφιοι πρέπει να διαμένουν επί του παρόντος στις Ηνωμένες Πολιτείες.

• Οι υποψήφιοι πρέπει να πληρούν τις προϋποθέσεις για εργασία στις Ηνωμένες Πολιτείες σύμφωνα με τις ισχύουσες απαιτήσεις πρόσληψης του εργοδότη.

• Η εξ αποστάσεως απασχόληση υπόκειται σε συγκεκριμένες κρατικές πολιτικές καταλληλότητας μισθοδοσίας και εταιρικών πολιτικών.

• Ορισμένες θέσεις ενδέχεται να απαιτούν περιστασιακή παρουσία στο γραφείο ή συνεργασία κατά τις εργάσιμες ώρες των ΗΠΑ.…

Πηγή: Himalayas (https://himalayas.app/companies/edgeq-technologies-private-limited/jobs/junior-data-engineer?utm_source=api)