Σχετικά με τις θέσεις Data Engineer
Ο Data Engineer χτίζει και συντηρεί τα pipelines, τα μοντέλα και τις πλατφόρμες που μεταφέρουν και προετοιμάζουν δεδομένα για ανάλυση και εφαρμογές.
Απαιτούμενες Δεξιότητες
Βασικές δεξιότητες για θέσεις Data Engineer
Εμπειρία στη γλώσσα δομημένων ερωτημάτων για τη διαχείριση και ερώτηση σχεσιακών βάσεων δεδομένων.
Εμπειρία στις διαδικασίες Εξαγωγής, Μετασχηματισμού και Φόρτωσης δεδομένων για ολοκλήρωση και επεξεργασία δεδομένων.
Η επιστήμη του σχεδιασμού και της κατασκευής συστημάτων για τη συλλογή, αποθήκευση και ανάλυση δεδομένων με αποδοτικό τρόπο.
Ικανότητα προγραμματισμού στη γλώσσα Python για ανάπτυξη λογισμικού, αυτοματοποίηση και ανάλυση δεδομένων.
Γνώση πολιτικών και πλαισίων για τη διαχείριση της ποιότητας, ασφάλειας και συμμόρφωσης των δεδομένων σε έναν οργανισμό.
Εμπειρία με τις κύριες πλατφόρμες υπηρεσιών cloud όπως Microsoft Azure, Amazon Web Services (AWS) και Google Cloud Platform (GCP) για ανάπτυξη και διαχείριση εφαρμογών.
Ικανότητα ανάπτυξης αλγορίθμων και στατιστικών μοντέλων που επιτρέπουν στους υπολογιστές να μαθαίνουν από δεδομένα και να κάνουν προβλέψεις.
Η διαδικασία δημιουργίας δομών δεδομένων για την αποτελεσματική αναπαράσταση και οργάνωση δεδομένων σε βάσεις δεδομένων ή πληροφοριακά συστήματα.
Εξειδίκευση στο SQL Server Integration Services για διαδικασίες εξαγωγής, μετασχηματισμού και φόρτωσης δεδομένων (ETL).
Επαγγελματική γνώση του PySpark, του Python API για το Apache Spark για επεξεργασία και ανάλυση μεγάλων δεδομένων.
Επιπλέον Δεξιότητες & Χαρακτηριστικά
Επιθυμητές δεξιότητες και ήπιες δεξιότητες που μπορούν να σε ξεχωρίσουν
Εμπειρία στο λειτουργικό σύστημα Linux, συμπεριλαμβανομένης της χρήσης γραμμής εντολών και διαχείρισης συστήματος.
Κατανόηση και ικανότητα σχεδίασης και χρήσης RESTful Διασυνδέσεων Προγραμματισμού Εφαρμογών για διαδικτυακές υπηρεσίες.
Η επιστημονική προσέγγιση για εξαγωγή γνώσης και συμπερασμάτων από δομημένα και αδόμητα δεδομένα, χρησιμοποιώντας μεθόδους και αλγορίθμους.
Εμπειρία με το Databricks, μία πλατφόρμα ανάλυσης για μεγάλα δεδομένα και τεχνητή νοημοσύνη βασισμένη στο Apache Spark.
Ένα ανοιχτού κώδικα στρώμα αποθήκευσης που προσφέρει ACID συναλλαγές σε Apache Spark και μεγάλα δεδομένα.
Εμπειρία με το Apache Spark για επεξεργασία και ανάλυση δεδομένων μεγάλης κλίμακας.
Ικανότητα στις τεχνολογίες κοντέινερ Docker και Kubernetes για ανάπτυξη και διαχείριση εφαρμογών.
Το Apache Kafka είναι μια κατανεμημένη πλατφόρμα ροής γεγονότων που χρησιμοποιείται για τη δημιουργία εφαρμογών ροής δεδομένων σε πραγματικό χρόνο.
Γνώση και εφαρμογή αλγορίθμων και συστημάτων που επιτρέπουν στους υπολογιστές να μαθαίνουν και να εκτελούν έξυπνα καθήκοντα.
Ανοιχτού κώδικα πλατφόρμα για τη διαχείριση του κύκλου ζωής μηχανικής μάθησης, περιλαμβάνοντας πειραματισμούς, αναπαραγωγιμότητα, ανάπτυξη και κεντρικό μητρώο μοντέλων.
Ικανότητα να μεταδίδεται πληροφορία με σαφήνεια και αποτελεσματικότητα προφορικά και γραπτά.
Ικανότητα να συνεργάζεται αποτελεσματικά με άλλους για την επίτευξη κοινών στόχων.
Δέσμευση στη διαρκή απόκτηση νέων γνώσεων και δεξιοτήτων για προσωπική βελτίωση.
Ικανότητα καθοδήγησης και υποστήριξης άλλων για ανάπτυξη δεξιοτήτων και επίτευξη στόχων.
Ανάληψη ευθύνης για τις ενέργειες και τα αποτελέσματά τους με υπευθυνότητα.
Ικανότητα να προσαρμόζεται αποτελεσματικά σε νέες συνθήκες και αλλαγές στο εργασιακό περιβάλλον.
Ικανότητα καθοδήγησης και κινητοποίησης μιας ομάδας για την αποτελεσματική επίτευξη στόχων.
Ικανότητα προγραμματισμού και ελέγχου του χρόνου που αφιερώνεται σε συγκεκριμένες δραστηριότητες για αύξηση της αποδοτικότητας και παραγωγικότητας.
Ικανότητα εντοπισμού προβλημάτων και ανάπτυξης αποτελεσματικών λύσεων με αποδοτικότητα.
Ικανότητα αξιολόγησης πληροφοριών και καταστάσεων με λογικό τρόπο για τη λήψη τεκμηριωμένων αποφάσεων.
Θέσεις Εργασίας Data Engineer - Αθήνα
Νέες ευκαιρίες από κορυφαίους εργοδότες
Εκπαιδευτικό Υπόβαθρο
Προτεινόμενη εκπαίδευση και προσόντα για θέσεις Data Engineer
Μελέτη των υπολογιστικών συστημάτων, προγραμματισμού, αλγορίθμων και ανάπτυξης λογισμικού.
Μελέτη της εφαρμογής επιστημονικών αρχών για το σχεδιασμό, την κατασκευή και τη συντήρηση κατασκευών και μηχανών.
Δεν απαιτείται συγκεκριμένο ακαδημαϊκό πεδίο; ανοικτό σε όλα τα εκπαιδευτικά υπόβαθρα.
Μελέτη των αριθμών, ποσοτήτων, σχημάτων και των σχέσεών τους μέσω αφηρημένης σκέψης και λογικής συλλογιστικής.