Σύνδεση
79009
Big Data Hadoop and Spark Developer 1 έτος χωρίς εξέταση
Big Data Hadoop and Spark Developer 1 έτος χωρίς εξέταση online μάθημα στα Αγγλικά που παρέχεται από iLEARN Innovative Learning
Με αυτό το μάθημα Big Data Hadoop, θα μάθετε το πλαίσιο μεγάλων δεδομένων με τη χρήση του Hadoop και του Spark, συμπεριλαμβανομένων των HDFS, YARN και MapReduce. Το μάθημα θα καλύψει επίσης τα Pig, Hive και Impala για την επεξεργασία και ανάλυση μεγάλων συνόλων δεδομένων που είναι αποθηκευμένα στο HDFS και θα χρησιμοποιήσετε τα Sqoop και Flume για την εισαγωγή δεδομένων.
Θα σας παρουσιαστεί η επεξεργασία δεδομένων σε πραγματικό χρόνο με τη χρήση του Spark, συμπεριλαμβανομένου του λειτουργικού προγραμματισμού στο Spark, της υλοποίησης εφαρμογών Spark, της κατανόησης της παράλληλης επεξεργασίας στο Spark και της χρήσης τεχνικών βελτιστοποίησης Spark RDD. Θα μάθετε επίσης τους διάφορους διαδραστικούς αλγορίθμους στο Spark και θα χρησιμοποιήσετε το Spark SQL για τη δημιουργία, το μετασχηματισμό και την αναζήτηση μορφών δεδομένων.
Τέλος, θα κληθείτε να εκτελέσετε πραγματικά, βιομηχανικά έργα με τη χρήση του CloudLab στους τομείς των τραπεζών, των τηλεπικοινωνιών, των μέσων κοινωνικής δικτύωσης, των ασφαλίσεων και του ηλεκτρονικού εμπορίου.
Το μάθημα Big Data Hadoop and Spark Developer παρέχεται από την ILX Group.
Λεπτομέρειες του διαδικτυακού μαθήματος Big Data Hadoop and Spark Developer
- 12 μήνες ηλεκτρονικής πρόσβασης στο μάθημα ηλεκτρονικής μάθησης*
- Η ολοκλήρωση του μαθήματος αναμένεται να διαρκέσει περίπου 15 ώρες
- 16 μαθήματα
- Περιλαμβάνεται δωρεάν μάθημα - Apache Kafka
- Περιλαμβάνεται δωρεάν μάθημα - Core Java
- 5 πραγματικά βιομηχανικά έργα
- Δύο επίσημες Προσομοιώσεις εξετάσεων
*Όλοι οι διαθέσιμοι πόροι του μαθήματος βρίσκονται στο μενού Πόροι μέσα στο μάθημα. Δεν παρέχεται αντίγραφο προς λήψη του ίδιου του περιεχομένου της ηλεκτρονικής μάθησης. Το PDF του Οδηγού χρήσης περιέχει ένα αντίγραφο της αφήγησης του μαθήματος.
ΜΟΡΦΉ ΚΑΙ ΧΑΡΑΚΤΗΡΙΣΤΙΚΆ ΤΟΥ ΜΑΘΉΜΑΤΟΣ ONLINE
- Δεν υπάρχουν διαθέσιμες εξετάσεις, αλλά πρέπει να ολοκληρώσετε το 85% του μαθήματος και να ολοκληρώσετε ένα τεστ προσομοίωσης, με ελάχιστη βαθμολογία 60%, για να λάβετε πιστοποιητικό.
Typology
Μάθημα online χωρίς εξετάσειςΤοποθεσία
OnlineIndividual price
Access duration of the course
1 έτοςΓλώ
ΑγγλικάObjectives
Στο τέλος του μαθήματος θα είστε σε θέση να καταλάβετε:
- Τα διάφορα συστατικά του οικοσυστήματος Hadoop, όπως το Hadoop 2.7, Yarn, MapReduce, Pig, Hive, Impala, HBase, Sqoop, Flume και Apache Spark
- Το κατανεμημένο σύστημα αρχείων Hadoop (HDFS) και την αρχιτεκτονική YARN
- MapReduce και τα χαρακτηριστικά του και αφομοίωση προηγμένων εννοιών MapReduce
- Διαφορετικοί τύποι μορφότυπων αρχείων, σχήμα Avro, χρήση του Avro με το Hive και εξέλιξη του Sqoop και του σχήματος
- Flume, αρχιτεκτονική Flume, πηγές, καταβόθρες Flume, κανάλια και διαμορφώσεις Flume
- HBase, η αρχιτεκτονική της και η αποθήκευση δεδομένων, και μάθετε τη διαφορά μεταξύ HBase και RDBMS
- Ανθεκτικά σύνολα δεδομένων διανομής (RDD) με λεπτομέρειες
- Οι συνήθεις περιπτώσεις χρήσης του Spark και διάφοροι διαδραστικοί αλγόριθμοι
Θα είστε επίσης σε θέση να:
- Να προσλαμβάνετε δεδομένα χρησιμοποιώντας το Sqoop και το Flume
- Να δημιουργείτε βάσεις δεδομένων και πίνακες στο Hive και το Impala, να κατανοείτε την HBase και να χρησιμοποιείτε το Hive και το Impala για κατάτμηση
- Να αποκτήσετε γνώσεις εργασίας για το Pig και τα συστατικά του
- Να κάνετε λειτουργικό προγραμματισμό στο Spark και να υλοποιείτε και να κατασκευάζετε εφαρμογές Spark
- Να αποκτήσετε βαθιά κατανόηση της παράλληλης επεξεργασίας στο Spark και των τεχνικών βελτιστοποίησης του Spark RDD
- Να δημιουργείτε, να μετασχηματίζετε και να πραγματοποιείτε ερωτήματα σε πλαίσια δεδομένων με το Spark SQL
Who it is aimed at
Οι ευκαιρίες καριέρας στα μεγάλα δεδομένα αυξάνονται και το Hadoop γίνεται γρήγορα μια τεχνολογία που πρέπει να γνωρίζει κανείς στην αρχιτεκτονική των μεγάλων δεδομένων. Η εκπαίδευση στα μεγάλα δεδομένα είναι κατάλληλη για επαγγελματίες της πληροφορικής, της διαχείρισης δεδομένων και της ανάλυσης, συμπεριλαμβανομένων των εξής:
- Προγραμματιστές λογισμικού και αρχιτέκτονες
- Επαγγελματίες της ανάλυσης
- Ανώτεροι επαγγελματίες πληροφορικής
- Επαγγελματίες δοκιμών και mainframe
- Επαγγελματίες διαχείρισης δεδομένων
- Επαγγελματίες επιχειρηματικής ευφυΐας
- Διαχειριστές έργων
- Επίδοξοι επιστήμονες δεδομένων
- Πτυχιούχοι που επιθυμούν να χτίσουν καριέρα στην ανάλυση μεγάλων δεδομένων
Contents
Το μάθημα καλύπτει τα ακόλουθα θέματα:
- Εισαγωγή στο μάθημα
- Μάθημα 1 - Εισαγωγή στα μεγάλα δεδομένα και το οικοσύστημα Hadoop
- Μάθημα 2 - HDFS και YARN
- Μάθημα 3 - MapReduce και Sqoop
- Μάθημα 4 - Βασικά στοιχεία του Hive και του Impala
- Μάθημα 5 - Εργασία με το Hive και το Impala
- Μάθημα 6 - Τύποι μορφότυπων δεδομένων
- Μάθημα 7 - Σύνθετη έννοια του Hive και διαμερισμός αρχείων δεδομένων
- Μάθημα 8 - Apache Flume και HBase
- Μάθημα 9 - Pig
- Μάθημα 10 - Βασικά στοιχεία του Apache Spark
- Μάθημα 11 - RDDs στο Spark
- Μάθημα 12 - Υλοποίηση εφαρμογών Spark
- Μάθημα 13 - Παράλληλη επεξεργασία με Spark
- Μάθημα 14 - Τεχνικές βελτιστοποίησης RDD του Spark
- Μάθημα 15 - Αλγόριθμος Spark
- Μάθημα 16 - Spark SQL
- ΔΩΡΕΑΝ ΜΑΘΗΜΑ - Apache Kafka
- ΔΩΡΕΑΝ ΜΑΘΗΜΑ - Core Java
Prerequisites
Δεν υπάρχουν προαπαιτούμενα για αυτό το μάθημα. Ωστόσο, είναι ωφέλιμο να έχετε κάποιες γνώσεις Core Java και SQL. Προσφέρουμε ένα δωρεάν Μάθημα online με αυτοδύναμη παρακολούθηση"Java essentials for Hadoop", αν θέλετε να αναβαθμίσετε τις δεξιότητές σας σε Core Java.
Teacher language
Material course language
Η ημερομηνία ενεργοποίησης του πακέτου μπορεί να επιλεγεί κατά τη διαδικασία αγοράς στην ιστοσελίδα μας. Οι ημέρες πρόσβασης στο μάθημα, που αναφέρονται στον τίτλο του προϊόντος, θα υπολογιστούν ξεκινώντας από την επιλεγμένη ημερομηνία. Η πληρωμή πρέπει να ολοκληρωθεί πριν από την ημερομηνία ενεργοποίησης.
Όχι, όλες οι τιμές στην ιστοσελίδα είναι χωρίς ΦΠΑ. Ωστόσο, να θυμάστε ότι ο ΦΠΑ δεν εφαρμόζεται πάντα στις ακόλουθες περιπτώσεις:
χρέωση σε επιχείρηση ή πολίτη εκτός ΕΕ χρέωση σε μη ιταλική εταιρεία ΕΕ με έγκυρο ΑΦΜ VIESΜπορείτε να ελέγξετε το VAT id στην πύλη VIES σε αυτόν τον σύνδεσμο: https://ec.europa.eu/taxation_customs/vies/
Ο ιστότοπος εφαρμόζει αυτόματα αυτούς τους κανόνες. Ωστόσο, εσείς ή ο οργανισμός σας θα μπορούσε να εξαιρεθεί από την εφαρμογή ΦΠΑ για άλλους νομικούς λόγους. Σε μια τέτοια περίπτωση επικοινωνήστε μαζί μας (info@innovativelearning.eu) ώστε να αναλύσουμε και να επιβεβαιώσουμε την περίπτωσή σας. Σε αυτή την περίπτωση, παρακαλούμε να μην υποβάλλετε συνδρομές μέσω του ιστότοπου: το αίτημά σας θα διεκπεραιωθεί μέσω χειροκίνητης επεξεργασίας παραγγελίας.
Κατά τη διάρκεια της διαδικασίας αγοράς είναι δυνατή η καταχώρηση στοιχείων και δεδομένων του κάθε συμμετέχοντα.
Με την αγορά πακέτων ηλεκτρονικής μάθησης διάρκειας 30 ημερών και 1 έτους, η εξέταση δεν χρειάζεται να πραγματοποιηθεί απαραίτητα εντός της ημερομηνίας λήξης του λογαριασμού στην πλατφόρμα ηλεκτρονικής μάθησης. Η ισχύς του κωδικού του κουπονιού εξέτασης είναι 12 μήνες από την ημερομηνία έκδοσης.
Ο κωδικός κουπονιού εξετάσεων εκδίδεται συνήθως κατά την ενεργοποίηση του μαθήματος e-learning, ωστόσο μπορεί επίσης να εκδοθεί στο τέλος του μαθήματος e-learning και να αποσταλεί μετά από 24/48 ώρες από την ημερομηνία παραγγελίας. Σε περίπτωση αγοράς μόνο για εξετάσεις, ο κωδικός κουπονιού εξετάσεων εκδίδεται κατά την επιβεβαίωση της αγοράς, πάντα μετά την παραλαβή της πληρωμής.
30 ημέρες, 120 ημέρες ή 1 έτος θεωρούνται ως η περίοδος, δηλαδή οι ημέρες, κατά τις οποίες είναι δυνατή η πρόσβαση στα μαθήματα κατάρτισης που αγοράσατε στην πλατφόρμα ηλεκτρονικής μάθησης. Οι περίοδοι αυτές ξεκινούν από την ημερομηνία ενεργοποίησης που επιλέγεται κατά τη διαδικασία αγοράς στην ιστοσελίδα μας. Η ημερομηνία ενεργοποίησης μπορεί να επιλεγεί και να επιλεγεί εντός 30 ημερών από την ημερομηνία αγοράς. Εάν χρειάζεστε μεγαλύτερη ευελιξία, μη διστάσετε να επικοινωνήσετε μαζί μας.
Η κύρια διαφορά μεταξύ αυτών των πακέτων, πέραν της διάρκειας πρόσβασης, είναι ότι τα πακέτα 30 ημερών και 1 έτους περιλαμβάνουν τις εξετάσεις, ενώ το πακέτο των 120 ημερών δεν περιλαμβάνει τις εξετάσεις.