Όταν πρόκειται για την εκμάθηση του Hadoop, αυτή είναι μια πολύ συνηθισμένη ερώτηση που έρχεται στο μυαλό του κάθε μαθητή, δηλαδή Χρειάζομαι Java για να μάθω το Hadoop '. Αυτό το ιστολόγιο θα σας βοηθήσει να ξεκαθαρίσετε όλες τις αμφιβολίες σας.
Χρειάζεστε Java για να μάθετε Hadoop;
Μια απλή απάντηση σε αυτήν την ερώτηση είναι - ΟΧΙ , η γνώση της Java δεν είναι υποχρεωτική για την εκμάθηση του Hadoop.
Ίσως γνωρίζετε ότι το Hadoop είναι γραμμένο στην Java, αλλά, αντίθετα, θα ήθελα να σας πω, το οικοσύστημα Hadoop έχει σχεδιαστεί αρκετά για να εξυπηρετεί διαφορετικούς επαγγελματίες που προέρχονται από διαφορετικά υπόβαθρα.
Μιλώντας για τους επαγγελματίες από το μη προγραμματισμένο υπόβαθρο, το οικοσύστημα Hadoop παρέχει διάφορα εργαλεία, τα οποία μπορούν να χρησιμοποιήσουν για την επεξεργασία Big Data που είναι αποθηκευμένα στο Hadoop.
Δύο σημαντικά συστατικά Hadoop υποστηρίζουν το γεγονός ότι μπορείτε να εργαστείτε με το Hadoop χωρίς να έχετε λειτουργική γνώση της Java - Χοίρος και Κυψέλη .
Το Pig είναι μια γλώσσα ροής δεδομένων υψηλού επιπέδου και ένα πλαίσιο εκτέλεσης για παράλληλο υπολογισμό, ενώ το Hive είναι μια υποδομή αποθήκης δεδομένων που παρέχει σύνοψη δεδομένων και ad-hoc ερώτηση. Το χοίρο χρησιμοποιείται ευρέως από ερευνητές και προγραμματιστές, ενώ το Hive είναι αγαπημένο στους αναλυτές δεδομένων.
Ένα ενδιαφέρον γεγονός για εσάς:
10 γραμμές Pig = περίπου. 200 γραμμές κώδικα Java. Ολοκλήρωση αγοράς για μια επίδειξη Pig.
ερωτήσεις συνέντευξης επιστήμονα δεδομένων google
Έτσι, χωρίς να γράφετε σύνθετο κώδικα Java, μπορείτε να επιτύχετε τις ίδιες υλοποιήσεις πολύ εύκολα χρησιμοποιώντας το Pig. Και πάλι μιλώντας για τη SQL, χρησιμοποιήθηκε ευρέως από μηχανικούς και αναλυτές του Facebook, επομένως, το Facebook ανέπτυξε το Hive για να παρέχει ερωτήματα τύπου SQL στην κορυφή του Hadoop.
Αυτές οι γλώσσες είναι εύκολες στην εκμάθηση και περισσότερο από το 80% των έργων Hadoop περιστρέφονται γύρω από αυτές.
Πώς να ευθυγραμμιστείτε με τις δουλειές Hadoop
Για να διερευνήσετε ρόλους εργασίας που σχετίζονται με το Hadoop χωρίς να έχετε την Java ως προϋπόθεση, πρέπει απλώς να προσανατολιστείτε σε δύο κρίσιμες πτυχές του Hadoop Αποθήκευση και Επεξεργασία . Για μια εργασία γύρω από το χώρο αποθήκευσης Hadoop, μπορείτε να μάθετε πώς λειτουργεί το σύμπλεγμα Hadoop και πώς το Hadoop καθιστά τα δεδομένα του ασφαλή και σταθερά. Γι 'αυτό, γνωρίζοντας τις διάφορες αποχρώσεις του συστήματος κατανεμημένων αρχείων Hadoop ( HDFS ) και HBase , δηλαδή, η κατανεμημένη βάση δεδομένων NoSQL της Hadoop, θα βοηθήσει πολύ.
Εάν επιλέξετε να εργαστείτε από την πλευρά επεξεργασίας του Hadoop, έχετε στη διάθεσή σας το Pig and Hive, το οποίο μετατρέπει αυτόματα τον κωδικό σας στο backend για να λειτουργεί με το μοντέλο προγραμματισμού συμπλέγματος MapReduce που βασίζεται σε Java.
πώς να δημιουργήσετε δυναμικό πίνακα στο java
Έτσι, χωρίς να εκτελέσετε το MapReduce, μπορείτε ακόμα να ελέγξετε ολόκληρο τον κύκλο ζωής του έργου σας. Εφόσον κυριαρχείτε το Pig and Hive, μαζί με το HDFS και το HBase, η Java μπορεί να πάρει πίσω κάθισμα.
Ελπίζω αυτή η εικόνα να αποδείξει τα σημεία μου.
Το εκπαιδευτικό σεμινάριο Big Data and Hadoop από την Edureka έχει σχεδιαστεί για να βελτιώσει τις γνώσεις και τις δεξιότητές σας για να γίνει επιτυχημένος προγραμματιστής Hadoop Κάντε κλικ σε περίπτωση που θέλετε να μάθετε περισσότερα.
Σπάνιες απαιτήσεις για κωδικοποίηση Java
Ωστόσο, Απαιτείται κωδικοποίηση Java εάν θέλετε να προσθέσετε λειτουργίες που καθορίζονται από το χρήστη σε Pig, Hive και άλλα εργαλεία. Αυτό απαιτείται μόνο εάν θέλετε να δημιουργήσετε προσαρμοσμένες μορφές εισόδου / εξόδου. Είμαστε στην ευχάριστη θέση να ενημερώσουμε ότι αυτή η απαίτηση είναι σπάνια.
Ένα άλλο σπάνιο σενάριο όπου μπορεί να είναι απαραίτητη η βασική κωδικοποίηση Java είναι το σφάλμα. Σε σπάνια περίπτωση διακοπής του προγράμματος Hadoop, ίσως χρειαστεί να κάνετε εντοπισμό σφαλμάτων του προγράμματος χρησιμοποιώντας Java.
Ακόμα δεν είστε πεπεισμένοι ότι μπορείτε να μάθετε Hadoop χωρίς να γνωρίζετε την Java; Παρακολουθήστε το παρακάτω διαδικτυακό σεμινάριο και μάθετε πώς το Hadoop είναι σχετικό για ένα άτομο από φόντο χωρίς προγραμματισμό!
Το Edureka είναι μια παγκόσμια πλατφόρμα ηλεκτρονικής μάθησης για ζωντανή, καθοδηγούμενη από εκπαιδευτή εκπαίδευση σε τάσεις τεχνολογίας. Προσφέρουν βραχυπρόθεσμα μαθήματα που υποστηρίζονται από διαδικτυακούς πόρους, καθώς και 24 × 7 υποστήριξη διάρκειας ζωής. Η Edureka έχει μια ακλόνητη δέσμευση για να βοηθήσει τους εργαζόμενους επαγγελματίες να συμβαδίζουν με τις μεταβαλλόμενες τεχνολογίες και να αντιμετωπίζουν την αδυναμία των ακαδημαϊκών ιδρυμάτων να συμβαδίζουν με τις μεταβαλλόμενες ανάγκες. Με μια υπάρχουσα κοινότητα μαθητών σε περισσότερες από 100 χώρες, το όραμα της Edureka είναι να κάνει τη μάθηση εύκολη, ενδιαφέρουσα, προσιτή και προσιτή σε εκατομμύρια μαθητές σε όλο τον κόσμο.
Σχετικές αναρτήσεις:
παραδείγματα προγράμματος java για βρόχο
Ξεκινήστε με Big Data και Hadoop