Απολύτως! Ποτέ δεν υπήρξε καλύτερη στιγμή για να προσθέσετε δεξιότητες Hadoop στο βιογραφικό σας. Ας το αποδείξουμε με μερικά γεγονότα και παραδείγματα.
Αναρωτηθήκατε ποτέ ποια είναι η τεχνολογία πίσω από τη δυνατότητα αυτόματων ετικετών του Facebook; Τι γίνεται με τις κάμερες παρακολούθησης που είναι σε θέση να δημιουργήσουν άψογες εικόνες ακόμη και με χαμηλό φωτισμό; Η απάντηση είναι το Hadoop και οι πρωτοποριακές του δυνατότητες αποθήκευσης, επεξεργασίας και ανάκτησης δεδομένων.
Η αποθήκευση δεδομένων είναι ένα πράγμα, αλλά η επεξεργασία και η ερώτησή τους είναι ένα εντελώς διαφορετικό παιχνίδι μπάλας. Εάν το Big Data είναι ομάδα ράγκμπι, τότε το Hadoop είναι το καλύτερο quarterback που μπορείτε να βρείτε!
πώς να δηλώσετε μια σειρά αντικειμένων στην Java
Χάρη στο Hadoop, το Facebook μπορεί να αποθηκεύσει όλες τις πληροφορίες για ένα άτομο και επισημαίνει την ακριβή ώρα και ημερομηνία μιας δραστηριότητας στο προφίλ του. Όλες οι πληροφορίες για ένα άτομο είναι Big Data και το Hadoop βοηθά να τα καταστήσουμε όλα.
Όλα τα δεδομένα Hadoop αποθηκεύονται πάνω από HDFS (Hadoop Distributed File System) το οποίο μπορεί να φιλοξενήσει δομημένα και μη δομημένα δεδομένα. Οι ανταγωνιστές του Hadoop (όπως το RDBMS και το Excel) μπορούν να αποθηκεύσουν μόνο δομημένα δεδομένα. Αυτός είναι ένας σημαντικός παράγοντας για τον οποίο ο Hadoop είναι ο μεγάλος μπαμπάς που δίνει στα παραδοσιακά εργαλεία χειρισμού δεδομένων τα λεφτά τους. Η Hadoop κάνει την επεξεργασία κοντά στα δεδομένα, ενώ το RDBMS χρειάζεται τα δεδομένα να μεταφερθούν μέσω του δικτύου μέσω του I / O για την επεξεργασία των ίδιων δεδομένων.
Τροφή για σκέψη: Μπορεί το Hadoop να προβλέψει τα αποτελέσματα της κατάστασης βάσει ενός συνόλου δεδομένων;
Αυτό το γράφημα δείχνει την εκθετική αύξηση των δεδομένων με τα χρόνια. Δώστε μια πιο προσεκτική ματιά και θα παρατηρήσετε ότι τα μη δομημένα δεδομένα αντιπροσωπεύουν το 90% όλων των δεδομένων στον κόσμο. Απλώς εφαρμόστε την αρχή της ζήτησης και της προσφοράς και μπορούμε να συνειδητοποιήσουμε ότι όλο και περισσότερα δομημένα δεδομένα που μετακινούνται μόνο δημιουργούν επαγγελματίες που μπορούν να διορθώσουν αυτά τα δεδομένα. Αυτός είναι αρκετός λόγος για ένα άτομο να ψάξει για δουλειά που ασχολείται με μη δομημένα δεδομένα γνωστά ως Big Data. Μην έχετε καμία αμφιβολία ότι αυτή είναι η κατάλληλη στιγμή για να μάθετε Hadoop.
Στην πραγματικότητα, πόσο αποτελεσματικό είναι το Hadoop σε σύγκριση με το RDBMS;
Η Hadoop χτυπά οποιοδήποτε άλλο εργαλείο χειρισμού δεδομένων απευθείας από το πάρκο. Τα RDBMS και Excel ενδέχεται να είναι αποτελεσματικά στη διαχείριση δεδομένων που δεν υπερβαίνουν μερικές εκατοντάδες φύλλα Excel, αλλά τι γίνεται με χίλια τέτοια αρχεία που πρέπει να διατηρηθούν; Ας επιστρέψουμε ξανά στο παράδειγμα του Facebook. Το αρχείο καταγραφής δεδομένων που περιέχει λεπτομέρειες δραστηριότητας ενός χρήστη του Facebook δεν μπορεί να αποθηκευτεί στο Excel, τουλάχιστον όχι όλα τα ιστορικά δεδομένα ενός χρήστη που χρονολογείται από δεκαετίες. Επίσης, στο Hadoop τα δεδομένα μπορούν να δομηθούν χαλαρά, αλλά το RDBMS απαιτεί τα δεδομένα να είναι πιο συνεπή και σε αναγνωρίσιμη μορφή.
Ρίξτε μια ματιά στη σύγκριση μεταξύ RDBMS και Hadoop και θα ξέρετε μόνοι σας ποιο είναι καλύτερο.
Έχω ένα τελικό στατιστικό στοιχείο για εσάς που θα καλύψει όλες τις αμφιβολίες σχετικά με το αν ο Hadoop είναι μια καλή καριέραπάγος.
πώς να χρησιμοποιήσετε την αντικατάσταση στο java
Αυτό το γράφημα είναι μια εικόνα της αυξανόμενης ζήτησης για επαγγελματίες της Hadoop και πρόκειται να αυξηθεί μόνο τις επόμενες εβδομάδες.
Δυστυχώς, εσείς και εγώ δεν μπορούμε να αλλάξουμε την τεχνολογία. Στην καλύτερη περίπτωση, μπορούμε να συμβαδίζουμε με αυτό και να μαθαίνουμε εξελισσόμενες τεχνολογίες και να γίνουμε απαραίτητοι στους χώρους εργασίας μας. Είναι η κατάλληλη στιγμή για να μάθετε Hadoop και να οδηγήσετε το κύμα Big Data.
Έχετε μια ερώτηση για εμάς; Παρακαλώ αναφέρετέ το στην ενότητα σχολίων και θα επικοινωνήσουμε μαζί σας.
Σχετικές αναρτήσεις:
εξαίρεση χειρισμός σε pl sql