Ζώνη δεδομένων IBM: Αυτοεκμάθηση για ανίχνευση ανωμαλιών – Ιστολόγιο IBM

Σχεδόν πριν από ένα χρόνο, η IBM αντιμετώπισε ένα ζήτημα επικύρωσης δεδομένων κατά τη διάρκεια μιας από τις ευαίσθητες στο χρόνο ροές δεδομένων συγχωνεύσεων και εξαγορών. Αντιμετωπίσαμε πολλές προκλήσεις καθώς εργαζόμασταν για την επίλυση του προβλήματος, συμπεριλαμβανομένης της αντιμετώπισης προβλημάτων, του εντοπισμού του προβλήματος, της διόρθωσης της ροής δεδομένων, της πραγματοποίησης αλλαγών σε αγωγούς δεδομένων κατάντη και της εκτέλεσης ad hoc εκτέλεσης μιας αυτοματοποιημένης ροής εργασιών.

Βελτίωση της ανάλυσης δεδομένων και της αποτελεσματικότητας παρακολούθησης με το Databand

Μετά την επίλυση του άμεσου προβλήματος, μια αναδρομική ανάλυση αποκάλυψε ότι η σωστή επικύρωση δεδομένων και η έξυπνη παρακολούθηση μπορεί να είχαν ανακουφίσει τον πόνο και να επιτάχυναν τον χρόνο για την επίλυση. Αντί να αναπτύξει μια προσαρμοσμένη λύση αποκλειστικά για την άμεση ανησυχία, η IBM αναζήτησε μια ευρέως εφαρμόσιμη λύση επικύρωσης δεδομένων ικανή να χειριστεί όχι μόνο αυτό το σενάριο αλλά και πιθανά προβλήματα που παραβλέπονται.  

Τότε ανακάλυψα ένα από τα πρόσφατα αποκτηθέντα προϊόντα μας, το IBM® Databand® για παρατηρησιμότητα δεδομένων. Σε αντίθεση με τα παραδοσιακά εργαλεία παρακολούθησης με παρακολούθηση βάσει κανόνων ή με εκατοντάδες προσαρμοσμένα αναπτυγμένα σενάρια παρακολούθησης, το Databand προσφέρει παρακολούθηση αυτομάθησης. Παρατηρεί τη συμπεριφορά παλαιότερων δεδομένων και εντοπίζει αποκλίσεις που υπερβαίνουν ορισμένα όρια. Αυτή η δυνατότητα μηχανικής εκμάθησης επιτρέπει στους χρήστες να παρακολουθούν δεδομένα με ελάχιστη διαμόρφωση κανόνων και ανίχνευση ανωμαλιών, ακόμα κι αν έχουν περιορισμένες γνώσεις σχετικά με τα δεδομένα ή τα μοτίβα συμπεριφοράς τους.

Βελτιστοποίηση της παρατηρησιμότητας της ροής δεδομένων με την παρακολούθηση αυτομάθησης της Databand

Η ζώνη δεδομένων θεωρεί την ιστορική συμπεριφορά της ροής δεδομένων και επισημαίνει ύποπτες δραστηριότητες ενώ ειδοποιεί τον χρήστη. Η IBM ενσωμάτωσε τη ζώνη δεδομένων στη ροή δεδομένων μας, η οποία περιλάμβανε πάνω από 100 αγωγούς. Παρείχε εύκολα παρατηρήσιμες ενημερώσεις κατάστασης για όλες τις εκτελέσεις και αγωγούς και, το πιο σημαντικό, επεσήμανε τις αστοχίες. Αυτό μας επέτρεψε να επικεντρωθούμε και να επιταχύνουμε την αποκατάσταση περιστατικών ροής δεδομένων.

Η ζώνη δεδομένων για παρατηρησιμότητα δεδομένων χρησιμοποιεί αυτομάθηση για να παρακολουθεί τα ακόλουθα:  

• Αλλαγές σχήματος: Όταν εντοπίζεται μια αλλαγή σχήματος, η ζώνη δεδομένων την επισημαίνει σε έναν πίνακα εργαλείων και στέλνει μια ειδοποίηση. Οποιοσδήποτε εργάζεται με δεδομένα έχει πιθανώς αντιμετωπίσει σενάρια όπου μια πηγή δεδομένων υφίσταται αλλαγές σχήματος, όπως η προσθήκη ή η κατάργηση στηλών. Αυτές οι αλλαγές επηρεάζουν τις ροές εργασίας, οι οποίες με τη σειρά τους επηρεάζουν την επεξεργασία του αγωγού δεδομένων κατάντη, οδηγώντας σε ένα φαινόμενο κυματισμού. Η ζώνη δεδομένων μπορεί να αναλύσει το ιστορικό σχήματος και να μας ειδοποιήσει αμέσως για τυχόν ανωμαλίες, αποτρέποντας πιθανές διακοπές.
• Αντίκτυπος της συμφωνίας επιπέδου υπηρεσίας (SLA): Η ζώνη δεδομένων εμφανίζει τη γενεαλογία δεδομένων και προσδιορίζει μεταγενέστερους αγωγούς δεδομένων που επηρεάζονται από μια αστοχία αγωγού δεδομένων. Εάν έχει οριστεί SLA για παράδοση δεδομένων, οι ειδοποιήσεις βοηθούν στην αναγνώριση και διατήρηση της συμμόρφωσης με το SLA.
• Ανωμαλίες απόδοσης και χρόνου εκτέλεσης: Η ζώνη δεδομένων παρακολουθεί τη διάρκεια των εκτελέσεων της γραμμής δεδομένων και μαθαίνει να εντοπίζει ανωμαλίες, επισημαίνοντάς τις όταν χρειάζεται. Οι χρήστες δεν χρειάζεται να γνωρίζουν τη διάρκεια του αγωγού. Η ζώνη δεδομένων μαθαίνει από τα ιστορικά της δεδομένα.
• Κατάσταση: Η ζώνη δεδομένων παρακολουθεί την κατάσταση των εκτελέσεων, συμπεριλαμβανομένου του εάν απέτυχαν, ακυρώθηκαν ή επιτυχείς.
• Επικύρωση δεδομένων: Η ζώνη δεδομένων παρατηρεί εύρη τιμών δεδομένων με την πάροδο του χρόνου και στέλνει μια ειδοποίηση κατά τον εντοπισμό ανωμαλιών. Αυτό περιλαμβάνει τυπικά στατιστικά στοιχεία όπως ο μέσος όρος, η τυπική απόκλιση, το ελάχιστο, το μέγιστο και τα τεταρτημόρια.

Ειδοποιήσεις μετασχηματιστικής ζώνης δεδομένων για βελτιωμένους αγωγούς δεδομένων

Οι χρήστες μπορούν να ορίσουν ειδοποιήσεις χρησιμοποιώντας τη διεπαφή χρήστη της ζώνης δεδομένων, η οποία δεν είναι περίπλοκη και διαθέτει έναν έξυπνο πίνακα εργαλείων που παρακολουθεί και υποστηρίζει ροές εργασίας. Παρέχει εις βάθος ορατότητα μέσω κατευθυνόμενων ακυκλικών γραφημάτων, κάτι που είναι χρήσιμο όταν αντιμετωπίζουμε πολλές αγωγούς δεδομένων. Αυτό το σύστημα all-in-one δίνει τη δυνατότητα στις ομάδες υποστήριξης να επικεντρώνονται σε τομείς που απαιτούν προσοχή, δίνοντάς τους τη δυνατότητα να επιταχύνουν τα παραδοτέα.

Οι συγχωνεύσεις και οι εξαγορές της IBM Enterprise Data μάς επέτρεψαν να βελτιώσουμε τις γραμμές δεδομένων μας με το Databand και δεν κοιτάξαμε πίσω. Είμαστε στην ευχάριστη θέση να σας προσφέρουμε αυτό το μετασχηματιστικό λογισμικό που βοηθά στον εντοπισμό περιστατικών δεδομένων νωρίτερα, στην ταχύτερη επίλυσή τους και στην παροχή πιο αξιόπιστων δεδομένων στις επιχειρήσεις.

Παρέχετε αξιόπιστα δεδομένα με συνεχή παρατηρησιμότητα δεδομένων

Διαβάστε την έκθεση Gartner