IBM Databand: Itseopiskelu poikkeamien havaitsemiseen – IBM-blogi

Melkein vuosi sitten IBM kohtasi tietojen validointiongelman eräässä aikaherkässä fuusioiden ja yritysostojen tietovirrassa. Kohtasimme useita haasteita työskennellessämme ongelman ratkaisemiseksi, mukaan lukien vianetsintä, ongelman tunnistaminen, tietovirran korjaaminen, muutosten tekeminen loppupään tietoputkiin ja automatisoidun työnkulun ad hoc -ajo.

Tietojen resoluution ja valvonnan tehokkuuden parantaminen Databandilla

Välittömän ongelman ratkaisemisen jälkeen retrospektiivinen analyysi paljasti, että asianmukainen tietojen validointi ja älykäs seuranta saattoivat lievittää kipua ja nopeuttaa ratkaisuun kuluvaa aikaa. Sen sijaan, että IBM olisi kehittänyt räätälöidyn ratkaisun pelkästään välittömään huolenaiheeseen, IBM etsi laajalti sovellettavaa tietojen validointiratkaisua, joka pystyy käsittelemään tämän skenaarion lisäksi myös mahdollisia huomiotta jääviä ongelmia.  

Silloin löysin yhden äskettäin hankkimistamme tuotteistamme, IBM® Databand® -tietojen havainnointia varten. Toisin kuin perinteiset valvontatyökalut, joissa on sääntöpohjainen valvonta tai satoja räätälöityjä valvontaskriptejä, Databand tarjoaa itseoppivaa valvontaa. Se tarkkailee aiempien tietojen käyttäytymistä ja tunnistaa tietyt kynnysarvot ylittävät poikkeamat. Tämän koneoppimisominaisuuden avulla käyttäjät voivat tarkkailla tietoja minimaalisella sääntömäärityksellä ja poikkeamien havaitsemisella, vaikka heillä olisi vain vähän tietoa tiedoista tai sen käyttäytymismalleista.

Tietovirran havaittavuuden optimointi Databandin itseoppivan valvonnan avulla

Databand ottaa huomioon tietovirran historiallisen toiminnan ja ilmoittaa epäilyttävät toiminnot samalla kun varoittaa käyttäjää. IBM integroi Databandin tietovirtaamme, joka käsitti yli 100 putkilinjaa. Se tarjosi helposti havaittavia tilapäivityksiä kaikille ajoille ja putkille, ja mikä tärkeintä, korosti viat. Tämä antoi meille mahdollisuuden keskittyä tietovirtahäiriöiden korjaamiseen ja nopeuttaa niiden korjaamista.

Datan havainnoitavuuden tietokaista käyttää itseoppimista seuraamaan seuraavia asioita:  

• Kaavion muutokset: Kun skeeman muutos havaitaan, Databand merkitsee sen kojelautaan ja lähettää hälytyksen. Jokainen tietojen kanssa työskentelevä on todennäköisesti kohdannut skenaarioita, joissa tietolähteeseen tehdään skeemamuutoksia, kuten sarakkeiden lisääminen tai poistaminen. Nämä muutokset vaikuttavat työnkulkuihin, jotka puolestaan ​​vaikuttavat loppupään dataputkien käsittelyyn, mikä johtaa aaltoiluvaikutukseen. Databand voi analysoida skeeman historiaa ja varoittaa meidät välittömästi mahdollisista poikkeavuuksista, mikä estää mahdolliset häiriöt.
• Palvelutasosopimuksen (SLA) vaikutus: Datakaista näyttää datalinjan ja tunnistaa loppupään dataputket, joihin dataputkilinjan vika on vaikuttanut. Jos tiedon toimitukselle on määritetty SLA, hälytykset auttavat tunnistamaan ja ylläpitämään SLA-vaatimustenmukaisuutta.
• Suorituskyky- ja ajonaikaiset poikkeavuudet: Databand tarkkailee dataputken ajon kestoa ja oppii havaitsemaan poikkeavuuksia ja ilmoittamaan niistä tarvittaessa. Käyttäjien ei tarvitse olla tietoisia putkilinjan kestosta. Databand oppii historiallisista tiedoistaan.
• Status: Databand valvoo suoritusten tilaa, mukaan lukien sen, ovatko ne epäonnistuneet, peruutettu vai onnistuneet.
• Tietojen vahvistus: Databand tarkkailee datan arvoalueita ajan kuluessa ja lähettää hälytyksen havaitessaan poikkeavuuksia. Tämä sisältää tyypilliset tilastot, kuten keskiarvon, keskihajonnan, minimin, maksimin ja kvartiilit.

Transformatiiviset tietokaistahälytykset parannetuille dataputkistoja varten

Käyttäjät voivat asettaa hälytyksiä käyttämällä Databand-käyttöliittymää, joka on yksinkertainen ja sisältää intuitiivisen kojelaudan, joka valvoo ja tukee työnkulkuja. Se tarjoaa syvällisen näkyvyyden suunnattujen asyklisten kaavioiden kautta, mikä on hyödyllistä käsiteltäessä monia tietoputkia. Tämä all-in-one-järjestelmä antaa tukiryhmille mahdollisuuden keskittyä huomiota vaativiin alueisiin, mikä mahdollistaa tulosten nopeuttamisen.

IBM Enterprise Datan fuusiot ja yritysostot ovat antaneet meille mahdollisuuden parantaa dataputkistoamme Databandilla, emmekä ole katsoneet taaksepäin. Olemme innoissamme voidessamme tarjota sinulle tämän muuntavan ohjelmiston, joka auttaa tunnistamaan tietohäiriöt aikaisemmin, ratkaisemaan ne nopeammin ja toimittamaan luotettavampia tietoja yrityksille.

Toimita luotettavaa tietoa jatkuvalla tietojen havainnolla

Lue Gartnerin raportti