Katalogi podatkov in upravljanje podatkov delujejo skupaj in se prepletajo na nekaj zelo uporabnih načinov. Podatkovni katalogi sporočajo informacije o podatkovnih sredstvih organizacije in o tem, kje se nahajajo. Upravljanje podatkov pa se ukvarja s splošnim upravljanjem podatkov, kot so točnost, uporabnost, varnost in uveljavljeni procesi, ki jih uporablja organizacija.
Programi za upravljanje podatkov pogosto vključujejo kataloge podatkov kot ključni del njihove celotne zasnove.
Podatki so organizirani in urejeni v preprosto obliko z katalogi podatkov, ki uporabnikom in raziskovalcem omogoča preprosto prepoznavanje in obdelavo podatkov. Katalogi uporabljajo metapodatke za zagotavljanje organiziranega popisa podatkovnih sredstev podjetja, vključno s podatki, shranjenimi v podatkovnih jezerih in podatkovnih skladiščih. (Dobra analogija je knjižnični katalog, ki vsebuje kratek opis iskane knjige in njeno lokacijo.)
Na najosnovnejši ravni se upravljanje podatkov in podatkovni katalogi križajo pri uporabi podatkov in nizov podatkov. (Nabori podatkov so paketi podatkov ali »paketi podatkov«.) Upravljanje podatkov narekuje procese, medtem ko se katalogi podatkov osredotočajo na navzkrižno povezovanje paketov podatkov.
Druga mesta, kjer se križajo upravljanje podatkov in katalogi podatkov, vključujejo:
- metapodatki
- Podatkovno poreklo
- Strojno učenje
- Pravna skladnost
Emily Washington, višja podpredsednica za upravljanje izdelkov pri Precisely, nedavno naveden,
»Rešitve podatkovnega kataloga so v arzenalu zmogljivosti celovitosti podatkov prešle iz 'lepo imeti' v 'morate imeti'. Za pridobitev zaupanja vrednih podatkov je nujno, da organizacije natančno preučijo, kako iz svojega kataloga pridobivajo zaupanja vredne poslovne informacije. Centraliziran, en sam vir znanja o podatkih pomaga pri zagotavljanju poslovnega konteksta, ki vodjem pomaga sprejemati samozavestne odločitve.«
Izboljšanje kakovosti podatkov s podatkovnimi katalogi
Katalog podatkov izboljšuje kakovost podatkov v okviru programa Data Governance.
Uporaba kataloga podatkov pomaga organizacijam pri upravljanju njihovih podatkov. Pomaga tudi pri obogatitvi metapodatkov, s čimer podpira odkrivanje podatkov in upravljanje podatkov. Podatkovni katalogi nudijo raziskovalcem en sam vir resnice, ko se pojavijo vprašanja glede podatkov.
Glavni namen upravljanja podatkov Program je zagotoviti, da so podatki varni, varni in visoke kakovosti. Podpira razvoj kontrol in njihovo nato uveljavljanje. Primarni cilj upravljanja podatkov je spodbujanje dobrega Kakovost podatkov (točnost podatkov) in vključuje vse dejavnosti ali procese, ki pomagajo zagotoviti, da so podatki primerni za uporabo.
Kakovost podatkov se običajno meri z uporabo šest dimenzij: točnost, veljavnost, popolnost, doslednost, enkratnost in pravočasnost.
Brez kataloga podatkov morajo raziskovalci poiskati podatke z razvrščanjem po različnih paketih podatkov, pogovorom s kolegi in uporabo plemenskega znanja. (Lahko pa raziskavo omejijo tako, da se zanašajo na podatke, ki jih že poznajo.) S katalogi podatkov je raziskava veliko bolj učinkovita.
Podatkovni katalogi pomagajo hitro in učinkovito pridobiti točne podatke in morajo odstraniti odvečne podatke z uporabo metapodatkov (kar dolgoročno prihrani pri stroških shranjevanja in upravljanja podatkov). Zagotavljajo koristne informacije o shranjenih podatkih in pomagajo pri analitiki podatkov. Ker je treba urejati tudi metapodatke znotraj kataloga, je smiselno ta proces koordinirati prek programa Data Governance.
Podatkovni katalogi zahtevajo upravljanje metapodatkov
Program za upravljanje podatkov je mešanica programske opreme in človeškega vedenja in je tradicionalno vzpostavljen s skrbnikom podatkov kot del programa. The skrbnik podatkov je odgovoren za vzdrževanje programa za upravljanje podatkov in bi bil običajno odgovoren za podporo kataloga podatkov. S pomočjo drugega osebja je ta posameznik odgovoren za definiranje metapodatkov, ki se zbirajo, in razvoj metapodatkov, ki se uporabljajo za interne pakete podatkov.
Uporaba podatkovnih katalogov metapodatki za zagotovitev kratkih opisov datotek ali podatkovnih paketov (tako da je datoteka ali paket prepoznaven) in njihove lokacije. Osnovni metapodatki (po skrbniku podatkov) lahko ponudijo tudi kontekstualne informacije, ki raziskovalcem pomagajo najti koristne informacije. (Nekaj tako preprostega, kot je vključitev datuma v metapodatke, lahko pomaga ugotoviti, ali je paket podatkov uporaben.)
Funkcije sledljivosti, ki jih ponuja katalog podatkov, lahko spodbujajo tudi dobro kakovost podatkov, saj zagotavljajo možnost sledenja in popravljanja napak v podatkih.
Podatkovna linija, upravljanje podatkov in katalogi podatkov
Imenuje se proces opazovanja in razumevanja podatkov, ko tečejo od svojega vira do porabe podatkovna linija. To vključuje vse transformacije, ki so jim bili podatki podvrženi. Prikazuje, kako so bili podatki preoblikovani, kaj se je spremenilo in zakaj so se spremenili. Podatkovna linija sledi gibanju podatkov od uporabnika do uporabnika in sistema do sistema ter zagotavlja sled v celotnem življenjskem ciklu podatkov.
Postopek podatkovne linije je podprt s podatkovnim katalogom in podjetjem omogoča sledenje in popravljanje napak v podatkih.
Ker je katalog podatkov del programa Data Governance in podatkovna linija podpira shranjevanje visokokakovostnih podatkov, to združevanje sistemov in ciljev ustvarja presečišče in zagotavlja informacije, ki pomagajo menedžerjem sprejemati premišljene poslovne odločitve. Natančni podatki lahko ustvarijo pomembne vpoglede in podpirajo boljše odločanje.
Vsebujejo strojno učenje
Izvajanje a strojno učenje (ML) razširjena rešitev kataloga podatkov bo izboljšala učinkovitost programa za upravljanje podatkov in programske opreme za analizo.
Katalogi podatkov, razširjeni z ML, podpirajo uporabo metapodatkov za avtomatizacijo integracije podatkov, kakovosti podatkov, priprave podatkov in številnih drugih dejavnosti upravljanja podatkov. To pa izboljša splošno učinkovitost programa za upravljanje podatkov. Zaradi izboljšane učinkovitosti se pospeši proces razvoja poslovnih vpogledov.
Sodoben podatkovni katalog, razširjen z ML, se lahko uporabi za vzpostavitev semantičnih odnosov med podatkovnimi paketi z uporabo grafi znanja.
Presečišče pravne skladnosti
Evropa, Kalifornija in Brazilija so se odločile, da je pomembno zaščititi osebne podatke svojih državljanov. V Evropi se zakon, ki jih ščiti, imenuje Splošna uredba o varstvu podatkov (GDPR). V Kaliforniji se imenuje Kalifornijski zakon o zasebnosti potrošnikov (CCPA). V Braziliji imajo Lei Geral de Proteção de Dados Pessoais (LGPD) ali v angleščini General Personal Data Protection Law.
Podjetja po vsem svetu morajo upoštevati to zaščito ali pa se bodo soočila s strogimi kaznimi.
Program za upravljanje podatkov je običajno zasnovan za zaščito osebnih podatkov s politikami, ki preprečujejo naključno in neetično ogledovanje osebnih podatkov: to počne z uporabo podatkovnih katalogov. Katalog podatkov podpira program Data Governance pri varovanju osebnih podatkov strank.
Sistem opisov metapodatkov in označevanja v katalogu se uporablja za podporo »načelo omejitve shranjevanja.” Za regulativne namene je datum poteka veljavnosti osebnih podatkov običajno vključen v paket podatkov. Katalog podatkov podpira odstranjevanje osebnih podatkov z uporabo metapodatkovne oznake.
Pregled
Uporabniki podatkov na splošno zaupajo podatkom organizacije, če so znotraj organizacije s programom za upravljanje podatkov, ki vključuje katalog podatkov. Podatkovni katalogi podpirajo in obdelujejo politike poslovnega programa za upravljanje podatkov ter pravne regulativne zahteve. Podatkovni katalogi lahko podpirajo tudi potrebe raziskovalcev z zagotavljanjem samopostrežnega odkrivanja podatkov. Podatkovni katalogi vključujejo strojno učenje, umetna inteligenca pa lahko pospeši procese zbiranja metapodatkov, označevanja in semantičnega sklepanja.
Najpomembnejša vrednost podatkovnih katalogov pa je izboljšana produktivnost podatkovnih skupin, saj lahko podatkovni katalogi spodbujajo sodelovanje. Mnoge organizacije imajo svoje podatke shranjene v silosih, pri čemer so podatki v bistvu skriti pred raziskovalci. Podatkovne ekipe lahko porabijo ogromno časa za iskanje podatkov. Podatkovni katalogi odpravljajo ali vsaj zmanjšujejo uporabo podatkovnih silosov, zaradi česar so podatki bolj dostopni vsem.
Slika, uporabljena pod licenco Shutterstock.com
- Distribucija vsebine in PR s pomočjo SEO. Okrepite se še danes.
- Platoblockchain. Web3 Metaverse Intelligence. Razširjeno znanje. Dostopite tukaj.
- vir: https://www.dataversity.net/data-governance-and-data-catalogs-where-do-they-intersect/
- a
- sposobnost
- O meni
- pospeši
- pospešeno
- dostopen
- natančnost
- natančna
- Doseči
- Zakon
- dejavnosti
- pomoč
- vsi
- omogoča
- že
- zneski
- analitika
- in
- okoli
- urejeno
- Arsenal
- umetni
- Umetna inteligenca
- Sredstva
- pomoč
- pomoč
- poskus
- Povečana
- avtomatizirati
- Osnovni
- ker
- počutje
- Boljše
- med
- Knjiga
- Brazilija
- poslovni
- podjetja
- california
- Kalifornijski zakon o zasebnosti potrošnikov
- se imenuje
- Zmogljivosti
- priložnostne
- Katalog
- kataloge
- CCPA
- centralizirano
- Državljani
- Zapri
- sodelovanje
- sodelavci
- zbirka
- komunicirajo
- skladnost
- Prepričani
- Potrošnik
- zasebnost potrošnikov
- poraba
- ozadje
- kontekstualno
- Nadzor
- koordinate
- stroški
- ustvari
- datum
- Podatkovna analiza
- integracija podatkov
- Upravljanje podatkov
- Priprava podatkov
- Varstvo podatkov
- zakon o varstvu podatkov
- kakovosti podatkov
- nabori podatkov
- shranjevanje podatkov
- skladišča podatkov
- PODATKOVNOST
- Datum
- Ponudba
- odločil
- Odločanje
- odločitve
- definiranje
- dostavo
- opis
- Oblikovanje
- zasnovan
- Ugotovite,
- razvoju
- Odkritje
- enostavno
- učinkovitosti
- učinkovite
- učinkovito
- odpravo
- uveljavljanje
- Angleščina
- obogatiti
- zagotovitev
- napake
- v bistvu
- vzpostaviti
- ustanovljena
- Evropa
- Obraz
- seznanjeni
- Lastnosti
- file
- datoteke
- Najdi
- Tokovi
- Osredotočite
- format
- iz
- GDPR
- splošno
- splošni podatki
- Splošna uredba o varstvu podatkov
- splošno
- dobili
- Cilj
- Cilji
- dobro
- upravljanje
- pomoč
- Pomaga
- skrita
- visoka
- visoka kvaliteta
- Kako
- Vendar
- HTTPS
- velika
- človeškega
- nujno
- Pomembno
- izboljšanje
- izboljšalo
- izboljšuje
- in
- vključujejo
- vključeno
- vključuje
- Vključno
- individualna
- Podatki
- obvestila
- vpogledi
- integracija
- celovitost
- Intel
- Intelligence
- križišče
- inventar
- IT
- Ključne
- znanje
- zakon
- Voditelji
- učenje
- Pravne informacije
- Stopnja
- Knjižnica
- Licenca
- LIMIT
- Omejitev
- nahaja
- kraj aktivnosti
- Long
- Poglej
- stroj
- strojno učenje
- Znamka
- IZDELA
- Izdelava
- upravljanje
- upravljanje
- Vodje
- več
- max širine
- smiselna
- združitev
- metapodatki
- ML
- sodobna
- več
- učinkovitejše
- Najbolj
- Gibanje
- potrebe
- Običajno
- ponudba
- ponujen
- Da
- Organizacija
- organizacije
- Organizirano
- Ostalo
- Splošni
- paket
- pakete
- del
- Osebni
- osebni podatki
- Mesta
- platon
- Platonova podatkovna inteligenca
- PlatoData
- politike
- Ravno
- Predsednik
- preprečiti
- primarni
- zasebnost
- Postopek
- Procesi
- proizvodnjo
- Izdelek
- upravljanje izdelkov
- produktivnost
- Program
- programi
- spodbujanje
- zaščito
- zaščito
- zaščita
- zagotavljajo
- zagotavlja
- zagotavljanje
- Namen
- namene
- kakovost
- vprašanja
- hitro
- priznajo
- Uredba
- regulatorni
- Razmerja
- zahteva
- Zahteve
- Raziskave
- raziskovalci
- odgovorna
- varna
- zavarovanje
- varnost
- Samopostrežba
- višji
- Občutek
- nastavite
- Kompleti
- shouldnt
- Razstave
- Shutterstock
- Enostavno
- sam
- So
- Software
- Rešitev
- nekaj
- Nekaj
- vir
- gledano
- preživeti
- Osebje
- shranjevanje
- shranjeni
- taka
- primerna
- podpora
- Podprti
- Podpora
- Podpira
- sistem
- sistemi
- Bodite
- Skupine
- O
- zakon
- svet
- njihove
- skozi
- vsej
- čas
- do
- skupaj
- Sledljivost
- sledenje
- tradicionalno
- transformacije
- preoblikovati
- Tribal
- Zaupajte
- zaupa
- zaupanja
- OBRAT
- pod
- osnovni
- razumevanje
- uporabnost
- uporaba
- uporabnik
- Uporabniki
- vrednost
- raznolikost
- različnih
- Podpredsednica
- washington
- načini
- Kaj
- ali
- ki
- medtem
- bo
- v
- delo
- delati skupaj
- svet
- bi
- zefirnet