Automated Data Analytics (ADA) AWS:ssä on AWS-ratkaisu, jonka avulla voit saada merkityksellisiä oivalluksia tiedoista muutamassa minuutissa yksinkertaisen ja intuitiivisen käyttöliittymän kautta. ADA tarjoaa AWS-natiivin data-analytiikka-alustan, jota dataanalyytikot voivat heti käyttää useisiin eri käyttötapauksiin. ADA:n avulla tiimit voivat ottaa vastaan, muuttaa, hallita ja hakea erilaisia tietojoukkoja useista tietolähteistä ilman erityisiä teknisiä taitoja. ADA tarjoaa joukon valmiiksi rakennetut liittimet nielemään tietoja useista eri lähteistä, mukaan lukien Amazonin yksinkertainen tallennuspalvelu (Amazon S3), Amazon Kinesis -tietovirrat, amazonin pilvikello, Amazon CloudTrailja Amazon DynamoDB samoin kuin monet muut.
ADA tarjoaa perustavanlaatuisen alustan, jota dataanalyytikot voivat käyttää erilaisissa käyttötapauksissa, mukaan lukien IT, rahoitus, markkinointi, myynti ja turvallisuus. ADA:n valmis CloudWatch-dataliitin mahdollistaa tietojen siirtämisen CloudWatch-lokeista samassa AWS-tilissä, jossa ADA on otettu käyttöön, tai toiselta AWS-tililtä.
Tässä viestissä osoitamme, kuinka sovelluskehittäjä tai sovellusten testaaja voi käyttää ADA:ta saadakseen toiminnallisia näkemyksiä AWS:ssä toimivista sovelluksista. Esittelemme myös, kuinka voit käyttää ADA-ratkaisua yhteyden muodostamiseen eri tietolähteisiin AWS:ssä. Me ensin ottaa käyttöön ADA-ratkaisun AWS-tilille ja määritä ADA-ratkaisu luomalla datatuotteet käyttämällä dataliittimiä. Liitämme sitten erilliset tietojoukot ADA Query Workbenchin avulla ja teemme korreloituja tietoja käyttämällä tuttua SQL (Structured Query Language) kieltä saadaksemme näkemyksiä. Osoitamme myös, kuinka ADA voidaan integroida liiketoimintatiedon (BI) työkaluihin, kuten Tableau, tietojen visualisoimiseksi ja raporttien luomiseksi.
Ratkaisun yleiskatsaus
Tässä osiossa esittelemme demon ratkaisuarkkitehtuurin ja selitämme työnkulkua. Esittelyä varten räätälöity sovellus simuloidaan käyttämällä AWS Lambda toiminto, joka lähettää sisäänkirjautumisia Apache-lokimuoto esiasetetulla aikavälillä käyttämällä Amazon EventBridge. Tämä standardimuoto voidaan tuottaa useilla eri web-palvelimilla ja lukea useilla lokianalyysiohjelmilla. Sovelluksen (Lambda-toiminto) lokit lähetetään CloudWatch-lokiryhmään. Historialliset sovelluslokit tallennetaan S3-säihöön viite- ja kyselytarkoituksiin. Hakutaulukko, jossa on luettelo HTTP-tilakoodit kuvaukset on tallennettu DynamoDB-taulukkoon. Nämä kolme toimivat lähteinä, joista tiedot syötetään ADA:hen korrelaatiota, kyselyä ja analysointia varten. Me ottaa käyttöön ADA-ratkaisun AWS-tilille ja perustaa ADA. Luomme sitten datatuotteet ADA:n sisällä CloudWatch-lokiryhmä, S3-kauhaja DynamoDB. Kun tietotuotteita määritetään, ADA muodostaa dataputkia, jotta se voi ottaa tiedon lähteistä. ADA Query Workbenchin avulla voit kysyä syötetyistä tiedoista yksinkertaisella SQL:llä sovellusten vianmääritykseen tai ongelman diagnosointiin.
Seuraava kaavio tarjoaa yleiskatsauksen ADA:n arkkitehtuurista ja työnkulusta saadakseen tietoa sovelluslokeista.
Työnkulku sisältää seuraavat vaiheet:
- Lambda-toiminto on suunniteltu käynnistymään 2 minuutin välein EventBridgen avulla.
- Lambda-toiminto lähettää lokeja, jotka on tallennettu määritettyyn CloudWatch-lokiryhmään
/aws/lambda/CdkStack-AdaLogGenLambdaFunction
. Sovelluslokit luodaan käyttämällä Apache Log Format -skeemaa, mutta ne tallennetaan CloudWatch-lokiryhmään JSON-muodossa. - CloudWatchin, Amazon S3:n ja DynamoDB:n datatuotteet luodaan ADA:ssa. CloudWatch-datatuote muodostaa yhteyden CloudWatch-lokiryhmään, johon sovelluksen (Lambda-toiminto) lokit on tallennettu. Amazon S3 -liitin muodostaa yhteyden S3-ämpärikansioon, johon historialliset lokit on tallennettu. DynamoDB-liitin muodostaa yhteyden DynamoDB-taulukkoon, johon on tallennettu tilakoodit, joihin sovellus viittaa, ja historialliset lokit.
- Jokaiselle datatuotteelle ADA ottaa käyttöön dataputkiinfrastruktuurin tietojen keräämiseksi lähteistä. Kun tietojen käsittely on valmis, voit kirjoittaa kyselyitä SQL:llä ADA Query Workbenchin kautta.
- Voit kirjautua sisään ADA-portaaliin ja kirjoittaa SQL-kyselyitä Query Workbenchistä saadaksesi tietoa sovelluslokeista. Voit halutessasi tallentaa kyselyn ja jakaa kyselyn muiden ADA-käyttäjien kanssa samassa toimialueessa. ADA-kyselyominaisuutta käyttää Amazon Athena, joka on palvelimeton, vuorovaikutteinen analytiikkapalvelu, joka tarjoaa yksinkertaistetun ja joustavan tavan analysoida petatavuja tietoa.
- Tableau on määritetty käyttämään ADA-tietotuotteita ADA-lähtöpäätepisteiden kautta. Luo sitten kojelauta, jossa on kaksi kaaviota. Ensimmäinen kaavio on lämpökartta, joka näyttää sovelluksen API-päätepisteiden kanssa korreloivien HTTP-virhekoodien yleisyyden. Toinen kaavio on pylväskaavio, joka näyttää 10 suosituinta sovellusliittymää, joissa on HTTP-virhekoodien kokonaismäärä historiallisista tiedoista.
Edellytykset
Tätä viestiä varten sinun on täytettävä seuraavat edellytykset:
- Asenna AWS-komentoriviliitäntä (AWS CLI), AWS Cloud Development Kit (AWS CDK) edellytyksiä, TypeScript-kohtainen edellytyksiäja mennä.
- Sijoittaa ADA-ratkaisu AWS-tililläsi
us-east-1
Alue.- Anna järjestelmänvalvojan sähköpostiosoite käynnistäessäsi ADA:n AWS-pilven muodostuminen pino. Tätä tarvitaan, jotta ADA lähettää pääkäyttäjän salasanan. Järjestelmänvalvojan puhelinnumero tarvitaan kertaluonteisen salasanaviestin vastaanottamiseen, jos monitekijätodennus (MFA) on käytössä. Tässä esittelyssä MFA ei ole käytössä.
- Rakenna ja ota käyttöön esimerkkisovellus (saatavilla osoitteessa GitHub repo) ratkaisu, jotta seuraavat resurssit voidaan varata tilillesi
us-east-1
Alue:- Lambda-toiminto, joka simuloi lokisovellusta, ja EventBridge-sääntö, joka käynnistää sovellustoiminnon 2 minuutin välein.
- S3-säilö, jossa on asiaankuuluvat säilökäytännöt ja CSV-tiedosto, joka sisältää historialliset sovelluslokit.
- DynamoDB-taulukko, jossa on hakutiedot.
- merkityksellinen AWS-henkilöllisyyden ja käyttöoikeuksien hallinta Palveluiden edellyttämät (IAM) roolit ja käyttöoikeudet.
- Valinnaisesti, asenna Pöytätyöpöytä, kolmannen osapuolen BI-palveluntarjoaja. Tässä viestissä käytämme Tableau Desktop -versiota 2021.2. Tableau Desktop -sovelluksen lisensoidun version käyttäminen maksaa. Lisätietoja on kohdassa Tableau-lisenssit tietoja.
Ota käyttöön ja määritä ADA
Kun ADA on otettu käyttöön onnistuneesti, voit kirjaudu sisään käyttämällä asennuksen aikana annettua järjestelmänvalvojan sähköpostiosoitetta. Sitten luot a verkkotunnuksen nimeltään CW_Domain
. Verkkotunnus on käyttäjän määrittämä tietotuotteiden kokoelma. Verkkotunnus voi olla esimerkiksi tiimi tai projekti. Verkkotunnukset tarjoavat käyttäjille jäsennellyn tavan järjestää tietotuotteitaan ja hallita käyttöoikeuksia.
- Valitse ADA-konsolissa Verkkotunnukset navigointipaneelissa.
- Valita Luo verkkotunnus.
- Kirjoita nimi (
CW_Domain
) ja kuvaus ja valitse sitten Lähetä.
Määritä mallisovellusinfrastruktuuri AWS CDK:n avulla
AWS CDK -ratkaisu, joka ottaa käyttöön esittelysovelluksen, isännöi GitHub. Repon kloonauksen ja AWS CDK -projektin määrittämisen vaiheet on kuvattu yksityiskohtaisesti tässä osiossa. Ennen kuin suoritat nämä komennot, varmista määrittää AWS-kirjautumistietosi. Luo kansio, avaa pääte ja siirry kansioon, johon AWS CDK -ratkaisu on asennettava. Suorita seuraava koodi:
Nämä vaiheet suorittavat seuraavat toiminnot:
- Asenna kirjaston riippuvuudet
- Rakenna projekti
- Luo kelvollinen CloudFormation-malli
- Ota pino käyttöön AWS CloudFormationin avulla AWS-tililläsi
Käyttöönotto kestää noin 1–2 minuuttia ja luo DynamoDB-hakutaulukon, Lambda-funktion ja S3-säihön, joka sisältää historialliset lokitiedostot lähtöinä. Kopioi nämä arvot tekstinmuokkaussovellukseen, kuten Muistioon.
Luo ADA-tietotuotteita
Luomme kolme erilaista datatuotetta tätä esittelyä varten, yhden kullekin tietolähteelle, jolta kysyt saadaksesi toiminnallisia tietoja. Tietotuote on tietojoukko (tietokokoelma, kuten taulukko tai CSV-tiedosto), joka on tuotu onnistuneesti ADA:hen ja josta voidaan tehdä kyselyjä.
Luo CloudWatch-datatuote
Ensin luomme tietotuotteen sovelluslokeille asettamalla ADA:n ottamaan CloudWatch-lokiryhmän mallisovellukselle (Lambda-toiminto). Käytä CdkStack.LambdaFunction
ulostulo saadaksesi Lambda-funktion ARN ja etsimään vastaavan CloudWatch-lokiryhmän ARN CloudWatch-konsolista.
Suorita sitten seuraavat vaiheet:
- Siirry ADA-konsolissa ADA-verkkotunnukseen ja luo CloudWatch-tietotuote.
- varten Nimi¸ kirjoita nimi.
- varten Lähdetyyppi, valita amazonin pilvikello.
- Poista Automaattinen PII.
ADA:ssa on oletusarvoisesti käytössä oleva ominaisuus, joka tunnistaa automaattisesti henkilökohtaisia tunnistetietoja (PII) tuonnin aikana. Tässä esittelyssä poistamme tämän vaihtoehdon datatuotteelta, koska henkilökohtaisten tunnistetietojen löytäminen ei kuulu tämän esittelyn piiriin.
- Valita seuraava.
- Etsi ja valitse edellisestä vaiheesta kopioitu CloudWatch-lokiryhmä ARN.
- Kopioi lokiryhmä ARN.
- Syötä tietotuotesivulle lokiryhmä ARN.
- varten CloudWatch-kysely, kirjoita kysely, jonka haluat ADA:n saavan lokiryhmästä.
Tässä esittelyssä teemme kyselyn @message-kenttään, koska olemme kiinnostuneita saamaan sovelluslokit lokiryhmästä.
- Valitse, kuinka datapäivitykset käynnistyvät ensimmäisen tuonnin jälkeen.
ADA voidaan määrittää keräämään dataa lähteestä joustavin väliajoin (jopa 15 minuuttia tai myöhemmin) tai pyynnöstä. Demoa varten asetimme datapäivitykset toimimaan tunneittain.
- Valita seuraava.
Seuraavaksi ADA muodostaa yhteyden lokiryhmään ja kysyy skeemaa. Koska lokit ovat Apache Log Format -muodossa, muunnamme lokit erillisiin kenttiin, jotta voimme suorittaa kyselyitä tietyissä lokikentissä. ADA tarjoaa neljä oletusarvo muunnoksia ja tukee mukautettua muuntamista Python-komentosarjan avulla. Tässä esittelyssä suoritamme mukautetun Python-komentosarjan JSON-viestikentän muuntamiseksi Apache-lokimuodon kentäksi.
- Valita Muunna skeemaa.
- Valita Luo uusi muunnos.
- Lataa
apache-log-extractor-transform.py
käsikirjoitus kohteesta/asset/transform_logs/
kansio. - Valita Lähetä.
ADA muuttaa CloudWatch-lokit komentosarjan avulla ja esittää käsitellyn skeeman.
- Valita seuraava.
- Tarkista viimeisessä vaiheessa vaiheet ja valitse Lähetä.
ADA aloittaa tietojen käsittelyn, luo dataputket ja valmistelee CloudWatch-lokiryhmät kyselyitä varten Query Workbenchistä. Tämä prosessi kestää muutaman minuutin, ja se näkyy ADA-konsolissa alla Datatuotteet.
Luo Amazon S3 -tietotuote
Toistamme vaiheet historiallisten lokien lisäämiseksi Amazon S3 -tietolähteestä ja viitetietojen etsimiseksi DynamoDB-taulukosta. Näille kahdelle tietolähteelle emme luo mukautettuja muunnoksia, koska tietomuodot ovat CSV-muodossa (historialliset lokit) ja avainattribuutit (viitehakutiedot).
- Luo uusi tietotuote ADA-konsolissa.
- Kirjoita nimi (
hist_logs
) ja valitse Amazon S3. - Kopioi Amazon S3 URI (teksti sen jälkeen
arn:aws:s3:::
) AlkaenCdkStack.S3
lähtömuuttuja ja siirry Amazon S3 -konsoliin. - Kirjoita kopioitu teksti hakukenttään, avaa S3-ämpäri ja valitse
/logs
kansio ja valitse Kopioi S3 URI.
Historialliset lokit tallennetaan tälle polulle.
- Siirry takaisin ADA-konsoliin ja syötä kopioitu S3 URI:lle S3 sijainti.
- varten Päivitä triggerivalitse On Demand koska historialliset lokit päivitetään määrittelemättömällä tiheydellä.
- varten Päivitä käytäntövalitse Liitä lisätäksesi äskettäin tuodut tiedot olemassa oleviin tietoihin.
- Valita seuraava.
ADA käsittelee valitun kansiopolun tiedostojen skeeman. Koska lokit ovat CSV-muodossa, ADA pystyy lukemaan sarakkeiden nimet ilman lisämuunnoksia. Kuitenkin sarakkeet status_code
ja request_size
ADA päättelee ne pitkäksi tyypiksi. Haluamme pitää saraketietotyypit johdonmukaisina tietotuotteiden välillä, jotta voimme yhdistää tietotaulukot ja tehdä tiedoista kyselyjä. Kolumni status_code
käytetään luomaan liitoksia tietotaulukoiden välillä.
- Valita Muunna skeemaa muuttaaksesi kahden sarakkeen tietotyypit merkkijonotietotyypeiksi.
Huomaa korostetut sarakkeiden nimet Kaavion esikatselu ruutuun ennen tietotyyppimuunnosten käyttöönottoa.
- In Muutossuunnitelma ruutu, alla Sisäänrakennetut muunnokset, valitse Käytä kartoitus.
Tämän vaihtoehdon avulla voit vaihtaa tietotyyppiä tyypistä toiseen.
- In Käytä kartoitus osio, poista valinta Pudota muut kentät.
Jos tätä vaihtoehtoa ei ole poistettu käytöstä, vain muunnetut sarakkeet säilytetään ja kaikki muut sarakkeet hylätään. Koska haluamme säilyttää kaikki sarakkeet, poistamme tämän vaihtoehdon käytöstä.
- Alle Kenttäkartoitukset¸ varten Vanha nimi ja Uusi nimi, tulla sisään
status_code
ja Uusi tyyppi, tulla sisäänstring
. - Valita Lisää tavara.
- varten Vanha nimi ja Uusi nimi¸ syötä request_size ja for Uusi tietotyyppi, syötä merkkijono.
- Valita Lähetä.
ADA soveltaa kartoitusmuutosta Amazon S3 -tietolähteeseen. Huomaa saraketyypit kohdassa Kaavion esikatselu ruudussa.
- Valita Näytä näyte esikatsellaksesi tietoja, joissa muunnos on käytössä.
ADA näyttää PII-tietojen kuittauksen varmistaakseen, että vain valtuutetut käyttäjät voivat tarkastella tietoja tai että tietojoukko ei sisällä henkilökohtaisia tunnistetietoja.
- Valita Samaa mieltä jatkaaksesi näytetietojen katselua.
Huomaa, että skeema on identtinen CloudWatchin lokiryhmäskeeman kanssa, koska sekä nykyiset sovellukset että historialliset sovelluksen lokit ovat Apache-lokimuodossa.
- Tarkista viimeisessä vaiheessa kokoonpano ja valitse Lähetä.
ADA aloittaa tietojen käsittelyn Amazon S3 -lähteestä, luo taustainfrastruktuurin ja valmistelee datatuotteen. Tämä prosessi kestää muutaman minuutin tietojen koosta riippuen.
Luo DynamoDB-tietotuote
Lopuksi luomme DynamoDB-tietotuotteen. Suorita seuraavat vaiheet:
- Luo uusi tietotuote ADA-konsolissa.
- Kirjoita nimi (
lookup
) ja valitse Amazon DynamoDB. - Anna
Cdk.DynamoDBTable
lähtömuuttuja for DynamoDB-taulukko ARN.
Tämä taulukko sisältää keskeiset attribuutit, joita käytetään hakutaulukkona tässä esittelyssä. Hakudatassa käytämme HTTP-koodeja sekä pitkiä ja lyhyitä koodien kuvauksia. Voit myös käyttää vaihtoehtona PostgreSQL-, MySQL- tai CSV-tiedostolähdettä.
- varten Päivitä triggerivalitse Tarpeen vaatiessa.
Päivitykset ovat tarpeen, koska haku on enimmäkseen viitetarkoituksessa kyselyn aikana, ja kaikki hakutietojen päivitykset voidaan päivittää ADA:ssa on-demand-triggereillä.
- Valita seuraava.
ADA lukee skeeman taustalla olevasta DynamoDB-skeemasta ja esittää sarakkeen nimen ja tyypin valinnaista muuntamista varten. Jatkamme oletusskeeman valintaa, koska saraketyypit ovat yhdenmukaisia CloudWatch-lokiryhmän ja Amazon S3 CSV -tietolähteen tyyppien kanssa. Kun tietotyypit ovat yhdenmukaisia kaikissa tietolähteissä, voimme kirjoittaa tietueiden hakemista koskevia kyselyitä yhdistämällä taulukot sarakekenttien avulla. Esimerkiksi sarake key
DynamoDB-skeemassa vastaa status_code
Amazon S3- ja CloudWatch-datatuotteissa. Voimme kirjoittaa kyselyitä, jotka voivat yhdistää kolme taulukkoa sarakkeen nimen avulla key
. Esimerkki on esitetty seuraavassa osiossa.
- Valita Jatka nykyisellä mallilla.
- Tarkista kokoonpano ja valitse Lähetä.
ADA käsittelee tiedot DynamoDB-taulukkotietolähteestä ja valmistelee tietotuotteen. Tietojen koosta riippuen tämä prosessi kestää muutaman minuutin.
Nyt meillä on kaikki kolme ADA:n käsittelemää datatuotetta, jotka ovat käytettävissäsi kyselyjen suorittamiseen.
Käytä Query Workbenchiä tietojen kyselyyn
ADA mahdollistaa kyselyjen suorittamisen tietotuotteille samalla, kun otat tietolähteen yhteen ja tuodaan sen saataville SQL:n (Structured Query Language) avulla. Voit kirjoittaa kyselyitä ja yhdistää taulukoita aivan kuten tekisit kyselyitä relaatiotietokannan taulukoista. Esittelemme ADA:n kyselykyvyn kahdella käyttäjäskenaariolla. Molemmissa skenaarioissa yhdistämme sovelluslokitietojoukon virhekoodien hakutaulukkoon. Ensimmäisessä käyttötapauksessa pyydämme nykyisiä sovelluslokeja tunnistamaan 10 eniten käytettyä sovelluksen päätepistettä sekä vastaavat HTTP-tilakoodit:
Toisessa esimerkissä teemme kyselyn historiallisten lokien taulukosta saadaksemme 10 eniten virheitä sisältäviä sovelluksen päätepistettä ymmärtääksemme päätepistekutsumallin:
Kyselyn lisäksi voit halutessasi tallentaa kyselyn ja jakaa tallennetun kyselyn muiden käyttäjien kanssa samassa toimialueessa. Jaetut kyselyt ovat käytettävissä suoraan Query Workbenchistä. Kyselyn tulokset voidaan myös viedä CSV-muotoon.
Visualisoi ADA-datatuotteita Tableaussa
ADA tarjoaa mahdollisuuden kytkeä kolmannen osapuolen BI-työkaluihin tietojen visualisointiin ja raporttien luomiseen ADA-tietotuotteista. Tässä esittelyssä käytämme ADA:n alkuperäistä integraatiota Tableaun kanssa visualisoidaksemme kolmen aiemmin määrittämämme datatuotteen tiedot. Käytä Tableaun Athena-liitintä ja seuraa ohjeita Taulukkokokoonpano, voit määrittää ADA:n tietolähteeksi Tableaussa. Kun Tableaun ja ADA:n välille on muodostettu onnistunut yhteys, Tableau täyttää kolme tietotuotetta Tableau-luetteloon cw_domain
.
Luomme sitten suhteen kolmen tietokannan välille käyttämällä HTTP-tilakoodia liitossarakkeena, kuten seuraavassa kuvakaappauksessa näkyy. Tableaun avulla voimme työskennellä online- ja offline-tilassa tietolähteiden kanssa. Online-tilassa Tableau muodostaa yhteyden ADA:han ja kyselee datatuotteita reaaliajassa. Offline-tilassa voimme käyttää Ote mahdollisuus poimia tiedot ADA:sta ja tuoda tiedot Tableauhun. Tässä esittelyssä tuomme tiedot Tableau-palveluun, jotta kyselyt reagoivat paremmin. Tallennamme sitten Tableau-työkirjan. Voimme tarkastaa tietolähteiden tiedot valitsemalla tietokannan ja Päivitä nyt.
Tableaun tietolähteiden konfiguraatioiden avulla voimme luoda mukautettuja raportteja, kaavioita ja visualisointeja ADA-tietotuotteisiin. Tarkastellaan kahta käyttötapausta visualisoinneille.
Kuten seuraavassa kuvassa näkyy, visualisoimme HTTP-virheiden esiintymistiheyden sovelluksen päätepisteiden mukaan käyttämällä Tableaun sisäänrakennettua lämpökartta kartoittaa. Suodatimme HTTP-tilakoodit sisältämään vain 4xx- ja 5xx-alueen virhekoodit.
Loimme myös pylväskaavion, joka kuvaa sovelluksen päätepisteitä historiallisista lokeista, jotka on järjestetty HTTP-virhekoodien määrän mukaan. Tästä kaaviosta voimme nähdä, että /v1/server/admin
päätepiste on luonut eniten HTTP-virhetilakoodeja.
Puhdistaa
Esimerkkisovellusinfrastruktuurin puhdistaminen on kaksivaiheinen prosessi. Ensinnäkin, jos haluat poistaa tätä esittelyä varten varatun infrastruktuurin, suorita seuraava komento päätteessä:
Kirjoita seuraavaan kysymykseen y ja AWS CDK poistaa demoon käyttöön otetut resurssit:
Vaihtoehtoisesti voit poistaa resurssit AWS CloudFormation -konsolin kautta siirtymällä CdkStack-pinoon ja valitsemalla Poista.
Toinen vaihe on ADA:n asennuksen poistaminen. Katso ohjeet kohdasta Poista ratkaisu.
Yhteenveto
Tässä viestissä osoitimme, kuinka ADA-ratkaisua käytetään oivallusten saamiseksi kahteen eri tietolähteeseen tallennetuista sovelluslokeista. Osoitimme, kuinka ADA asennetaan AWS-tilille ja demokomponentit otetaan käyttöön AWS CDK:n avulla. Loimme datatuotteita ADA:ssa ja konfiguroimme datatuotteet vastaavien tietolähteiden kanssa ADA:n sisäänrakennettujen tietoliittimien avulla. Esitimme, kuinka tietotuotteista voidaan tehdä kyselyitä tavallisilla SQL-kyselyillä ja luoda oivalluksia lokitiedoista. Yhdistimme myös Tableau Desktop -asiakkaan, kolmannen osapuolen BI-tuotteen, ADA:han ja osoitimme kuinka luoda visualisointeja datatuotteita vastaan.
ADA automatisoi erilaisten tietojoukkojen käsittelyn, muuntamisen, hallitsemisen ja kyselyn sekä yksinkertaistaa datan elinkaaren hallintaa. ADA:n valmiiksi rakennettujen liittimien avulla voit syöttää tietoja eri tietolähteistä. Ohjelmistotiimit, joilla on perustiedot AWS-tuotteista ja -palveluista, pystyvät perustamaan toiminnallisen data-analytiikkaalustan muutamassa tunnissa ja tarjoamaan turvallisen pääsyn tietoihin. Tiedoista voi sitten tehdä kyselyitä helposti ja nopeasti intuitiivisen ja erillisen verkkokäyttöliittymän avulla.
Kokeile ADA:ta tänään hallitaksesi tietoja ja saada niistä oivalluksia helposti.
Tietoja kirjoittajista
Aparajithan Vaidyanathan on johtava yritysratkaisujen arkkitehti AWS:ssä. Hän tukee yritysasiakkaita siirtymään ja modernisoimaan työtaakkaa AWS-pilvessä. Hän on pilviarkkitehti, jolla on yli 23 vuoden kokemus yritys-, suur- ja hajautettujen ohjelmistojärjestelmien suunnittelusta ja kehittämisestä. Hän on erikoistunut koneoppimiseen ja dataanalytiikkaan keskittyen tieto- ja ominaisuussuunnitteluun. Hän on intohimoinen maratonjuoksija ja hänen harrastuksiaan ovat vaellus, pyöräily ja ajanvietto vaimonsa ja kahden pojan kanssa.
Rashim Rahman on Sydneystä, Australiasta kotoisin oleva ohjelmistokehittäjä, jolla on yli 10 vuoden kokemus ohjelmistokehityksestä ja arkkitehtuurista. Hän työskentelee ensisijaisesti suurten avoimen lähdekoodin AWS-ratkaisujen rakentamisessa yleisiin asiakaskäyttötapauksiin ja liiketoiminnan ongelmiin. Vapaa-ajallaan hän harrastaa urheilua ja viettää aikaa ystävien ja perheen kanssa.
Hafiz Saadullah on johtava tekninen tuotepäällikkö Amazon Web Services -palvelussa. Hafiz keskittyy AWS-ratkaisuihin, jotka on suunniteltu auttamaan asiakkaita ratkaisemaan yleisiä liiketoimintaongelmia ja käyttötapauksia.
- SEO-pohjainen sisällön ja PR-jakelu. Vahvista jo tänään.
- PlatoData.Network Vertical Generatiivinen Ai. Vahvista itseäsi. Pääsy tästä.
- PlatoAiStream. Web3 Intelligence. Tietoa laajennettu. Pääsy tästä.
- PlatoESG. Autot / sähköautot, hiili, CleanTech, energia, ympäristö, Aurinko, Jätehuolto. Pääsy tästä.
- PlatonHealth. Biotekniikan ja kliinisten kokeiden älykkyys. Pääsy tästä.
- ChartPrime. Nosta kaupankäyntipeliäsi ChartPrimen avulla. Pääsy tästä.
- BlockOffsets. Ympäristövastuun omistuksen nykyaikaistaminen. Pääsy tästä.
- Lähde: https://aws.amazon.com/blogs/big-data/derive-operational-insights-from-application-logs-using-automated-data-analytics-on-aws/
- :on
- :On
- :ei
- :missä
- $ YLÖS
- 10
- 11
- 12
- 14
- 15%
- 16
- 160
- 17
- 2021
- 3000
- 500
- 7
- 8
- 9
- a
- kyky
- pystyy
- Meistä
- pääsy
- Accessed
- saatavilla
- Tili
- poikki
- toimet
- ADA
- lisätä
- Lisäksi
- lisä-
- käsitellään
- admin
- Jälkeen
- vastaan
- Kaikki
- sallia
- mahdollistaa
- pitkin
- Myös
- vaihtoehto
- Amazon
- Amazon Web Services
- keskuudessa
- an
- analyysi
- analyytikot
- Analytics
- analysoida
- ja
- Toinen
- Kaikki
- Apache
- api
- API
- Hakemus
- sovellukset
- sovellettu
- käyttää
- Hakeminen
- arkkitehtuuri
- OVAT
- AS
- kunnianhimoinen
- At
- attribuutteja
- Australia
- Authentication
- valtuutettu
- Automatisoitu
- automaatti
- automaattisesti
- saatavissa
- AWS
- AWS-pilven muodostuminen
- takaisin
- taustaosa
- baari
- perustua
- perustiedot
- BE
- koska
- ollut
- ennen
- tilaustyönä
- välillä
- sekä
- Laatikko
- rakentaa
- Rakentaminen
- sisäänrakennettu
- liiketoiminta
- bisnesvaisto
- mutta
- by
- soittaa
- CAN
- valmiudet
- tapaus
- tapauksissa
- luettelo
- CD
- muuttaa
- Kaavio
- Kaaviot
- Valita
- valita
- asiakas
- pilvi
- koodi
- koodit
- kokoelma
- Sarake
- Pylväät
- Yhteinen
- täydellinen
- osat
- Konfigurointi
- määritetty
- kytkeä
- kytketty
- liitäntä
- Yhdistää
- Harkita
- johdonmukainen
- Console
- sisältää
- jatkaa
- korreloi
- Korrelaatio
- vastaava
- vastaa
- Hinta
- luoda
- luotu
- luo
- Luominen
- Valtakirja
- Nykyinen
- asiakassuhde
- asiakas
- Asiakkaat
- kojelauta
- tiedot
- Data Analytics
- tietojenkäsittely
- tietokanta
- tietokannat
- aineistot
- oletusarvo
- Kysyntä
- esittely
- osoittaa
- osoittivat
- Riippuen
- sijoittaa
- käyttöön
- käyttöönotto
- lauennut
- kuvaus
- suunniteltu
- suunnittelu
- pöytä-
- yksityiskohtainen
- yksityiskohdat
- Kehittäjä
- kehittämällä
- Kehitys
- diagnoosi
- eri
- suoraan
- vammaiset
- löytö
- näyttö
- jaettu
- useat
- ei
- verkkotunnuksen
- verkkotunnuksia
- Dont
- putosi
- aikana
- kukin
- Aikaisemmin
- helposti
- muokkaus
- myöskään
- käytössä
- mahdollistaa
- päätepiste
- päätepisteet
- Tekniikka
- varmistaa
- enter
- yritys
- yritysasiakkaat
- Enterprise-ratkaisut
- virhe
- virheet
- perustaa
- vakiintunut
- Eetteri (ETH)
- esimerkki
- olemassa
- experience
- Selittää
- selitys
- uute
- poimia tiedot
- tuttu
- perhe
- Ominaisuus
- harvat
- ala
- Fields
- Kuva
- filee
- Asiakirjat
- lopullinen
- rahoittaa
- Etunimi
- joustava
- Keskittää
- keskittyy
- jälkeen
- varten
- muoto
- neljä
- Taajuus
- ystäviä
- alkaen
- toiminto
- Saada
- tuottaa
- syntyy
- saada
- saada
- hallitseva
- Ryhmä
- Ryhmän
- Olla
- ottaa
- he
- auttaa
- Korostettu
- retkeily
- hänen
- historiallinen
- Harrastukset
- isännöi
- TUNTIA
- Miten
- Miten
- Kuitenkin
- HTML
- http
- HTTPS
- IAM
- identtinen
- tunnistaa
- Identiteetti
- if
- tuoda
- in
- sisältää
- sisältää
- Mukaan lukien
- tiedot
- Infrastruktuuri
- ensimmäinen
- oivalluksia
- asentaa
- asennus
- ohjeet
- integroitu
- integraatio
- Älykkyys
- vuorovaikutteinen
- kiinnostunut
- liitäntä
- tulee
- intuitiivinen
- vedotaan
- osallistuva
- kysymys
- IT
- yhdistää
- tuloaan
- Liitosten
- jpg
- json
- vain
- Pitää
- avain
- tuntemus
- Kieli
- suuri
- laaja
- Sukunimi
- myöhemmin
- käynnistäminen
- oppiminen
- Kirjasto
- Licensed
- elinkaari
- pitää
- RAJOITA
- linja
- Lista
- elää
- log
- hakkuu
- Pitkät
- katso
- Katso ylös
- kone
- koneoppiminen
- tehdä
- Tekeminen
- hoitaa
- johto
- johtaja
- monet
- kartta
- kartoitus
- Maraton
- Marketing
- asia
- mielekäs
- viesti
- UM
- ehkä
- vaeltaa
- pöytäkirja
- tila
- nykyaikaistaa
- lisää
- eniten
- enimmäkseen
- mozilla
- monitekstinen todentaminen
- MySQL
- nimi
- nimetty
- nimet
- syntyperäinen
- Navigoida
- navigointi
- suunnistus
- Tarve
- tarvitaan
- tarpeet
- Uusi
- hiljattain
- seuraava
- numero
- of
- Tarjoukset
- offline
- Vanha
- on
- Tarpeen vaatiessa
- ONE
- verkossa
- vain
- avata
- avoimen lähdekoodin
- toiminta-
- Vaihtoehto
- or
- tilata
- Muut
- Muuta
- ulos
- ulostulo
- yleiskatsaus
- sivulla
- lasi
- Salasana
- polku
- Kuvio
- suorittaa
- Oikeudet
- Henkilökohtaisesti
- puhelin
- pii
- putki
- Paikka
- tavallinen
- suunnitelma
- foorumi
- Platon
- Platonin tietotieto
- PlatonData
- politiikkaa
- Portal
- Kirje
- PostgreSQL
- powered
- Valmistella
- valmistelee
- edellytyksiä
- esittää
- lahjat
- preview
- edellinen
- pääasiallisesti
- Pääasiallinen
- Aikaisempi
- ongelmia
- jatkaa
- prosessi
- jalostettu
- Prosessit
- käsittely
- valmistettu
- Tuotteet
- tuotepäällikkö
- Tuotteemme
- Tuotteet ja palvelut
- Ohjelmat
- projekti
- toimittaa
- mikäli
- toimittaja
- tarjoaa
- tarkoitus
- tarkoituksiin
- Python
- kyselyt
- kysymys
- nopeasti
- alue
- Lue
- valmis
- vastaanottaa
- asiakirjat
- tarkoitettuja
- alue
- yhteys
- merkityksellinen
- poistaa
- toistaa
- Raportit
- pyyntö
- tarvitaan
- Esittelymateriaalit
- ne
- herkkä
- tulokset
- säilyttää
- arviot
- ratsastus
- roolit
- juuri
- Sääntö
- ajaa
- juoksija
- juoksu
- myynti
- sama
- Säästä
- Asteikko
- skenaariot
- suunniteltu
- laajuus
- Haku
- Toinen
- Osa
- turvallinen
- turvallisuus
- nähdä
- valittu
- valinta
- lähettää
- lähetetty
- erillinen
- palvella
- serverless
- palvelu
- Palvelut
- setti
- asetus
- Jaa:
- yhteinen
- Lyhyt
- esitetty
- Näytä
- Yksinkertainen
- yksinkertaistettu
- yksinkertaistaminen
- Koko
- taitoja
- So
- Tuotteemme
- ohjelmistokehitys
- ratkaisu
- Ratkaisumme
- lähde
- Lähteet
- asiantuntija
- erikoistunut
- erityinen
- määritelty
- menot
- Urheilu
- SQL
- pino
- itsenäinen
- standardi
- Alkaa
- alkaa
- Tila
- Vaihe
- Askeleet
- Levytila
- tallennettu
- jono
- jäsennelty
- onnistunut
- Onnistuneesti
- niin
- Tukee
- varma
- sydney
- järjestelmät
- taulukko
- Kuvaelma
- ottaa
- vie
- joukkue-
- tiimit
- Tekninen
- teknisiä taitoja
- terminaali
- että
- -
- Lähde
- heidän
- sitten
- Siellä.
- Nämä
- kolmannen osapuolen
- tätä
- kolmella
- Kautta
- aika
- että
- tänään
- työkalut
- ylin
- Top 10
- Yhteensä
- Muuttaa
- Muutos
- muunnokset
- transformoitu
- muuttamassa
- muunnoksia
- laukeaa
- kaksi
- tyyppi
- tyypit
- varten
- taustalla oleva
- ymmärtää
- päivitetty
- Päivitykset
- päälle
- URI
- us
- käyttää
- käyttölaukku
- käytetty
- käyttäjä
- Käyttöliittymä
- Käyttäjät
- käyttämällä
- arvot
- muuttuja
- lajike
- versio
- kautta
- Näytä
- haluta
- Tapa..
- we
- verkko
- verkkopalvelut
- HYVIN
- kun
- joka
- vaikka
- leveä
- Laaja valikoima
- vaimo
- tulee
- with
- sisällä
- ilman
- Referenssit
- työnkulku
- toimii
- olisi
- kirjoittaa
- vuotta
- te
- Sinun
- zephyrnet