Yhä digitalisoituvassa maailmassamme kohtuuhintainen pääsy nopeaan laajakaistaan on välttämättömyys, jotta voimme osallistua täysimääräisesti yhteiskuntaamme, mutta silti miljoonia amerikkalaisia kotitalouksia on edelleen ilman internetyhteyttä. HR&A-neuvojat-Monitieteellinen konsulttiyritys, joka työskentelee laajasti laajakaista- ja digitaalisen pääomasijoitusalueen parissa, auttaa osavaltion, läänin ja kuntien asiakkaita tarjoamaan kohtuuhintaisia Internet-yhteyksiä analysoimalla paikallisesti erityisiä digitaalisen osallisuuden tarpeita ja rakentamalla räätälöityjä digitaalisia pääomasuunnitelmia.
Ensimmäinen askel tässä prosessissa on digitaalisen kahtiajaon kartoitus. Missä kotitalouksissa ei ole Internetiä kotona? Missä he asuvat? Mitkä ovat heidän erityistarpeensa?
Julkiset tietolähteet eivät riitä rakentamaan todellista ymmärrystä digitaalisen osallisuuden tarpeista. Täyttääkseen aukkoja olemassa olevissa tiedoissa HR&A luo digitaalisia osaketutkimuksia luodakseen täydellisemmän kuvan ennen digitaalisten osakesuunnitelmien kehittämistä. HR&A on käyttänyt Amazon Redshift Serverless ja CARTOTM käsitellä tutkimustuloksia tehokkaammin ja luoda mukautettuja interaktiivisia hallintapaneeleja tulosten ymmärtämisen helpottamiseksi. HR&A:n yhteistyö Amazonin punainen siirto ja CARTO on johtanut 75 %:n lyhennykseen yleiseen käyttöönottoon ja kojelaudan hallintaan ja auttanut tiimiä saavuttamaan seuraavat tekniset tavoitteet:
- Lataa tutkimustulokset (CSV-tiedostot) ja geometriatiedot (muototiedostot) tietovarastoon
- Suorita geospatiaalisia muunnoksia käyttämällä erotus-, muunnos- ja lataustöitä (ELT) geometriatietojen yhdistämiseksi tutkimustuloksiin tietovarastossa, jotta tutkimustulokset voidaan visualisoida kartalla.
- Integroi BI (Business Intelligence) -työkalun edistyneitä geospatiaalisia toimintoja, visualisointeja ja kartoitushallintapaneeleja varten
- Skaalaa tietovaraston kapasiteettia ylös tai alas, jotta voit käsitellä vaihtelevan monimutkaisuuden työkuormia kustannustehokkaalla tavalla
Tässä viestissä kerromme, kuinka HR&A käyttää Amazon Redshift -tilaanalytiikkaa ja CARTOa digitaalisen osallisuuden ja Internet-yhteyden kustannustehokkaaseen geospatiaaliseen mittaukseen useissa Yhdysvaltain osavaltioissa.
Ennen kuin pääsemme arkkitehtuurin yksityiskohtiin, tässä on mitä HR&A ja sen asiakas, Colorado's Office of the Future of Work, sanovat ratkaisusta.
"Yhteistyössä HR&A Advisors -tiimin kanssa Coloradon Digital Equity -tiimi loi mukautetun kojelaudan, jonka avulla pystyimme arvioimaan tavoittavuuttamme erittäin tehokkaasti samalla kun tutkimme historiallisesti syrjäytyneitä väestöryhmiä Coloradossa. Tämä AWS:n ja CARTO:n käyttämä dynaaminen työkalu tarjosi vankat visualisoinnit siitä, mitkä alueet ja väestöt olivat vuorovaikutuksessa kyselymme kanssa, minkä ansiosta pystyimme lähentämään nopeasti ja korjaamaan kattavuuden puutteita. Sen varmistaminen, että pystyimme hakemaan dataa niiltä, joihin Coloradon digitaalinen kahtiajako eniten vaikuttaa, on ollut elintärkeää osavaltiomme digitaalisen eriarvoisuuden ratkaisemiseksi."
— Melanie Colletti, Digital Equity Manager Coloradon tulevaisuuden työtoimistosta
"AWS antaa meille mahdollisuuden tallentaa kaikki tutkimustietomme turvallisesti yhteen paikkaan, puhdistaa ja analysoida niitä nopeasti Amazon Redshiftissä ja peilata tuloksia integroimalla datan visualisointityökaluihin, kuten CARTO, ilman, että tiedot koskaan poistuvat AWS:stä. Tämä vapauttaa paikallista tietokonetilaamme, automatisoi huomattavasti kyselyn puhdistus- ja analysointivaihetta ja mahdollistaa asiakkaamme helpon pääsyn tietotuloksiin. Konseptin testauksen ja ensimmäisen prototyypin kehittämisen jälkeen lähes kaikki osavaltion asiakkaamme osoittivat kiinnostusta käyttää samaa ratkaisua osavaltioissaan.
— Harman Singh Dhodi, analyytikko, HR&A Advisors, Inc.
Suurten tutkimusaineistojen tallennus ja analysointi
HR&A käytti Redshift Serverlessiä tallentaakseen suuria määriä digitaalista inkluusiodataa yhteen paikkaan ja muuntaakseen ja analysoidakseen sen nopeasti käyttämällä CARTOn analyyttistä työkalupakkia laajentaakseen Amazon Redshiftin spatiaalisia ominaisuuksia ja integroidakseen CARTOn datan visualisointityökaluihin – kaikki ilman, että tiedot koskaan poistuvat AWS-ympäristöstä. . Tämä lyhensi merkittävästi analyyttisiä läpimenoaikoja.
- CARTO Analytics Toolbox Redshiftille koostuu joukosta käyttäjän määrittämiä toimintoja ja proseduureja, jotka on järjestetty joukoksi moduuleita niiden tarjoamien toimintojen perusteella.
Seuraava kuva näyttää ratkaisun ja työnkulun vaiheet, jotka on kehitetty Amazon Redshiftin virtuaalisen yksityisen pilven (VPC) testauksen aikana.
Seuraavissa osioissa käsittelemme yksityiskohtaisemmin jokaista työnkulun vaihetta.
Tietojen nauttiminen
HR&A vastaanottaa tutkimustiedot leveinä CSV-tiedostoina, joissa kussakin tiedostossa on satoja sarakkeita ja niihin liittyviä paikkatietoja heksadesimaalimuodossa Laajennettu hyvin tunnettu binaari (EWKB) muototiedostojen muodossa. Nämä tiedostot on tallennettu Amazonin yksinkertainen tallennuspalvelu (Amazon S3).
- Redshift COPY -komento käytetään tilatietojen syöttämiseen muototiedostoista Amazon Redshiftin tukemaan alkuperäiseen GEOMETRY-tietotyyppiin. Yhdistelmä Amazonin punasiirtospektri ja COPY-komentoja käytetään CSV-tiedostoina tallennettujen tutkimustietojen syöttämiseen. Tiedostoille, joiden rakenne on tuntematon, AWS-liima indeksoijat käytetään metatietojen poimimiseen ja taulukkomääritelmien luomiseen Tietoluettelo. Näitä taulukkomääritelmiä käytetään ulkoisten taulukoiden metatietovarastona Amazon Redshiftissä.
Tiedostoille, joilla on tunnetut rakenteet, käytetään Redshift-tallennettua proseduuria, joka ottaa tiedoston sijainnin ja taulukon nimen parametreiksi ja suorittaa COPY-komennon raakadatan lataamiseksi vastaaviin Redshift-taulukoihin.
Tietojen muuntaminen
Useita tallennettuja proseduureja käytetään taulukon raakatietojen jakamiseen ja lataamiseen vastaaviin kohdetaulukoihin samalla kun käytetään käyttäjän määrittämiä muunnoksia.
Nämä muunnossäännöt sisältävät GEOMETRY-tietojen muuntamisen natiivia käyttämällä Redshift geospatiaaliset funktiot, Kuten ST_Area ja ST_pituus, ja CARTO:t kehittyneitä tilatoimintoja, jotka ovat helposti saatavilla Amazon Redshiftissä osana CARTO Analytics Toolbox for Redshift -ohjelmaa asennus. Lisäksi kaikki tiedon otto- ja muunnosvaiheet automatisoidaan käyttämällä AWS Lambda toiminto suorittaa Redshift-kyselyn, kun jokin Amazon S3:n tietojoukko päivitetään.
Tietojen visualisointi
HR&A-tiimi käytti CARTO:n Redshift-liitintä muodostaakseen yhteyden Redshift Serverless -päätepisteeseen ja rakensi kojelaudat CARTO:n SQL-käyttöliittymän ja widgetien avulla kartoituksen avuksi suorittaessaan dynaamisia laskelmia karttatiedoista asiakkaan tarpeiden mukaan.
Seuraavassa on esimerkkikuvakaappauksia hallintapaneeleista, jotka näyttävät kyselyvastaukset postinumeroittain. Vaaleampien sävyjen maakunnat edustavat rajallisia kyselyvastauksia, ja ne on sisällytettävä kohdennettuun tiedonkeruustrategiaan.
Ensimmäisessä kuvassa näkyy kojelauta ilman aktiivisia suodattimia. Toisessa kuvassa näkyy espanjaksi kyselyyn vastanneiden vastaajien suodatettu kartta ja keskustelut. Käyttäjä voi valita ja vaihtaa ominaisuuksia napsauttamalla vastaavaa luokkaa missä tahansa pylväskaaviossa.
Tulos: Uusi standardi digitaalisten sisällyttävien kojetaulujen automaattiseen päivittämiseen
Kun ensimmäinen interaktiivinen kojelautaprototyyppi oli kehitetty tällä menetelmällä, viisi HR&A:n osavaltion asiakasta (CA, TX, NV, CO ja MA) osoitti kiinnostusta ratkaisua kohtaan. HR&A pystyi toteuttamaan sen jokaisessa niistä kahdessa kuukaudessa – uskomattoman nopea käänne mukautetun interaktiivisen digitaalisen sisällyttämisen hallintapaneelille.
HR&A ymmärsi myös noin 75 prosentin lyhennyksen yleiseen käyttöönottoon ja kojelaudan hallintaan, mikä tarkoitti, että konsulttitiimi saattoi suunnata huomionsa manuaalisesta tietojen analysoinnista auttamaan asiakkaita tulkitsemaan ja strategisesti suunnittelemaan tuloksia. Lopuksi kojelaudan käyttäjäystävällinen käyttöliittymä teki kyselytiedoista entistä laajemman sidosryhmien saatavuuden. Tämä auttoi rakentamaan yhteisymmärrystä arvioitaessa aukkoja kunkin osavaltion digitaalisen osallisuuden maisemassa ja mahdollisti kohdistetun tiedonkeruustrategian alueilta, joilla kyselyvastauksia on vähän, mikä tuki näin kokonaisvaltaista tuottavampaa yhteistyötä.
Yhteenveto
Tässä viestissä osoitimme, kuinka HR&A pystyi analysoimaan geospatiaalista dataa suurissa määrissä Amazon Redshift Serverlessin ja CARTO:n avulla.
HR&A:n onnistuneen toteutuksen ansiosta on selvää, että Redshift Serverlessiä voidaan joustavuuksineen ja skaalautuvina käyttää positiivisen sosiaalisen muutoksen katalysaattorina. Kun HR&A jatkaa tietä digitaaliselle pääomalle, heidän tarinansa on osoitus siitä, kuinka AWS-palveluita ja sen kumppaneita voidaan käyttää todellisten haasteiden ratkaisemiseen.
Suosittelemme sinua tutustumaan Redshift Serverlessiin CARTO:n avulla paikkatietojen analysoimiseksi ja kertomaan meille kokemuksesi kommenteissa.
Tietoja kirjoittajista
Harman Singh Dhodi on HR&A Advisorsin analyytikko. Harman yhdistää intohimonsa data-analytiikkaan kestäviin infrastruktuurikäytäntöihin, sosiaaliseen osallisuuteen, taloudelliseen elinkelpoisuuteen, ilmastonsietokykyyn ja sidosryhmien kapasiteetin kehittämiseen. Harmanin työ keskittyy usein monimutkaisten tietojoukkojen kääntämiseen visuaalisiksi tarinoiksi ja helppokäyttöisiksi työkaluiksi, jotka auttavat yhteisöjä ymmärtämään kohtaamiaan haasteita ja luomaan ratkaisuja valoisampaan tulevaisuuteen.
Kiran Kumar Tati on Analytics Specialist Solutions -arkkitehti Omahasta, NE. Hän on erikoistunut kokonaisvaltaisten analyyttisten ratkaisujen rakentamiseen. Hänellä on yli 13 vuoden kokemus suurten Big Data- ja Analytics-ratkaisujen suunnittelusta ja toteuttamisesta. Vapaa-ajallaan hän pelaa krikettiä ja katselee urheilua.
Sapna Maheshwari on vanhempi ratkaisuarkkitehti Amazon Web Servicesissä. Hän auttaa asiakkaita suunnittelemaan data-analytiikkaratkaisuja mittakaavassa AWS:ssä. Työn ulkopuolella hän nauttii matkustamisesta ja uusien ruokien kokeilemisesta.
Washim Nawaz on Analyticsin asiantuntijaratkaisujen arkkitehti AWS:ssä. Hän on työskennellyt tietovarasto- ja datajärviratkaisujen rakentamisen ja virittämisen parissa yli 15 vuoden ajan. Hän haluaa auttaa asiakkaita modernisoimaan tietoalustojaan tehokkailla, toimivilla ja skaalautuvilla analyyttisilla ratkaisuilla. Työn ulkopuolella hän nauttii pelien katsomisesta ja matkustamisesta.
- SEO-pohjainen sisällön ja PR-jakelu. Vahvista jo tänään.
- PlatoData.Network Vertical Generatiivinen Ai. Vahvista itseäsi. Pääsy tästä.
- PlatoAiStream. Web3 Intelligence. Tietoa laajennettu. Pääsy tästä.
- PlatoESG. hiili, CleanTech, energia, ympäristö, Aurinko, Jätehuolto. Pääsy tästä.
- PlatonHealth. Biotekniikan ja kliinisten kokeiden älykkyys. Pääsy tästä.
- Lähde: https://aws.amazon.com/blogs/big-data/how-hra-uses-amazon-redshift-spatial-analytics-on-amazon-redshift-serverless-to-measure-digital-equity-in-states-across-the-us/
- :on
- :On
- :missä
- $ YLÖS
- 1
- 120
- 13
- 15 vuotta
- 15%
- 150
- 29
- 33
- 35%
- a
- pystyy
- Meistä
- pääsy
- saatavilla
- Saavuttaa
- poikki
- aktiivinen
- osoite
- käsitellään
- kehittynyt
- neuvonantajat
- edullinen
- Kaikki
- sallia
- sallittu
- mahdollistaa
- melkein
- Myös
- Amazon
- Amazon Web Services
- Amerikkalainen
- määrät
- an
- analyysi
- analyytikko
- Analyyttinen
- analyyttinen
- Analytics
- analysoida
- analysointi
- ja
- Kaikki
- Hakeminen
- arkkitehtuuri
- OVAT
- alueet
- noin
- AS
- arvioidessaan
- auttaa
- At
- Automatisoitu
- automaatti
- automaattisesti
- saatavissa
- AWS
- baari
- perustua
- BE
- ollut
- ennen
- välillä
- Iso
- Big Data
- kirkkaampi
- laajakaista
- rakentaa
- Rakentaminen
- rakennettu
- liiketoiminta
- bisnesvaisto
- by
- CA
- CAN
- kyvyt
- Koko
- Katalysaattori
- Kategoria
- haasteet
- muuttaa
- Kaaviot
- Siivous
- asiakas
- asiakkaat
- Ilmasto
- pilvi
- CO
- koodi
- yhteistyö
- kokoelma
- Colorado
- Pylväät
- yhdistelmä
- yhdistää
- kommentit
- yhteisöjen
- täydellinen
- monimutkainen
- monimutkaisuus
- kokoonpanossa
- tietokone
- käsite
- kytkeä
- konsultointi
- konsultointi
- jatkuu
- vastaava
- kustannustehokas
- voisi
- lääni
- kattavuus
- luoda
- luotu
- luo
- kriketti
- asiakassuhde
- Asiakkaat
- Leikkaus
- kojelauta
- mittaristot
- tiedot
- Data Analytics
- Datajärvi
- datan visualisointi
- tietovarasto
- aineistot
- määritelmät
- toimittaa
- käyttöönotto
- suunnittelu
- yksityiskohta
- yksityiskohdat
- kehitetty
- kehittämällä
- Kehitys
- digitaalinen
- digitaalinen maailma
- pohtia
- jakaa
- do
- Dont
- alas
- aikana
- dynaaminen
- kukin
- helposti
- Taloudellinen
- tehokkaasti
- tehokas
- tehokkaasti
- valtuuttaa
- mahdollistaa
- kannustaa
- päittäin
- päätepiste
- varmistamalla
- ympäristö
- oma pääoma
- Eetteri (ETH)
- arvioida
- EVER
- ilmeinen
- olemassa
- experience
- tutkia
- laajentaa
- laaja
- ulkoinen
- uute
- helpottamaan
- päin
- Ominaisuudet
- Kuva
- filee
- Asiakirjat
- täyttää
- suodattimet
- Vihdoin
- tulokset
- Etunimi
- viisi
- Joustavuus
- Keskittää
- keskittyy
- jälkeen
- varten
- muoto
- alkaen
- täysin
- toiminto
- toiminnallisuus
- tehtävät
- Lisäksi
- tulevaisuutta
- Työn tulevaisuus
- Pelit
- aukkoja
- geometria
- saada
- Tavoitteet
- suuresti
- Olla
- he
- auttaa
- auttanut
- auttaa
- auttaa
- tätä
- hänen
- historiallisesti
- Etusivu
- Talo
- kotitalouksien
- Miten
- HTML
- http
- HTTPS
- Sadat
- havainnollistaa
- kuva
- vaikutti
- toteuttaa
- täytäntöönpano
- täytäntöönpanosta
- in
- sisältää
- mukana
- sisällyttäminen
- yhä useammin
- uskomattoman
- Infrastruktuuri
- yhdistää
- integraatio
- Älykkyys
- vuorovaikutuksessa
- vuorovaikutteinen
- korko
- liitäntä
- Internet
- Internet-yhteys
- tulee
- IT
- SEN
- Työpaikat
- yhdistää
- jpg
- Tietää
- tunnettu
- Kumar
- järvi
- Landschaft
- Kieli
- suuri
- jättäen
- antaa
- sytytin
- pitää
- rajallinen
- elää
- kuormitus
- paikallinen
- paikallisesti
- sijainti
- tehty
- johto
- johtaja
- käsin
- kartta
- kartoitus
- tarkoitti
- mitata
- mittaus
- Melanie
- Metadata
- Metodologia
- miljoonia
- peili
- nykyaikaistaa
- Moduulit
- lisää
- eniten
- monitieteinen
- moninkertainen
- kunnallinen
- nimi
- syntyperäinen
- ne
- välttämättömyys
- Tarve
- tarpeet
- Uusi
- NV
- of
- kampanja
- Office
- usein
- Omaha
- on
- ONE
- or
- Järjestetty
- meidän
- ulos
- ulkopuolella
- yli
- yleinen
- parametrit
- osa
- osallistua
- kumppani
- intohimo
- intohimoinen
- tasoittaa
- varten
- esittävä
- vaihe
- kuva
- Paikka
- suunnitelma
- suunnitelmat
- Platforms
- Platon
- Platonin tietotieto
- PlatonData
- pelaa
- populaatiot
- positiivinen
- Kirje
- powered
- käytännöt
- yksityinen
- menettelyt
- menettelyt
- prosessi
- tuottava
- todiste
- todiste käsitteestä
- prototyyppi
- mikäli
- nopea
- nopeasti
- alue
- raaka
- raakadata
- tavoittaa
- helposti
- todellinen maailma
- tajusi
- vastaanottaa
- kääntää
- vähentäminen
- alueet
- liittyvä
- säilytyspaikka
- edustaa
- ne
- vastaajat
- vasteet
- johtua
- johtanut
- tulokset
- luja
- säännöt
- ajaa
- toimii
- sama
- sanoa
- skaalautuvuus
- skaalautuva
- Asteikko
- kuvakaappauksia
- Toinen
- osiot
- turvallisesti
- etsiä
- valita
- serverless
- Palvelut
- setti
- Muoto
- yhteinen
- hän
- näyttää
- osoittivat
- Näytä
- merkittävästi
- Yksinkertainen
- sosiaalinen
- Sosiaalinen muutos
- yhteiskunta
- ratkaisu
- Ratkaisumme
- Lähteet
- Tila
- Espanjan
- tila-
- asiantuntija
- erikoistunut
- erityinen
- jakaa
- Urheilu
- SQL
- sidosryhmien
- sidosryhmien
- standardi
- seisoo
- Osavaltio
- Valtiot
- Vaihe
- Askeleet
- Yhä
- Levytila
- verkkokaupasta
- tallennettu
- tarinat
- Tarina
- strategisesti
- Strategia
- rakenteet
- onnistunut
- niin
- riittävä
- Tuetut
- Tukea
- Tutkimus
- kestävä
- taulukko
- Räätälöity
- vie
- Kohde
- kohdennettu
- joukkue-
- Tekninen
- testamentti
- kuin
- että
- -
- Tulevaisuus
- Työn tulevaisuus
- Valtion
- heidän
- Niitä
- Siellä.
- siten
- Nämä
- ne
- tätä
- ne
- Kautta
- aika
- kertaa
- että
- otti
- työkalu
- Toolbox
- työkalupakki
- työkalut
- Muuttaa
- Muutos
- muunnokset
- Matkustaminen
- totta
- yrittää
- TX
- tyyppi
- ymmärtää
- ymmärtäminen
- tuntematon
- päivitetty
- päivittäminen
- us
- Yhdysvaltojen valtiot
- käytetty
- käyttäjä
- helppokäyttöinen
- käyttötarkoituksiin
- käyttämällä
- Vaihteleva
- hyvin
- kannattavuus
- Virtual
- visuaalinen
- visualisointi
- elintärkeä
- volyymit
- Varasto
- oli
- katsomassa
- Tapa..
- we
- verkko
- verkkopalvelut
- tunnettu
- olivat
- Mitä
- kun
- joka
- vaikka
- KUKA
- leveä
- laajempi
- wikipedia
- with
- sisällä
- ilman
- Referenssit
- työskenteli
- työnkulku
- maailman-
- vuotta
- vielä
- te
- Sinun
- zephyrnet
- Postinumero
- zoomaus