Di dunia yang semakin digital, akses broadband berkecepatan tinggi yang terjangkau merupakan kebutuhan untuk berpartisipasi penuh dalam masyarakat, namun masih ada jutaan rumah tangga di Amerika yang tidak memiliki akses internet. Penasihat SDM&A—sebuah konsultan multi-disiplin dengan pekerjaan luas di bidang broadband dan ekuitas digital membantu klien negara bagian, kabupaten, dan kota memberikan akses internet yang terjangkau dengan menganalisis kebutuhan inklusi digital spesifik lokal dan membangun rencana ekuitas digital yang disesuaikan.
Langkah pertama dalam proses ini adalah memetakan kesenjangan digital. Rumah tangga mana yang tidak memiliki akses internet di rumah? Di mana mereka tinggal? Apa kebutuhan spesifik mereka?
Sumber data publik tidak cukup untuk membangun pemahaman yang benar tentang kebutuhan inklusi digital. Untuk mengisi kesenjangan dalam data yang ada, HR&A membuat survei ekuitas digital untuk membangun gambaran yang lebih lengkap sebelum mengembangkan rencana ekuitas digital. HR&A telah digunakan Amazon Redshift Tanpa Server dan KERTAS untuk memproses temuan survei dengan lebih efisien dan membuat dasbor interaktif khusus untuk memfasilitasi pemahaman hasil. Kolaborasi HR&A dengan Pergeseran Merah Amazon dan CARTO telah menghasilkan pengurangan sebesar 75% dalam keseluruhan penerapan dan waktu pengelolaan dasbor serta membantu tim mencapai sasaran teknis berikut:
- Memuat hasil survei (file CSV) dan data geometri (file bentuk) di gudang data
- Melakukan transformasi geo-spasial menggunakan tugas ekstrak, transformasi, dan muat (ELT) untuk menggabungkan data geometri dengan hasil survei dalam gudang data untuk memungkinkan visualisasi hasil survei pada peta
- Integrasikan dengan alat intelijen bisnis (BI) untuk fungsi geo-spasial tingkat lanjut, visualisasi, dan dasbor pemetaan
- Tingkatkan atau turunkan kapasitas gudang data untuk mengatasi beban kerja dengan kompleksitas yang berbeda-beda dengan cara yang hemat biaya
Dalam postingan ini, kami membongkar bagaimana HR&A menggunakan analitik spasial Amazon Redshift dan CARTO untuk pengukuran geo-spasial yang hemat biaya atas inklusi digital dan akses internet di beberapa negara bagian AS.
Sebelum kita membahas detail arsitekturnya, inilah pendapat HR&A dan kliennya, Office of the Future of Work di Colorado, tentang solusinya.
“Bekerja dengan tim di HR&A Advisors, Tim Ekuitas Digital Colorado menciptakan dasbor khusus yang memungkinkan kami mengevaluasi jangkauan kami dengan sangat efektif sambil mensurvei populasi yang secara historis terpinggirkan di seluruh Colorado. Alat dinamis ini, yang didukung oleh AWS dan CARTO, memberikan visualisasi yang kuat mengenai wilayah dan populasi mana yang berinteraksi dengan survei kami, memungkinkan kami memperbesar dengan cepat dan mengatasi kesenjangan dalam cakupan. Memastikan kami dapat mencari data dari mereka yang paling terkena dampak kesenjangan digital di Colorado merupakan hal yang penting dalam mengatasi kesenjangan digital di negara bagian kami.”
— Melanie Colletti, Manajer Ekuitas Digital di Kantor Pekerjaan Masa Depan Colorado
“AWS memungkinkan kami menyimpan semua data survei kami dengan aman di satu tempat, dengan cepat menghapus dan menganalisisnya di Amazon Redshift, dan mencerminkan hasilnya melalui integrasi dengan alat visualisasi data seperti CARTO tanpa data harus meninggalkan AWS. Ini mengosongkan ruang komputer lokal kami, mengotomatiskan langkah pembersihan dan analisis survei, dan memungkinkan klien kami mengakses hasil data dengan mudah. Setelah pembuktian konsep dan pengembangan prototipe pertama, hampir semua klien negara bagian kami menunjukkan minat untuk menggunakan solusi yang sama untuk negara bagian mereka.”
— Harman Singh Dhodi, Analis di HR&A Advisors, Inc.
Menyimpan dan menganalisis kumpulan data survei besar
HR&A menggunakan Redshift Serverless untuk menyimpan data inklusi digital dalam jumlah besar di satu tempat dan dengan cepat mengubah serta menganalisisnya menggunakan perangkat analitik CARTO untuk memperluas kemampuan spasial Amazon Redshift dan berintegrasi dengan alat visualisasi data CARTO—semuanya tanpa data harus meninggalkan lingkungan AWS . Hal ini mengurangi waktu penyelesaian analitis secara signifikan.
Grafik Kotak Alat Analisis CARTO untuk Redshift terdiri dari sekumpulan fungsi dan prosedur yang ditentukan pengguna yang disusun dalam sekumpulan modul berdasarkan fungsionalitas yang ditawarkannya.
Gambar berikut menunjukkan langkah-langkah solusi dan alur kerja yang dikembangkan selama pembuktian konsep dengan virtual private cloud (VPC) di Amazon Redshift.
Pada bagian berikut, kami membahas setiap fase dalam alur kerja secara lebih rinci.
Penyerapan data
HR&A menerima data survei dalam bentuk file CSV lebar dengan ratusan kolom di setiap file dan data spasial terkait dalam heksadesimal Biner Terkenal yang Diperluas (EWKB) dalam bentuk file bentuk. File-file ini disimpan di Layanan Penyimpanan Sederhana Amazon (Amazon S3).
Grafik Perintah SALINAN pergeseran merah digunakan untuk menyerap data spasial dari file bentuk ke dalam tipe data GEOMETRY asli yang didukung di Amazon Redshift. Kombinasi dari Spektrum Pergeseran Merah Amazon dan perintah COPY digunakan untuk menyerap data survei yang disimpan sebagai file CSV. Untuk file dengan struktur yang tidak diketahui, Lem AWS crawler digunakan untuk mengekstrak metadata dan membuat definisi tabel di Katalog Data. Definisi tabel ini digunakan sebagai repositori metadata untuk tabel eksternal di Amazon Redshift.
Untuk file dengan struktur yang diketahui, prosedur tersimpan Redshift digunakan, yang mengambil lokasi file dan nama tabel sebagai parameter dan menjalankan perintah COPY untuk memuat data mentah ke dalam tabel Redshift yang sesuai.
Transformasi data
Beberapa prosedur tersimpan digunakan untuk membagi data tabel mentah dan memuatnya ke dalam tabel target yang sesuai sambil menerapkan transformasi yang ditentukan pengguna.
Aturan transformasi ini mencakup transformasi data GEOMETRI menggunakan data asli Fungsi geo-spasial pergeseran merahseperti ST_Area dan ST_panjang, dan CARTO fungsi spasial tingkat lanjut, yang tersedia di Amazon Redshift sebagai bagian dari CARTO Analytics Toolbox untuk Redshift instalasi. Selain itu, semua langkah penyerapan dan transformasi data diotomatisasi menggunakan AWS Lambda berfungsi untuk menjalankan kueri Redshift ketika dataset apa pun di Amazon S3 diperbarui.
Visualisasi data
Tim HR&A menggunakan konektor Redshift CARTO untuk terhubung ke titik akhir Redshift Serverless dan membuat dasbor menggunakan antarmuka SQL CARTO dan widget untuk membantu pemetaan sambil melakukan penghitungan dinamis data peta sesuai kebutuhan klien.
Berikut adalah contoh tangkapan layar dasbor yang memperlihatkan tanggapan survei berdasarkan kode pos. Kabupaten-kabupaten yang berada dalam warna lebih terang menunjukkan tanggapan survei yang terbatas dan perlu dimasukkan dalam strategi pengumpulan data yang ditargetkan.
Gambar pertama menunjukkan dashboard tanpa filter aktif. Gambar kedua menunjukkan peta dan obrolan yang difilter oleh responden yang mengikuti survei dalam bahasa Spanyol. Pengguna dapat memilih dan beralih antar fitur dengan mengklik kategori masing-masing di salah satu diagram batang.
Hasilnya: Sebuah standar baru untuk memperbarui dasbor inklusi digital secara otomatis
Setelah mengembangkan prototipe dasbor interaktif pertama dengan metodologi ini, lima klien negara bagian HR&A (CA, TX, NV, CO, dan MA) menunjukkan minat terhadap solusi tersebut. HR&A mampu menerapkannya untuk masing-masing perusahaan dalam waktu 2 bulan—suatu penyelesaian yang sangat cepat untuk dasbor inklusi digital yang interaktif dan kustom.
HR&A juga menyadari adanya pengurangan sebesar 75% dalam keseluruhan penerapan dan waktu manajemen dasbor, yang berarti tim konsultan dapat mengalihkan fokus mereka dari menganalisis data secara manual ke membantu klien menafsirkan dan merencanakan hasil secara strategis. Terakhir, antarmuka dasbor yang ramah pengguna membuat data survei lebih mudah diakses oleh lebih banyak pemangku kepentingan. Hal ini membantu membangun pemahaman bersama ketika menilai kesenjangan dalam lanskap inklusi digital di setiap negara bagian dan memungkinkan strategi pengumpulan data yang ditargetkan dari daerah-daerah dengan respons survei terbatas, sehingga mendukung kolaborasi yang lebih produktif secara keseluruhan.
Kesimpulan
Dalam postingan ini, kami menunjukkan bagaimana HR&A mampu menganalisis data geospasial dalam volume besar menggunakan Amazon Redshift Tanpa Server dan CARTO.
Dengan keberhasilan implementasi HR&A, jelas bahwa Redshift Serverless, dengan fleksibilitas dan skalabilitasnya, dapat digunakan sebagai katalisator perubahan sosial yang positif. Saat HR&A terus membuka jalan bagi ekuitas digital, kisah mereka menjadi bukti bagaimana layanan AWS dan mitranya dapat digunakan dalam mengatasi tantangan dunia nyata.
Kami mendorong Anda untuk menjelajahi Redshift Tanpa Server dengan CARTO untuk menganalisis data spasial dan beri tahu kami pengalaman Anda di komentar.
Tentang penulis
Harman Singh Dhodi adalah Analis di HR&A Advisors, Harman memadukan minatnya terhadap analisis data dengan praktik infrastruktur berkelanjutan, inklusi sosial, kelayakan ekonomi, ketahanan iklim, dan pengembangan kapasitas pemangku kepentingan. Pekerjaan Harman sering kali berfokus pada penerjemahan kumpulan data yang kompleks menjadi cerita visual dan alat yang dapat diakses yang membantu memberdayakan masyarakat untuk memahami tantangan yang mereka hadapi dan menciptakan solusi untuk masa depan yang lebih cerah.
Kiran Kumar Tati adalah Arsitek Solusi Spesialis Analytics yang berbasis di Omaha, NE. Dia berspesialisasi dalam membangun solusi analitik ujung ke ujung. Beliau memiliki pengalaman lebih dari 13 tahun dalam merancang dan mengimplementasikan solusi Big Data dan Analytics berskala besar. Di waktu luangnya, dia menikmati bermain kriket dan menonton olahraga.
Sapna Maheswari adalah Sr. Arsitek Solusi di Amazon Web Services. Dia membantu pelanggan merancang solusi analisis data dalam skala besar di AWS. Di luar pekerjaan dia senang bepergian dan mencoba masakan baru.
Washim Nawaz adalah Arsitek Solusi Spesialis Analytics di AWS. Dia telah bekerja dalam membangun dan menyempurnakan solusi data warehouse dan data lake selama lebih dari 15 tahun. Dia bersemangat membantu pelanggan memodernisasi platform data mereka dengan solusi analitik yang efisien, berperforma tinggi, dan dapat diskalakan. Di luar pekerjaan, dia suka menonton pertandingan dan jalan-jalan.
- Konten Bertenaga SEO & Distribusi PR. Dapatkan Amplifikasi Hari Ini.
- PlatoData.Jaringan Vertikal Generatif Ai. Berdayakan Diri Anda. Akses Di Sini.
- PlatoAiStream. Intelijen Web3. Pengetahuan Diperkuat. Akses Di Sini.
- PlatoESG. Karbon, teknologi bersih, energi, Lingkungan Hidup, Tenaga surya, Penanganan limbah. Akses Di Sini.
- PlatoHealth. Kecerdasan Uji Coba Biotek dan Klinis. Akses Di Sini.
- Sumber: https://aws.amazon.com/blogs/big-data/how-hra-uses-amazon-redshift-spatial-analytics-on-amazon-redshift-serverless-to-measure-digital-equity-in-states-across-the-us/
- :memiliki
- :adalah
- :Di mana
- $NAIK
- 1
- 120
- 13
- 15 tahun
- 15%
- 150
- 29
- 33
- 35%
- a
- Sanggup
- Tentang Kami
- mengakses
- dapat diakses
- Mencapai
- di seluruh
- aktif
- alamat
- menangani
- maju
- penasehat
- terjangkau
- Semua
- mengizinkan
- diizinkan
- memungkinkan
- hampir
- juga
- Amazon
- Amazon Web Services
- Amerika
- jumlah
- an
- analisis
- analis
- Analitik
- Analytical
- analisis
- menganalisa
- menganalisis
- dan
- Apa pun
- Menerapkan
- arsitektur
- ADALAH
- daerah
- sekitar
- AS
- Menilai
- membantu
- At
- Otomatis
- mengotomatiskan
- secara otomatis
- tersedia
- AWS
- bar
- berdasarkan
- BE
- menjadi
- sebelum
- antara
- Besar
- Big data
- lebih cerah
- broadband
- membangun
- Bangunan
- dibangun di
- bisnis
- intelijen bisnis
- by
- CA
- CAN
- kemampuan
- Kapasitas
- Katalisator
- Kategori
- tantangan
- perubahan
- Charts
- Pembersihan
- klien
- klien
- Iklim
- awan
- CO
- kode
- kolaborasi
- koleksi
- Colorado
- Kolom
- kombinasi
- menggabungkan
- komentar
- Masyarakat
- lengkap
- kompleks
- kompleksitas
- tersusun
- komputer
- konsep
- Terhubung
- konsultasi
- konsultasi
- terus
- Sesuai
- hemat biaya
- bisa
- daerah
- liputan
- membuat
- dibuat
- menciptakan
- jangkrik
- adat
- pelanggan
- Memotong
- dasbor
- dasbor
- data
- Data Analytics
- Danau Data
- visualisasi data
- data warehouse
- kumpulan data
- definisi
- menyampaikan
- penyebaran
- merancang
- rinci
- rincian
- dikembangkan
- berkembang
- Pengembangan
- digital
- dunia digital
- membahas
- membagi
- do
- Dont
- turun
- selama
- dinamis
- setiap
- mudah
- Ekonomis
- efektif
- efisien
- efisien
- memberdayakan
- memungkinkan
- mendorong
- ujung ke ujung
- Titik akhir
- memastikan
- Lingkungan Hidup
- keadilan
- Eter (ETH)
- mengevaluasi
- pERNAH
- jelas
- ada
- pengalaman
- menyelidiki
- memperpanjang
- luas
- luar
- ekstrak
- memudahkan
- menghadapi
- Fitur
- Angka
- File
- File
- mengisi
- filter
- Akhirnya
- Temuan
- Pertama
- lima
- keluwesan
- Fokus
- berfokus
- berikut
- Untuk
- bentuk
- dari
- sepenuhnya
- fungsi
- fungsi
- fungsi
- Selanjutnya
- masa depan
- Masa Depan Pekerjaan
- Games
- kesenjangan
- geometri
- mendapatkan
- Anda
- sangat
- Memiliki
- he
- membantu
- membantu
- membantu
- membantu
- di sini
- -nya
- secara historis
- Beranda
- Rumah
- rumah tangga
- Seterpercayaapakah Olymp Trade? Kesimpulan
- HTML
- http
- HTTPS
- Ratusan
- menggambarkan
- gambar
- dampak
- melaksanakan
- implementasi
- mengimplementasikan
- in
- memasukkan
- termasuk
- penyertaan
- makin
- luar biasa
- Infrastruktur
- mengintegrasikan
- integrasi
- Intelijen
- berinteraksi
- interaktif
- bunga
- Antarmuka
- Internet
- Akses internet
- ke
- IT
- NYA
- Jobs
- ikut
- jpg
- Tahu
- dikenal
- kumar
- danau
- pemandangan
- bahasa
- besar
- meninggalkan
- membiarkan
- lebih ringan
- 'like'
- Terbatas
- hidup
- memuat
- lokal
- lokal
- tempat
- terbuat
- pengelolaan
- manajer
- manual
- peta
- pemetaan
- berarti
- mengukur
- pengukuran
- melanie
- Metadata
- Metodologi
- jutaan
- cermin
- memodernisasi
- Modul
- lebih
- paling
- multi-disiplin
- beberapa
- kota
- nama
- asli
- ne
- kebutuhan
- Perlu
- kebutuhan
- New
- NV
- of
- menawarkan
- Office
- sering
- omaha
- on
- ONE
- or
- terorganisir
- kami
- di luar
- di luar
- lebih
- secara keseluruhan
- parameter
- bagian
- ikut
- rekan
- gairah
- bergairah
- mengaspal
- untuk
- melakukan
- tahap
- gambar
- Tempat
- rencana
- rencana
- Platform
- plato
- Kecerdasan Data Plato
- Data Plato
- bermain
- populasi
- positif
- Pos
- didukung
- praktek
- swasta
- Prosedur
- Prosedur
- proses
- produktif
- bukti
- bukti konsep
- prototipe
- disediakan
- Cepat
- segera
- jarak
- Mentah
- data mentah
- mencapai
- segera
- dunia nyata
- menyadari
- menerima
- redirect
- pengurangan
- daerah
- terkait
- gudang
- mewakili
- itu
- responden
- tanggapan
- mengakibatkan
- mengakibatkan
- Hasil
- kuat
- aturan
- Run
- berjalan
- sama
- mengatakan
- Skalabilitas
- terukur
- Skala
- screenshot
- Kedua
- bagian
- aman
- Mencari
- memilih
- Tanpa Server
- Layanan
- set
- Bentuknya
- berbagi
- dia
- Menunjukkan
- menunjukkan
- Pertunjukkan
- signifikan
- Sederhana
- Sosial
- Perubahan sosial
- Masyarakat
- larutan
- Solusi
- sumber
- Space
- Spanyol
- spasial
- spesialis
- spesialisasi
- tertentu
- membagi
- Olahraga
- SQL
- pemangku kepentingan
- stakeholder
- standar
- berdiri
- Negara
- Negara
- Langkah
- Tangga
- Masih
- penyimpanan
- menyimpan
- tersimpan
- cerita
- Cerita
- Secara strategis
- Penyelarasan
- struktur
- sukses
- seperti itu
- cukup
- Didukung
- pendukung
- Survei
- berkelanjutan
- tabel
- disesuaikan
- Dibutuhkan
- target
- ditargetkan
- tim
- Teknis
- Perjanjian
- dari
- bahwa
- Grafik
- Masa depan
- Masa Depan Kerja
- Negara
- mereka
- Mereka
- Sana.
- dengan demikian
- Ini
- mereka
- ini
- itu
- Melalui
- waktu
- kali
- untuk
- mengambil
- alat
- Toolbox
- toolkit
- alat
- Mengubah
- Transformasi
- transformasi
- Perjalanan
- benar
- mencoba
- TX
- mengetik
- memahami
- pemahaman
- tidak dikenal
- diperbarui
- memperbarui
- us
- Negara AS
- bekas
- Pengguna
- user-friendly
- kegunaan
- menggunakan
- bervariasi
- sangat
- kelangsungan hidup
- maya
- visual
- visualisasi
- vital
- volume
- Gudang
- adalah
- menonton
- Cara..
- we
- jaringan
- layanan web
- terkenal
- adalah
- Apa
- ketika
- yang
- sementara
- SIAPA
- lebar
- lebih luas
- Wikipedia
- dengan
- dalam
- tanpa
- Kerja
- bekerja
- alur kerja
- dunia
- tahun
- namun
- kamu
- Anda
- zephyrnet.dll
- Zip
- zoom