デジタル化が進む世界では、社会に完全に参加するには高速ブロードバンドへの手頃なアクセスが不可欠ですが、依然としてインターネットにアクセスできないアメリカの世帯が数百万世帯あります。 HR&Aアドバイザー―ブロードバンドとデジタル・エクイティ分野で広範な業務を行う学際的なコンサルティング会社は、地域特有のデジタル・インクルージョンのニーズを分析し、カスタマイズされたデジタル・エクイティ・プランを構築することで、州、郡、地方自治体のクライアントが手頃な価格のインターネット・アクセスを提供できるよう支援しています。
このプロセスの最初のステップは、デジタルデバイドをマッピングすることです。 自宅でインターネットにアクセスできない世帯はどの世帯ですか? 彼らはどこに住んでいますか? 彼らの具体的なニーズは何ですか?
デジタル インクルージョンのニーズを真に理解するには、公開データ ソースだけでは十分ではありません。 既存のデータのギャップを埋めるために、HR&A はデジタル エクイティ計画を作成する前に、より完全な全体像を構築するためにデジタル エクイティ調査を作成します。 HR&A が使用した AmazonRedshiftサーバーレス および 地図 調査結果をより効率的に処理し、結果の理解を容易にするカスタムの対話型ダッシュボードを作成します。 HR&Aとのコラボレーション Amazonレッドシフト CARTO により、導入とダッシュボード管理の全体的な時間が 75% 削減され、チームは次の技術目標を達成することができました。
- 調査結果 (CSV ファイル) とジオメトリ データ (シェイプ ファイル) をデータ ウェアハウスにロードします
- 抽出、変換、ロード (ELT) ジョブを使用して地理空間変換を実行し、データ ウェアハウス内で形状データと測量結果を結合し、地図上で測量結果を視覚化できるようにします。
- ビジネス インテリジェンス (BI) ツールと統合して、高度な地理空間機能、視覚化、マッピング ダッシュボードを実現
- データ ウェアハウスの容量を拡大または縮小して、コスト効率の高い方法でさまざまな複雑さのワークロードに対処します
この投稿では、HR&A が Amazon Redshift 空間分析と CARTO を使用して、米国の複数の州にわたるデジタル インクルージョンとインターネット アクセスの費用対効果の高い地理空間測定を行う方法を明らかにします。
アーキテクチャの詳細に入る前に、HR&A とその顧客であるコロラド州の Office of the Future of Work がこのソリューションについて述べていることをここで紹介します。
「HR&A Advisors のチームと協力して、コロラド州のデジタル エクイティ チームはカスタム ダッシュボードを作成しました。これにより、コロラド州全域で歴史的に疎外されてきた人々を調査しながら、リーチを非常に効果的に評価できるようになりました。 AWS と CARTO を活用したこの動的なツールにより、どの地域や人口が調査に関与しているのかが堅牢に視覚化され、迅速にズームインして対象範囲のギャップに対処できるようになりました。 コロラド州のデジタル格差の影響を最も受けている人々からデータを確実に入手できるようにすることは、州内のデジタル不平等に対処するために極めて重要でした。」
— コロラド州オフィス・オブ・ザ・フューチャー・オブ・ワーク、デジタル・エクイティ・マネージャー、メラニー・コレッティ氏
「AWS を使用すると、すべての調査データを XNUMX か所に安全に保管し、Amazon Redshift で迅速にスクラブして分析し、CARTO などのデータ視覚化ツールとの統合を通じて、データが AWS から流出することなく結果をミラーリングできます。 これにより、ローカル コンピューターのスペースが解放され、調査のクリーニングと分析のステップが大幅に自動化され、クライアントがデータ結果に簡単にアクセスできるようになります。 概念実証と最初のプロトタイプの開発の後、ほぼすべての州の顧客が自分の州で同じソリューションを使用することに関心を示しました。」
— Harman Singh Dhodi 氏、HR&A Advisors, Inc. アナリスト
大規模な調査データセットの保存と分析
HR&A は、Redshift サーバーレスを使用して大量のデジタル インクルージョン データを XNUMX か所に保存し、CARTO の分析ツールキットを使用してデータを迅速に変換および分析し、Amazon Redshift の空間機能を拡張し、CARTO のデータ視覚化ツールと統合しました。データが AWS 環境から流出することはありません。 。 これにより、分析所要時間が大幅に短縮されました。
Redshift 用 CARTO 分析ツールボックス は、提供する機能に基づいてモジュールのセットに編成されたユーザー定義の関数とプロシージャのセットで構成されます。
次の図は、Amazon Redshift 上の Virtual Private Cloud (VPC) を使用した概念実証中に開発されたソリューションとワークフローの手順を示しています。
次のセクションでは、ワークフローの各フェーズについて詳しく説明します。
データの取り込み
HR&A は、各ファイルに数百の列が含まれる幅の広い CSV ファイルとして調査データを受け取り、関連する空間データは XNUMX 進数で表示されます。 拡張既知バイナリ (EWKB) シェイプファイルの形式で。 これらのファイルは次の場所に保存されます Amazon シンプル ストレージ サービス (Amazon S3)。
Redshift COPY コマンド は、空間データをシェープ ファイルから Amazon Redshift でサポートされているネイティブ GEOMETRY データ型に取り込むために使用されます。 の組み合わせ AmazonRedshiftスペクトラム および COPY コマンドは、CSV ファイルとして保存された調査データを取り込むために使用されます。 構造が不明なファイルについては、 AWSグルー クローラ メタデータを抽出し、テーブル定義を作成するために使用されます。 データカタログ。 これらのテーブル定義は、Amazon Redshift の外部テーブルのメタデータ リポジトリとして使用されます。
既知の構造を持つファイルの場合、Redshift ストアド プロシージャが使用されます。これは、ファイルの場所とテーブル名をパラメータとして受け取り、COPY コマンドを実行して生データを対応する Redshift テーブルにロードします。
データ変換
ユーザー定義の変換を適用しながら、複数のストアド プロシージャを使用して生のテーブル データを分割し、対応するターゲット テーブルにロードします。
これらの変換ルールには、ネイティブを使用した GEOMETRY データの変換が含まれます。 赤方偏移地理空間関数、のような ST_エリア および ST_長さ、CARTOの 高度な空間機能、Redshift 用 CARTO Analytics Toolbox の一部として Amazon Redshift ですぐに利用できます。 インストール。 さらに、すべてのデータの取り込みと変換のステップは、 AWSラムダ Amazon S3 内のデータセットが更新されたときに Redshift クエリを実行する関数。
データの視覚化
HR&A チームは、CARTO の Redshift コネクタを使用して Redshift サーバーレス エンドポイントに接続し、CARTO の SQL インターフェイスとウィジェットを使用してダッシュボードを構築し、クライアントのニーズに応じて地図データの動的計算を実行しながらマッピングを支援しました。
以下は、郵便番号ごとにアンケート回答を表示するダッシュボードのサンプル スクリーンショットです。 明るい色合いの郡は調査回答が限られているため、対象を絞ったデータ収集戦略に含める必要があります。
最初の画像は、アクティブなフィルターのないダッシュボードを示しています。 XNUMX 番目の画像は、スペイン語でアンケートに回答した回答者によるフィルタリングされた地図とチャットを示しています。 ユーザーは、棒グラフのそれぞれのカテゴリをクリックすることで、機能を選択して切り替えることができます。
結果: デジタル インクルージョン ダッシュボードを自動的に更新する新しい標準
この方法論を使用して最初の対話型ダッシュボード プロトタイプを開発した後、HR&A の州クライアントのうち 2 社 (CA、TX、NV、CO、MA) がこのソリューションに関心を示しました。 HR&A は XNUMX か月以内に各従業員にそれを実装することができました。これは、カスタムのインタラクティブなデジタル インクルージョン ダッシュボードとしては信じられないほど迅速な対応でした。
また、HR&A は、導入とダッシュボードの管理にかかる全体的な時間の約 75% の削減も実現しました。これは、コンサルティング チームが手動でのデータ分析から、クライアントが結果を解釈して戦略的に計画を立てるのを支援することに焦点を移すことができることを意味します。 最後に、ダッシュボードのユーザーフレンドリーなインターフェイスにより、より幅広い関係者が調査データにアクセスできるようになりました。 これにより、各州のデジタル インクルージョンの状況におけるギャップを評価する際の共通理解を構築することができ、調査回答が限られている地域から的を絞ったデータ収集戦略が可能になり、全体としてより生産的なコラボレーションがサポートされました。
まとめ
この投稿では、HR&A が Amazon Redshift Serverless と CARTO を使用して大量の地理空間データを分析する方法を示しました。
HR&A の導入の成功により、柔軟性とスケーラビリティを備えた Redshift Serverless が社会に前向きな変化をもたらす触媒として使用できることは明らかです。 HR&A がデジタルエクイティへの道を切り開き続ける中、彼らのストーリーは、AWS のサービスとそのパートナーが現実世界の課題に対処する際にどのように活用できるかを証明しています。
空間データを分析するために CARTO を使用して Redshift Serverless を探索し、その経験をコメントでお知らせください。
著者について
ハーマン・シン・ドーディ ハーマンは HR&A Advisors のアナリストであり、データ分析に対する情熱を、持続可能なインフラストラクチャの実践、社会的包摂、経済的実行可能性、気候回復力、ステークホルダーの能力構築と結びつけています。 ハーマン氏の仕事は、複雑なデータセットを視覚的なストーリーやアクセス可能なツールに変換することに焦点を当てていることが多く、コミュニティが直面している課題を理解し、明るい未来に向けたソリューションを作成できるように支援します。
キラン・クマール・タティ は、ネブラスカ州オマハを拠点とする分析スペシャリスト ソリューション アーキテクトです。 彼はエンドツーエンドの分析ソリューションの構築を専門としています。 彼は、大規模なビッグデータおよび分析ソリューションの設計と実装に 13 年以上の経験があります。 余暇には、クリケットをしたりスポーツ観戦を楽しんでいます。
サプナマヘシュワリ アマゾン ウェブ サービスのシニア ソリューション アーキテクトです。 彼女は、顧客が AWS 上で大規模なデータ分析ソリューションを設計できるよう支援します。 仕事以外では、旅行をしたり、新しい料理に挑戦したりすることを楽しんでいます。
ワシム・ナワズ AWS の分析スペシャリスト ソリューション アーキテクトです。 彼は 15 年以上、データ ウェアハウスとデータ レイク ソリューションの構築と調整に取り組んできました。 彼は、効率的でパフォーマンスが高く、スケーラブルな分析ソリューションを使用して顧客がデータ プラットフォームを最新化できるよう支援することに情熱を注いでいます。 仕事以外では、試合観戦と旅行が趣味です。
- SEO を活用したコンテンツと PR 配信。 今日増幅されます。
- PlatoData.Network 垂直生成 Ai。 自分自身に力を与えましょう。 こちらからアクセスしてください。
- プラトアイストリーム。 Web3 インテリジェンス。 知識増幅。 こちらからアクセスしてください。
- プラトンESG。 カーボン、 クリーンテック、 エネルギー、 環境、 太陽、 廃棄物管理。 こちらからアクセスしてください。
- プラトンヘルス。 バイオテクノロジーと臨床試験のインテリジェンス。 こちらからアクセスしてください。
- 情報源: https://aws.amazon.com/blogs/big-data/how-hra-uses-amazon-redshift-spatial-analytics-on-amazon-redshift-serverless-to-measure-digital-equity-in-states-across-the-us/
- :持っている
- :は
- :どこ
- $UP
- 1
- 120
- 13
- 15年
- 視聴者の38%が
- 150
- 29
- 33
- 視聴者の38%が
- a
- できる
- 私たちについて
- アクセス
- アクセス可能な
- 達成する
- 越えて
- アクティブ
- 住所
- アドレッシング
- 高度な
- 顧問
- 手頃な価格の
- すべて
- 許す
- 許可されて
- ことができます
- ほとんど
- また
- Amazon
- Amazon Webサービス
- アメリカ
- 金額
- an
- 分析
- アナリスト
- 分析的
- 分析的
- 分析論
- 分析します
- 分析する
- および
- どれか
- 適用
- 建築
- です
- エリア
- 周りに
- AS
- 評価中
- アシスト
- At
- 自動化
- 自動化する
- 自動的に
- 利用できます
- AWS
- バー
- ベース
- BE
- き
- の間に
- ビッグ
- ビッグデータ
- より明るい
- ブロードバンド
- ビルド
- 建物
- 内蔵
- ビジネス
- ビジネス・インテリジェンス
- by
- CA
- 缶
- 機能
- 容量
- 触媒
- カテゴリー
- 課題
- 変化する
- チャート
- クリーニング
- クライアント
- クライアント
- 気候
- クラウド
- CO
- コード
- 環境、テクノロジーを推奨
- コレクション
- コロラド州
- コラム
- 組み合わせ
- 組み合わせ
- 注釈
- コミュニティ
- コンプリート
- 複雑な
- 複雑さ
- 構成
- コンピュータ
- コンセプト
- お問合せ
- コンサルタント業
- コンサルティング
- 続ける
- 対応する
- コスト効率の良い
- 可能性
- 郡
- カバレッジ
- 作ります
- 作成した
- 作成します。
- クリケット
- カスタム
- Customers
- カット
- ダッシュボード
- ダッシュボード
- データ
- データ分析
- データレイク
- データの可視化
- データウェアハウス
- データセット
- 定義
- 配信する
- 展開
- 設計
- 詳細
- 細部
- 発展した
- 開発
- 開発
- デジタル
- デジタルワールド
- 話し合います
- 分割
- do
- ドント
- ダウン
- 間に
- ダイナミック
- 各
- 簡単に
- 経済
- 効果的に
- 効率的な
- 効率良く
- エンパワー
- 有効にする
- 奨励する
- 端から端まで
- エンドポイント
- 確保する
- 環境
- 株式
- エーテル(ETH)
- 評価する
- EVER
- 明らか
- 既存の
- 体験
- 探る
- 伸ばす
- 広範囲
- 外部
- エキス
- 容易にする
- 向い
- 特徴
- フィギュア
- File
- 埋める
- フィルター
- 最後に
- 調査結果
- 名
- 五
- 柔軟性
- フォーカス
- 焦点を当てて
- フォロー中
- フォーム
- から
- 完全に
- function
- 機能性
- 機能
- さらに
- 未来
- 仕事の未来
- Games
- ギャップ
- 取得する
- 目標
- 大いに
- 持ってる
- he
- 助けます
- 助けました
- 助け
- ことができます
- こちら
- 彼の
- 歴史的に
- ホーム
- お家の掃除
- 世帯
- 認定条件
- HTML
- HTTP
- HTTPS
- 何百
- 描く
- 画像
- 影響を受けた
- 実装する
- 実装
- 実装
- in
- include
- 含まれました
- 包含
- ますます
- 信じられないほど
- インフラ
- 統合する
- 統合
- インテリジェンス
- 相互作用
- 相互作用的
- 関心
- インタフェース
- インターネット
- インターネット・アクセス
- に
- IT
- ITS
- Jobs > Create New Job
- join
- JPG
- 知っている
- 既知の
- クマー
- 湖
- 風景
- 言語
- 大
- 残す
- う
- ライター
- ような
- 限定的
- ライブ
- 負荷
- ローカル
- 局部的に
- 場所
- 製
- 管理
- マネージャー
- 手動で
- 地図
- マッピング
- 意味した
- だけど
- 測定
- メラニ
- 方法論
- 何百万
- ミラー
- 近代化します
- モジュール
- 他には?
- 最も
- 学際的
- の試合に
- 市立
- 名
- ネイティブ
- ne
- 必要
- 必要
- ニーズ
- 新作
- NV
- of
- 提供
- Office
- 頻繁に
- オマハ
- on
- ONE
- or
- 整理
- 私たちの
- でる
- 外側
- が
- 全体
- パラメータ
- 部
- 参加する
- パートナー
- 情熱
- 情熱的な
- 舗装する
- 以下のために
- 実行
- 相
- 画像
- 場所
- 計画
- プラン
- プラットフォーム
- プラトン
- プラトンデータインテリジェンス
- プラトデータ
- 再生
- 人口
- 正の
- ポスト
- パワード
- プラクティス
- プライベート
- 手続き
- 手続き
- プロセス
- 生産性の高い
- 証明
- 概念実証
- プロトタイプ
- 提供
- クイック
- すぐに
- 範囲
- Raw
- 生データ
- リーチ
- すぐに
- 現実の世界
- 実現
- 受け取り
- リダイレクト
- 削減
- 地域
- 関連する
- 倉庫
- 表す
- それらの
- 回答者
- 回答
- 結果
- 得られました
- 結果
- 堅牢な
- ルール
- ラン
- runs
- 同じ
- 言う
- スケーラビリティ
- ド電源のデ
- 規模
- スクリーンショット
- 二番
- セクション
- しっかりと
- Seek
- select
- サーバレス
- サービス
- セッションに
- 形状
- shared
- 彼女
- 表示する
- 示されました
- 作品
- 著しく
- 簡単な拡張で
- 社会
- 社会の変化
- 社会
- 溶液
- ソリューション
- ソース
- スペース
- スペイン語
- 空間の
- 専門家
- 専門にする
- 特定の
- split
- スポーツ
- SQL
- 利害関係者
- ステークホルダー
- 標準
- スタンド
- 都道府県
- 米国
- 手順
- ステップ
- まだ
- ストレージ利用料
- 店舗
- 保存され
- ストーリー
- ストーリー
- 戦略的に
- 戦略
- 構造
- 成功した
- そのような
- 十分な
- サポート
- 支援する
- Survey
- 持続可能な
- テーブル
- テーラード
- 取り
- ターゲット
- 対象となります
- チーム
- 技術的
- 遺言
- より
- それ
- 未来
- 仕事の未来
- ステート
- アプリ環境に合わせて
- それら
- そこ。
- それによって
- ボーマン
- 彼ら
- この
- それらの
- 介して
- 時間
- <font style="vertical-align: inherit;">回数</font>
- 〜へ
- 取った
- ツール
- ツールボックス
- ツールキット
- 豊富なツール群
- 最適化の適用
- 変換
- 変換
- 旅行
- true
- しよう
- TX
- type
- わかる
- 理解する
- 未知の
- 更新しました
- 更新
- us
- 米国の州
- 中古
- ユーザー
- 「DeckleBenchは非常に使いやすく最適なソリューションを簡単に見つけることができるため、稼働率が向上しコストも削減した。当社の旧システムは良かったが改善は期待していなかった。
- 使用されます
- 変化する
- 非常に
- 生存率
- バーチャル
- ビジュアル
- 可視化
- 極めて重要な
- ボリューム
- 倉庫
- ました
- 見ている
- 仕方..
- we
- ウェブ
- Webサービス
- 周知
- した
- この試験は
- いつ
- which
- while
- 誰
- ワイド
- より広い
- Wikipedia
- 以内
- 無し
- 仕事
- 働いていました
- ワークフロー
- 世界
- 年
- まだ
- 貴社
- あなたの
- ゼファーネット
- 〒
- ズーム