この投稿では、どのように使用できるかを示します AWS クリーンルーム 公衆衛生機関間のデータ連携を可能にする。 公衆衛生政府機関は、サービスを提供するさまざまなコミュニティの福祉の向上を目的とした政策や治療法を作成するために、人口全体のさまざまな健康状態とケアに関連する傾向を理解する必要があります。
これを行うために、これらの機関は、臨床組織、非臨床地域組織、他の政府機関からの行政データなど、多くのソースからのデータを分析して、集団全体の健康状態と治療に関する傾向を特定できるようにする必要があります。 公衆衛生は、サービスを提供するコミュニティ内の人々に何が起こっているのかを理解する必要があります。
彼らは危険にさらされている人々を調査しているため、個人を特定できる情報 (PII) を除いた、症例の行リストの柔軟性が必要です。 この情報を使用すると、PII を漏らすことなく、データ ソースで入手可能なさまざまな人口統計的および社会的要因に基づいてリスクを評価できます。 このリストにより、回帰などのより複雑な分析をリンクされたデータにも適用できる柔軟性が得られます。 のようなプログラム メンズ, MDPHnet, コード 彼らは、分散ネットワーク内の臨床データを使用して、地域社会における慢性疾患の負担を理解することを長年にわたって研究してきました。 これらのプログラムが直面している課題には、データ プロバイダーのネットワーク全体での複雑なデータ共有ルールや分散分析アプローチが含まれます。 たとえば、MENDS と MDPHnet は、サイト間で重複を排除することなく、組織レベルで分析を実行します。 個々のクエリは各サイトにプッシュされ、そこで人間によって処理およびレビューされ、結合された出力が公衆衛生機関に送信されます。
AWS Clean Rooms は、このようなプログラムでデータプロバイダーの負担を軽減する機会を提供すると同時に、公衆衛生機関が独自のクエリを使用してデータを分析し、基礎となる生データへのアクセスを防ぐことでデータプライバシーのリスクを軽減できるようにします。
AWS クリーン ルームの概要
AWS クリーンルーム は AWS re:Invent 2022 で初めて発表され、現在一般提供されています。 AWS Clean Rooms を使用すると、顧客とそのパートナーは、基盤となるデータを相互に共有したりコピーしたりすることなく、集合的なデータセットでより簡単かつ安全に共同作業できるようになります。 AWS Clean Rooms は、クエリ制御、クエリ出力制限、クエリログ、暗号化コンピューティングツールなど、機密データの保護に役立つプライバシーを強化する幅広い制御セットを提供します。
AWS Clean Rooms を使用すると、どちらの当事者も生データを共有したりコピーしたりすることなく、コラボレーションの他の当事者と共同作業してデータを分析できます。 AWS Clean Rooms はステートレスなサービスです。 データは保存されません。 代わりに、データが存在する場所からデータを読み取り、クエリ実行時に各参加者の基になるデータを保護する制限を適用し、結果を返します。 クエリは、共通のメタデータ要素 (地理、共有識別子、その他の人口統計的要素など) を使用してデータ ソースを横断および分析するように作成でき、データ ソース間の重複の行レベルのリストや、人口、条件、またはデータごとの集計数のリストを生成できます。他の層。
AWS Clean Rooms は、公衆衛生機関が収集したデータを分析して、データのセキュリティとプライバシーを維持しながら、コミュニティの健康と福祉をより完全に把握するのに役立ちます。
ソリューションの概要
AWS Clean Rooms を始める前に、まずサービスの主要な概念のいくつかについて話しましょう。
- コラボレーション – これは、コラボレーション作成者によって作成された AWS Clean Room の安全な論理境界です。 コラボレーションを作成するとき、作成者はコラボレーションに参加する追加メンバーを招待できます。 招待された参加者は、コラボレーションへの参加の招待を受け入れる前に、コラボレーション メンバーのリストを確認できます。
- メンバー – これは、コラボレーションの参加者である AWS の顧客を指します。 すべてのコラボレーション メンバーがデータに参加できます。 ただし、コラボレーションごとにクエリを実行して結果を受け取ることができるのは XNUMX 人のメンバーだけであり、そのメンバーは不変です。
- 分析ルール – AWS Clean Rooms は XNUMX 種類の分析ルールをサポートしています。
- アグリゲーション – メンバーは、オプションのディメンションに沿って COUNT、SUM、または AVG 関数を使用して統計を集計するクエリを実行できます。 集計クエリでは行レベルのデータは明らかにされません。
- リスト – メンバーは、XNUMX つのテーブル間の重複部分の行レベルのデータを出力するクエリを実行できます。
- 構成されたテーブル – メンバーは既存の設定を行うことができます AWSグルー AWS クリーン ルームで使用するテーブル。 このデータは次の場所に保存されます Amazon シンプル ストレージ サービス (Amazon S3) オープンデータ形式で保存され、AWS Glue データカタログにカタログ化されています。 構成された各テーブルには、データのクエリ方法を決定する分析ルールが含まれています。 構成後、メンバーは構成されたテーブルを XNUMX つ以上のコラボレーションに関連付けることができます。
AWS Clean Rooms の使用を開始するには、次の XNUMX つのステップのプロセスがあります。
- 作成者はコラボレーションを設定し、XNUMX 人以上のメンバーをコラボレーションに招待します。
- 招待されたメンバーがコラボレーションに参加します。
- メンバーは、AWS Clean Room で使用するために既存の AWS Glue テーブルを設定できます。
- 権限のあるメンバーは、コラボレーションでクエリを実行できます。
前提条件
このチュートリアルでは、次のものが必要です。
コラボレーションを作成し、XNUMX 人以上のメンバーを招待します
AWS Clean Rooms コンソールでコラボレーション設定を定義する必要があります。 AWSコマンドラインインターフェイス (AWS CLI)、または AWS SDK を使用します。 コンソールでこれを構成する方法を示します。
- AWS Clean Rooms コンソールで、 コラボレーションを作成します。
- 名前 、名前を入力します (例: デモ コラボレーション)。
- Description、オプションの説明を追加します。
- メンバー セクションで、次のメンバーを追加します。
- メンバー1 – メンバーの表示名を入力します (AWS アカウント ID が自動的に入力されます)。
- メンバー2 – 招待するメンバーのメンバー表示名と AWS アカウント ID を入力します。
- 選択する 別のメンバーを追加する さらにメンバーを追加します。
- メンバーの能力 セクションでは、クエリを実行して結果を受け取るメンバーを XNUMX 人選択します。
- クエリロギング セクション、選択 このコラボレーションのクエリログのサポート クエリをログインするには アマゾンクラウドウォッチ ログ。
- 選択する Next.
- コラボレーションメンバーシップ セクションで、CloudWatch に使用するストレージ オプションを選択します。
- 選択する Next.
- ソフトウェア設定ページで、下図のように 確認して作成する ページ、選択 コラボレーションとメンバーシップを作成する 正確性を確保するために詳細を確認した後。
初めてのコラボレーションの作成おめでとうございます! コラボレーションの詳細は、 コラボレーション ページで見やすくするために変数を解析したりすることができます。
コラボレーションに参加する
各コラボレーション メンバーは、次の手順に従って AWS Clean Rooms コンソールにログインし、招待状を確認し、コラボレーションへの参加を決定できます。
- AWS Clean Rooms コンソールで、 コラボレーション ナビゲーションペインに表示されます。
- ソフトウェア設定ページで、下図のように 参加可能 タブで、招待されたコラボレーションを選択します。
詳細ページではメンバーの能力を確認できます。
- 希望するログ ストレージ オプションを選択し、 メンバーシップの作成.
- 確認ページで、リストされているメンバーがデータ共有契約に準拠していることを確認し、選択します。 メンバーシップの作成.
メンバーシップを作成すると、メンバーのステータスが次のように変更されます。 アクティブ コラボレーション ダッシュボードで。
AWS Clean Room で使用するために既存の AWS Glue テーブルを設定する
AWS Clean Rooms は Amazon S3 からデータを読み取るため、データのコピーを作成する必要はありません。 これにより、各 AWS アカウント以外の宛先にデータをコピーしてロードしたり、データ共有を容易にするためにサードパーティのサービスを使用したりする必要がなくなります。
各コラボレーションメンバーは、設定されたテーブル、つまりデータの使用方法を定義する基礎となるデータを含む AWS Glue データカタログへの参照を含む AWS Clean Rooms リソースを作成できます。 構成されたテーブルは、多くのコラボレーションで使用できます。
- AWS Clean Rooms コンソールで、 構成されたテーブル ナビゲーションペインに表示されます。
- 選択する 新しいテーブルを構成する.
- AWS Glue テーブルのリストを作成するデータベースを選択し、コラボレーションに関連付けるテーブルを選択します。
選択したテーブルごとに、コラボレーションでどの列にアクセスできるかを決定できます。
- 選択 すべての列 または選択する カスタムリスト コラボレーションで使用できる列のサブセットを選択します。
- 設定したテーブルの名前を入力します。
- 選択する 新しいテーブルを構成する.
列レベルのアクセス制御に加えて、AWS Clean Rooms は分析ルールと呼ばれるきめ細かいクエリ制御を提供します。 組み込みの柔軟な分析ルールを使用して、特定のビジネス ニーズに合わせてクエリを調整できます。 前に説明したように、AWS Clean Rooms は XNUMX 種類の分析ルールを提供します。
- 集計分析ルール – これらにより、行レベルの情報を明らかにせずにデータを集計するクエリが可能になります。 使用可能な関数には、オプションのディメンションに沿った COUNT、SUM、および AVG が含まれます。
- リスト分析ルール – これらにより、コラボレーション スペース内のテーブル間の重複の行レベルの属性分析を出力するクエリが可能になります。
どちらのルール タイプでも、データ所有者は自分のデータセットとクエリを実行しているコラボレーターのデータセットの間の結合を義務付けることができます。 これにより、結果がコラボレータ データセットの共通部分のみに限定されます。
- 構成されたテーブルで、選択します 分析ルールを設定する 分析ルールを設定します。
- この投稿では、 リスト 他の寄稿者からの予防接種データと結合することで、患者の予防接種ステータスをクエリしたいからです。
- 作成方法を選択し、 Next.
- テーブル結合の基準を定義するには、 結合コントロール セクションで、結合に適切な列名を選択します。
- どの列を出力するかを指定するには、 リストコントロール のセクションから無料でダウンロードできます。
- 選択する Next.
- 選択する 分析ルールを設定する 確認して構成する ページで見やすくするために変数を解析したりすることができます。
メッセージが表示されます リスト分析ルールが正常に構成されました 構成されたテーブルのページ。
- 選択する コラボレーションに関連付ける をクリックして、このテーブルを作成したコラボレーションにリンクします。
- で詳細を確認します。 アソシエイトテーブル ページを選択して選択します アソシエイトテーブル.
コラボレーション ページには、コラボレーションに関連付けられたテーブルのリストが表示されます。
コラボレーションの各メンバーは、前述の手順を繰り返して、AWS Glue データ カタログ テーブルをコラボレーションに関連付ける必要があります。 この投稿では、コラボレーションの他のメンバーも同じ手順に従って、データをコラボレーションに関連付けます。 その後、コラボレーションにより、他のメンバーによって関連付けられたすべてのテーブルがリストされます。
構成されたテーブルで分析ルールを定義し、コラボレーションに関連付けた後、クエリを実行して結果を受け取ることができるメンバーは、参加している各コラボレーション メンバーによって定義された制限に従ってクエリの作成を開始できます。 次のセクションには、コラボレーション クエリの例が含まれています。
コラボレーションでクエリを実行する
次のスクリーンショットは、* がサポートされていないために成功しないクエリの例です。 クエリでは列名を指定する必要があります。
次のスクリーンショットは、結合でメンバーが制限されている列をリンクできないため、成功しないクエリの例です。
次のスクリーンショットは、select 句と結合条件で許可された列 (リスト分析ルールの一部である列) を使用しているため、成功するクエリの例です。
この投稿で使用されているサンプル データセット (患者および予防接種) には、一意の識別子 (患者 ID) が含まれています。 ただし、現実のシナリオでは、これは当てはまらない可能性があります。 このような状況では、プライバシー保護レコード リンク (PPRL) を使用して、一意の匿名化されたトークンを作成することを検討できます。 たとえば、CDC の CODI プログラムは、標準化された方法で各組織のファイアウォールの内側で PII を難読化することにより、データ所有者間で重複を排除します。 その難読化された情報が結合されて、各個人に固有の匿名化されたトークンが作成され、データ ソース全体で分析されます。 公衆衛生機関が個別にリンクされた縦断データに基づいて分析を実施したい場合は、分析を実施する前に各データ ソースに PPRL を適用し、そのメタデータ要素を使用して AWS Clean Room のデータ ソースをリンクできます。
クリーンアップ
このウォークスルーの一環として、AWS Clean Rooms コラボレーションをプロビジョニングし、他のメンバーをコラボレーションに招待し、テーブルを構成しました。 これらのリソースを削除するには、以下を参照してください。 コラボレーションを終了する および 構成されたテーブルの関連付けの解除.
まとめ
この投稿では、AWS Clean Rooms コンソールでコラボレーションを作成する方法、コラボレーションに他のメンバーを招待する方法、既存の AWS Glue Catalog テーブルを設定する方法、分析ルールを適用する方法、サンプル クエリを実行する方法を説明しました。 このシリーズのパート 2 では、次を使用してクエリの実行を自動化する方法を示します。 AWSラムダを使用して結果をクエリします。 アマゾンアテナを使用してダッシュボードを公開し、 アマゾンクイックサイト.
著者について
ヴェンカタ カンパーナ AWS Health and Human Services チームのシニア ソリューション アーキテクトであり、カリフォルニア州サクラメントを拠点としています。 その役割で、彼は公共部門の顧客が AWS で適切に設計されたソリューションを使用してミッションの目標を達成するのを支援しています。
ドーン・ヘイジー・グローブ博士 は、アマゾン ウェブ サービスの州および地方政府チームの公衆衛生分析のリーダーです。 この役割で、彼女は、州および地方の公衆衛生機関が分析の課題と長期的な目標を達成する方法について創造的に考えるのを支援する責任を負っています。 彼女は、公衆衛生の監視と研究をサポートするために、既存または新しいデータを使用する新しい方法を見つけることにキャリアを費やしてきました。
ジム・ダニエル アマゾン ウェブ サービスの公衆衛生責任者です。 以前は、米国保健福祉省で公衆衛生イノベーション担当ディレクターや公衆衛生コーディネーターなどの役職を XNUMX 年近く務めていました。 政府に勤務する前は、ジムはマサチューセッツ州公衆衛生局の最高情報責任者を務めていました。
- SEO を活用したコンテンツと PR 配信。 今日増幅されます。
- EVMファイナンス。 分散型金融のための統一インターフェイス。 こちらからアクセスしてください。
- クォンタムメディアグループ。 IR/PR増幅。 こちらからアクセスしてください。
- プラトアイストリーム。 Web3 データ インテリジェンス。 知識増幅。 こちらからアクセスしてください。
- 情報源: https://aws.amazon.com/blogs/big-data/part-1-enable-data-collaboration-among-public-health-agencies-with-aws-clean-rooms/
- :は
- :not
- :どこ
- 1
- 100
- 12
- 195
- 2022
- 7
- a
- 能力
- 私たちについて
- 同意
- アクセス
- アクセス
- 従った
- 精度
- 達成する
- 越えて
- 加えます
- 添加
- NEW
- 行政の
- 後
- 機関
- 代理店
- 凝集
- 協定
- 整列する
- すべて
- 許す
- ことができます
- 沿って
- Amazon
- Amazon Webサービス
- 間で
- an
- 分析
- 分析論
- 分析します
- 分析
- および
- 発表の
- 別の
- 申し込む
- アプローチ
- 適切な
- です
- 周りに
- AS
- 評価する
- 仲間
- 関連する
- At
- 自動化する
- 自動的に
- 利用できます
- AVG
- AWS
- AWSグルー
- AWS re:Invent
- ベース
- BE
- なぜなら
- 背後に
- の間に
- 広い
- 内蔵
- 負担
- ビジネス
- by
- CA
- 呼ばれます
- 缶
- これ
- キャリア
- 場合
- 例
- カタログ
- CDC
- 課題
- 変更
- チーフ
- 選択する
- 臨床
- 協力します
- 環境、テクノロジーを推奨
- コラボレーション
- 集団
- コラム
- コラム
- 組み合わせた
- コマンドと
- コミュニティ
- コミュニティ
- コンプリート
- 複雑な
- コンピューティング
- コンセプト
- 条件
- 条件
- プロフェッショナルな方法で
- 導電性
- 設定された
- 確認
- 検討
- 領事
- 含まれています
- 貢献者
- controls
- コーディネーター
- 複写
- 可能性
- 作ります
- 作成した
- 作成
- 創造
- 創造的に
- クリエイター
- 基準
- 暗号
- Customers
- ダッシュボード
- ダッシュボード
- データ
- データプライバシー
- データ共有
- データベース
- データセット
- 十年
- 決めます
- 定義済みの
- 定義する
- 定義
- デモ
- 人口動態
- 実証します
- 部門
- 説明
- 目的地
- 細部
- 決定する
- 決定する
- 大きさ
- 取締役
- 議論する
- 病気
- ディスプレイ
- 配布
- do
- そうではありません
- 各
- 前
- 簡単に
- どちら
- 素子
- 要素は
- 排除
- enable
- 有効にする
- 確保
- 入力します
- エーテル(ETH)
- 例
- 既存の
- 調査済み
- 容易にする
- 向い
- 要因
- 発見
- ファイアウォール
- 名
- 柔軟性
- フレキシブル
- フォロー中
- から
- 機能
- 利得
- 一般に
- 生成
- 地理
- 取得する
- 与える
- 目標
- 目標
- 政府・公共機関
- 政府の
- 政府機関
- 出来事
- 持って
- he
- 健康
- ヒーロー
- 助けます
- 助け
- ことができます
- 彼女の
- 彼の
- 認定条件
- How To
- しかしながら
- HTML
- HTTP
- HTTPS
- 人間
- 人間
- ID
- 識別子
- 識別子
- 識別する
- if
- 不変
- 改善
- in
- include
- 含ま
- 含めて
- 個人
- 個別に
- 情報
- 革新的手法
- を取得する必要がある者
- 交差点
- に
- 招待状
- 招待
- 招聘
- プロンプト
- IT
- ジム
- join
- 参加した
- 参加
- ジョイン
- JPG
- ただ
- キー
- つながる
- リーダー
- レベル
- ような
- 制限
- LINE
- LINK
- リンク
- リスト
- リストされた
- リスト
- 命
- 負荷
- ローカル
- 地方自治体
- ログ
- ロギング
- 論理的な
- 長期的
- 探して
- 保守
- make
- 委任
- 多くの
- マサチューセッツ州
- 五月..
- メンバー
- メンバー
- メンバーシップ
- メッセージ
- 方法
- かもしれない
- ミッション
- 軽減する
- 他には?
- しなければなりません
- 名
- 名
- ナビゲーション
- ほぼ
- 必要
- ニーズ
- ネットワーク
- 新作
- 今
- 目的
- of
- オファー
- 役員
- on
- ONE
- の
- 開いた
- 開いているデータ
- 機会
- オプション
- or
- 注文
- 組織
- 組織
- その他
- 出力
- 外側
- 自分の
- 所有者
- ページ
- ペイン
- 部
- 参加者
- 参加する
- パーティー
- パートナー
- パーティー
- 患者
- 許可
- 個人的に
- 敬虔な
- プラトン
- プラトンデータインテリジェンス
- プラトデータ
- ポリシー
- 人口
- 人口
- 人口
- ポジション
- ポスト
- 好む
- 優先
- 予防
- 前に
- プライバシー
- プロセス
- 処理されました
- 演奏曲目
- プログラム
- 守る
- プロバイダ
- は、大阪で
- 公共
- 公衆衛生
- パブリッシュ
- プッシュ
- クエリ
- Raw
- 生データ
- RE
- 現実の世界
- 受け取ります
- 記録
- 減らします
- 指し
- 回帰
- 関連する
- 繰り返す
- 必要とする
- 研究
- リソースを追加する。
- リソース
- それらの
- 責任
- 制限されました
- 制限
- 結果
- 収益
- 明らかにする
- 明らかにする
- レビュー
- 日
- レビュー
- リスク
- リスク
- 職種
- 客室
- ルール
- ルール
- ラン
- ランニング
- サクラメント
- 同じ
- シナリオ
- SDDK
- セクション
- セクター
- 安全に
- しっかりと
- セキュリティ
- 選択
- シニア
- 敏感な
- 送信
- シリーズ
- 役立つ
- サービス
- サービス
- セッションに
- シェアする
- shared
- シェアリング
- 表示する
- 示されました
- 簡単な拡張で
- ウェブサイト
- サイト
- 状況
- So
- 社会
- ソリューション
- 一部
- ソース
- ソース
- スペース
- 特定の
- 指定の
- 費やした
- start
- 開始
- 都道府県
- 米国
- 統計
- Status:
- ステップ
- ストレージ利用料
- 店舗
- データを保存する
- 保存され
- 成功した
- そのような
- サポート
- サポート
- サポート
- 監視
- テーブル
- Talk
- チーム
- それ
- アプリ環境に合わせて
- それら
- その後
- ボーマン
- 彼ら
- 考える
- サードパーティ
- この
- それらの
- 〜へ
- トークン
- 豊富なツール群
- トリートメント
- トレンド
- 2
- 根本的な
- わかる
- ユニーク
- ユナイテッド
- 米国
- つかいます
- 中古
- 使用されます
- 多様
- さまざまな
- 確認する
- 、
- 詳しく見る
- ウォークスルー
- 欲しいです
- ました
- 仕方..
- 方法
- we
- ウェブ
- Webサービス
- WELL
- した
- この試験は
- 何ですか
- いつ
- which
- while
- 誰
- 意志
- 以内
- 無し
- 書き込み
- 書かれた
- 年
- 貴社
- あなたの
- ゼファーネット