در دنیای دیجیتالی ما، دسترسی مقرون به صرفه به پهنای باند پرسرعت برای مشارکت کامل در جامعه ما ضروری است، با این حال هنوز میلیونها خانواده آمریکایی بدون دسترسی به اینترنت هستند. مشاوران HR&A- یک مشاوره چند رشته ای با کار گسترده در فضای باند پهن و سهام دیجیتال به مشتریان ایالتی، شهرستانی و شهری خود کمک می کند تا با تجزیه و تحلیل نیازهای گنجاندن دیجیتالی خاص محلی و ایجاد طرح های ارزش ویژه دیجیتال، دسترسی مقرون به صرفه ای به اینترنت داشته باشند.
اولین گام در این فرآیند ترسیم شکاف دیجیتالی است. کدام خانوارها در خانه به اینترنت دسترسی ندارند؟ آنها کجا زندگی می کنند؟ نیازهای خاص آنها چیست؟
منابع داده عمومی برای ایجاد درک واقعی از نیازهای گنجاندن دیجیتال کافی نیستند. برای پر کردن شکافهای موجود در دادههای موجود، HR&A نظرسنجیهای دارایی دیجیتال را ایجاد میکند تا تصویر کاملتری را قبل از توسعه طرحهای سهام دیجیتال ایجاد کند. HR&A استفاده کرده است آمازون Redshift بدون سرور و کارتو برای پردازش کارآمدتر یافته های نظرسنجی و ایجاد داشبوردهای تعاملی سفارشی برای تسهیل درک نتایج. همکاری HR&A با آمازون Redshift و CARTO منجر به کاهش 75٪ در زمان استقرار کلی و مدیریت داشبورد شده و به تیم کمک کرد تا به اهداف فنی زیر دست یابد:
- بارگذاری نتایج نظرسنجی (فایلهای CSV) و دادههای هندسی (فایلهای شکل) در یک انبار داده
- انجام تبدیلهای ژئوفضایی با استفاده از کارهای استخراج، تبدیل و بارگذاری (ELT) برای پیوستن به دادههای هندسه با نتایج بررسی در انبار داده تا امکان تجسم نتایج بررسی بر روی نقشه فراهم شود.
- ادغام با ابزار هوش تجاری (BI) برای توابع پیشرفته جغرافیایی فضایی، تجسم ها و داشبوردهای نقشه برداری
- افزایش یا کاهش ظرفیت انبار داده برای رسیدگی به بارهای کاری با پیچیدگی های مختلف به روشی مقرون به صرفه
در این پست، نحوه استفاده HR&A از تجزیه و تحلیل فضایی Amazon Redshift و CARTO برای اندازهگیری مقرون به صرفه جغرافیایی فضایی گنجاندن دیجیتال و دسترسی به اینترنت در چندین ایالت ایالات متحده را بررسی میکنیم.
قبل از اینکه به جزئیات معماری بپردازیم، در اینجا چیزی است که HR&A و مشتری آن، دفتر کار آینده کلرادو، در مورد راه حل می گویند.
تیم سرمایهگذاری دیجیتال کلرادو با کار با تیم در مشاوران منابع انسانی، داشبورد سفارشی ایجاد کرد که به ما امکان میداد تا در حین بررسی جمعیتهای به حاشیه رانده شده تاریخی در سراسر کلرادو، دسترسی خود را بسیار مؤثر ارزیابی کنیم. این ابزار پویا که توسط AWS و CARTO پشتیبانی میشود، تجسمهایی قوی از اینکه کدام مناطق و جمعیتها با نظرسنجی ما در تعامل هستند را ارائه میدهد، و ما را قادر میسازد تا به سرعت بزرگنمایی کنیم و شکافهای پوشش را برطرف کنیم. اطمینان از اینکه میتوانیم دادههایی را از کسانی که بیشترین تأثیر را از شکاف دیجیتال در کلرادو گرفتهاند، برای رسیدگی به نابرابریهای دیجیتال در ایالت ما حیاتی است.»
- ملانی کولتی، مدیر سهام دیجیتال در دفتر آینده کار کلرادو
AWS به ما این امکان را میدهد که همه دادههای نظرسنجی خود را بهطور امن در یک مکان قرار دهیم، به سرعت آنها را در Amazon Redshift تجزیه و تحلیل کنیم، و نتایج را از طریق یکپارچهسازی با ابزارهای تجسم دادهها مانند CARTO بدون خروج دادهها از AWS منعکس کنیم. این امر فضای رایانه محلی ما را آزاد می کند، مرحله تمیز کردن و تجزیه و تحلیل نظرسنجی را تا حد زیادی خودکار می کند و به مشتریان ما اجازه می دهد به راحتی به نتایج داده ها دسترسی داشته باشند. پس از اثبات مفهوم و توسعه نمونه اولیه، تقریباً همه مشتریان ایالتی ما به استفاده از راه حل مشابه برای ایالت های خود علاقه نشان دادند.
- هارمن سینگ دودی، تحلیلگر در HR&A Advisors, Inc.
ذخیره و تجزیه و تحلیل مجموعه داده های بزرگ نظرسنجی
HR&A از Redshift Serverless برای ذخیره مقادیر زیادی از دادههای گنجاندن دیجیتال در یک مکان و تبدیل و تجزیه و تحلیل سریع آنها با استفاده از جعبه ابزار تحلیلی CARTO برای گسترش قابلیتهای فضایی Amazon Redshift و ادغام با ابزارهای تجسم دادههای CARTO استفاده کرد - همه اینها بدون خروج دادهها از محیط AWS . این به طور قابل توجهی زمان چرخش تحلیلی را کاهش داد.
La جعبه ابزار تجزیه و تحلیل CARTO برای Redshift از مجموعه ای از توابع و رویه های تعریف شده توسط کاربر تشکیل شده است که در مجموعه ای از ماژول ها بر اساس عملکردی که ارائه می دهند سازماندهی شده اند.
شکل زیر راه حل و مراحل گردش کار توسعه یافته در طول اثبات مفهوم با یک ابر خصوصی مجازی (VPC) در Amazon Redshift را نشان می دهد.
در بخشهای بعدی، هر مرحله در گردش کار را با جزئیات بیشتری مورد بحث قرار میدهیم.
بلع داده ها
HR&A دادههای نظرسنجی را به صورت فایلهای CSV گسترده با صدها ستون در هر فایل و دادههای مکانی مرتبط به صورت هگزادسیمال دریافت میکند. باینری گسترده و شناخته شده (EWKB) در قالب فایل های شکل این فایل ها در سرویس ذخیره سازی ساده آمازون (Amazon S3).
La دستور Redshift COPY برای وارد کردن داده های مکانی از فایل های شکل به نوع داده های GEOMETRY بومی که در Amazon Redshift پشتیبانی می شود استفاده می شود. ترکیبی از آمازون Redshift Spectrum و دستورات COPY برای جذب داده های نظرسنجی ذخیره شده به عنوان فایل های CSV استفاده می شود. برای فایل هایی با ساختار ناشناخته، چسب AWS خزنده برای استخراج ابرداده و ایجاد تعاریف جدول در کاتالوگ داده ها. این تعاریف جدول به عنوان مخزن ابرداده برای جداول خارجی در Amazon Redshift استفاده می شود.
برای فایل هایی با ساختارهای شناخته شده، از یک روش ذخیره شده Redshift استفاده می شود که مکان فایل و نام جدول را به عنوان پارامتر می گیرد و یک دستور COPY را برای بارگذاری داده های خام در جداول Redshift مربوطه اجرا می کند.
تبدیل داده ها
رویه های ذخیره شده چندگانه برای تقسیم داده های جدول خام و بارگذاری آن در جداول هدف مربوطه در حین اعمال تبدیل های تعریف شده توسط کاربر استفاده می شود.
این قوانین تبدیل شامل تبدیل داده های GEOMETRY با استفاده از بومی است توابع ژئو فضایی انتقال به سرخ، مانند ST_Area و ST_lengthو CARTO's توابع فضایی پیشرفته، که به راحتی در Amazon Redshift به عنوان بخشی از جعبه ابزار CARTO Analytics برای Redshift در دسترس هستند نصب و راه اندازی. علاوه بر این، تمام مراحل جذب و تبدیل داده ها با استفاده از یک خودکار خودکار می شوند AWS لامبدا هنگامی که هر مجموعه داده در آمازون S3 به روز می شود، پرس و جو Redshift را اجرا می کند.
تجسم داده ها
تیم HR&A از رابط Redshift CARTO برای اتصال به نقطه پایانی Redshift Serverless استفاده کرد و داشبوردهایی را با استفاده از رابط SQL و ویجتهای CARTO ساخت تا در حین انجام محاسبات پویا از دادههای نقشه بر اساس نیاز مشتری، به نقشهبرداری کمک کند.
در زیر نمونهای از صفحهنمایش داشبوردها آمده است که پاسخهای نظرسنجی را با کد پستی نشان میدهند. شهرستانهایی که در سایههای روشنتر هستند، پاسخهای نظرسنجی محدودی را نشان میدهند و باید در استراتژی جمعآوری دادههای هدفمند گنجانده شوند.
تصویر اول داشبورد را بدون فیلتر فعال نشان می دهد. تصویر دوم نقشه فیلتر شده و چت های پاسخ دهندگانی که در نظرسنجی به زبان اسپانیایی شرکت کردند را نشان می دهد. کاربر می تواند با کلیک بر روی دسته مربوطه در هر یک از نمودارهای میله ای، ویژگی ها را انتخاب کرده و بین آنها جابجا شود.
نتیجه: استانداردی جدید برای بهروزرسانی خودکار داشبوردهای گنجاندن دیجیتال
پس از توسعه اولین نمونه اولیه داشبورد تعاملی با این روش، پنج نفر از مشتریان ایالتی HR&A (CA، TX، NV، CO، و MA) به راه حل علاقه نشان دادند. HR&A توانست آن را برای هر یک از آنها در عرض 2 ماه پیادهسازی کند - یک چرخش فوقالعاده سریع برای داشبورد گنجاندن دیجیتال تعاملی سفارشی.
HR&A همچنین متوجه کاهش 75 درصدی در زمان استقرار کلی و مدیریت داشبورد شد که به این معنی بود که تیم مشاور میتواند تمرکز خود را از تجزیه و تحلیل دستی دادهها به کمک به مشتریان برای تفسیر و برنامهریزی استراتژیک حول نتایج هدایت کند. در نهایت، رابط کاربر پسند داشبورد، دادههای نظرسنجی را برای طیف وسیعتری از سهامداران قابل دسترستر کرد. این به ایجاد درک مشترک در هنگام ارزیابی شکافها در چشمانداز گنجاندن دیجیتالی هر ایالت کمک کرد و امکان یک استراتژی جمعآوری دادههای هدفمند از مناطقی با پاسخهای نظرسنجی محدود را فراهم کرد و در نتیجه از همکاری سازندهتر به طور کلی حمایت کرد.
نتیجه
در این پست، ما نشان دادیم که چگونه HR&A قادر به تجزیه و تحلیل دادههای جغرافیایی فضایی در حجم زیاد با استفاده از Amazon Redshift Serverless و CARTO است.
با اجرای موفقیت آمیز HR&A، بدیهی است که Redshift Serverless، با انعطاف پذیری و مقیاس پذیری خود، می تواند به عنوان یک کاتالیزور برای تغییرات اجتماعی مثبت استفاده شود. از آنجایی که HR&A به هموار کردن راه برای عدالت دیجیتال ادامه میدهد، داستان آنها گواهی است بر اینکه چگونه میتوان از خدمات AWS و شرکای آن در پرداختن به چالشهای دنیای واقعی استفاده کرد.
ما شما را تشویق می کنیم که Redshift Serverless را با CARTO برای تجزیه و تحلیل داده های مکانی بررسی کنید و تجربه خود را در نظرات به ما بگویید.
درباره نویسندگان
هارمن سینگ دودی هارمن یک تحلیلگر در HR&A Advisors است، اشتیاق خود را برای تجزیه و تحلیل داده ها با اقدامات زیرساختی پایدار، شمول اجتماعی، دوام اقتصادی، انعطاف پذیری آب و هوا و ایجاد ظرفیت ذینفعان ترکیب می کند. کار هارمن اغلب بر ترجمه مجموعه دادههای پیچیده به داستانهای بصری و ابزارهای قابل دسترس متمرکز است که به جوامع کمک میکند تا چالشهایی را که با آنها روبرو هستند درک کنند و راهحلهایی برای آیندهای روشنتر ایجاد کنند.
کیران کومار تاتی یک معمار راه حل متخصص تجزیه و تحلیل مستقر در اوماها، NE است. او در ساخت راه حل های تحلیلی سرتاسر تخصص دارد. او بیش از 13 سال تجربه در طراحی و پیاده سازی راه حل های Big Data و Analytics در مقیاس بزرگ دارد. در اوقات فراغت خود از بازی کریکت و تماشای ورزش لذت می برد.
سپنا ماهشواری Sr. Solutions Architect در خدمات وب آمازون است. او به مشتریان کمک می کند تا راه حل های تجزیه و تحلیل داده را در مقیاس در AWS معمار کنند. خارج از محل کار، او از سفر کردن و امتحان کردن غذاهای جدید لذت می برد.
وشم نواز یک معمار راه حل های متخصص تجزیه و تحلیل در AWS است. او بیش از 15 سال در ساخت و تنظیم راه حل های انبار داده و دریاچه داده کار کرده است. او مشتاق کمک به مشتریان است تا پلتفرم های داده خود را با راه حل های تحلیلی کارآمد، کارآمد و مقیاس پذیر مدرن کنند. خارج از محل کار از تماشای بازی و مسافرت لذت می برد.
- محتوای مبتنی بر SEO و توزیع روابط عمومی. امروز تقویت شوید.
- PlatoData.Network Vertical Generative Ai. به خودت قدرت بده دسترسی به اینجا.
- PlatoAiStream. هوش وب 3 دانش تقویت شده دسترسی به اینجا.
- PlatoESG. کربن ، CleanTech، انرژی، محیط، خورشیدی، مدیریت پسماند دسترسی به اینجا.
- PlatoHealth. هوش بیوتکنولوژی و آزمایشات بالینی. دسترسی به اینجا.
- منبع: https://aws.amazon.com/blogs/big-data/how-hra-uses-amazon-redshift-spatial-analytics-on-amazon-redshift-serverless-to-measure-digital-equity-in-states-across-the-us/
- : دارد
- :است
- :جایی که
- $UP
- 1
- 120
- 13
- سال 15
- ٪۱۰۰
- 150
- 29
- 33
- ٪۱۰۰
- a
- قادر
- درباره ما
- دسترسی
- در دسترس
- رسیدن
- در میان
- فعال
- نشانی
- خطاب به
- پیشرفته
- مشاوران
- مقرون به صرفه
- معرفی
- اجازه دادن
- مجاز
- اجازه می دهد تا
- تقریبا
- همچنین
- آمازون
- آمازون خدمات وب
- امریکایی
- مقدار
- an
- تحلیل
- روانکاو
- تحلیلی
- تحلیلی
- علم تجزیه و تحلیل
- تحلیل
- تجزیه و تحلیل
- و
- هر
- با استفاده از
- معماری
- هستند
- مناطق
- دور و بر
- AS
- ارزیابی
- همکاری
- At
- خودکار
- خودکار می کند
- بطور خودکار
- در دسترس
- AWS
- بار
- مستقر
- BE
- بوده
- قبل از
- میان
- بزرگ
- بزرگ داده
- روشن تر
- پهنای باند
- ساختن
- بنا
- ساخته
- کسب و کار
- هوش تجاری
- by
- CA
- CAN
- قابلیت های
- ظرفیت
- کاتالیست
- دسته بندی
- چالش ها
- تغییر دادن
- نمودار
- تمیز کاری
- مشتری
- مشتریان
- اقلیم
- ابر
- CO
- رمز
- همکاری
- مجموعه
- کلرادو
- ستون ها
- ترکیب
- ترکیب
- نظرات
- جوامع
- کامل
- پیچیده
- پیچیدگی
- مرکب
- کامپیوتر
- مفهوم
- اتصال
- مشاوره
- مشاوره
- ادامه
- متناظر
- مقرون به صرفه
- میتوانست
- شهرستان
- پوشش
- ایجاد
- ایجاد شده
- ایجاد
- کریکت
- سفارشی
- مشتریان
- برش
- داشبورد
- داشبورد
- داده ها
- تجزیه و تحلیل داده ها
- دریاچه دریاچه
- تجسم داده ها
- انبار داده
- مجموعه داده ها
- تعاریف
- ارائه
- گسترش
- طراحی
- جزئیات
- جزئیات
- توسعه
- در حال توسعه
- پروژه
- دیجیتال
- دنیای دیجیتال
- بحث و تبادل نظر
- تقسیم
- do
- آیا
- پایین
- در طی
- پویا
- هر
- به آسانی
- اقتصادی
- به طور موثر
- موثر
- موثر
- قدرت دادن
- را قادر می سازد
- تشویق
- پشت سر هم
- نقطه پایانی
- حصول اطمینان از
- محیط
- انصاف
- اتر (ETH)
- ارزیابی
- تا کنون
- واضح است
- موجود
- تجربه
- اکتشاف
- گسترش
- وسیع
- خارجی
- عصاره
- تسهیل کردن
- نما
- امکانات
- شکل
- پرونده
- فایل ها
- پر کردن
- فیلترها برای تصفیه آب
- سرانجام
- یافته ها
- نام خانوادگی
- پنج
- انعطاف پذیری
- تمرکز
- تمرکز
- پیروی
- برای
- فرم
- از جانب
- کاملا
- تابع
- قابلیت
- توابع
- بعلاوه
- آینده
- آینده کار
- بازیها
- شکاف
- هندسه
- دریافت کنید
- اهداف
- تا حد زیادی
- آیا
- he
- کمک
- کمک کرد
- کمک
- کمک می کند
- اینجا کلیک نمایید
- خود را
- به لحاظ تاریخی
- صفحه اصلی
- خانه
- خانوارها
- چگونه
- HTML
- HTTP
- HTTPS
- صدها نفر
- نشان دادن
- تصویر
- نهفته
- انجام
- پیاده سازی
- اجرای
- in
- شامل
- مشمول
- گنجاندن
- به طور فزاینده
- بطور باور نکردنی
- شالوده
- ادغام
- ادغام
- اطلاعات
- تعامل
- تعاملی
- علاقه
- رابط
- اینترنت
- دسترسی به اینترنت
- به
- IT
- ITS
- شغل ها
- پیوستن
- JPG
- دانستن
- شناخته شده
- کومار
- دریاچه
- چشم انداز
- زبان
- بزرگ
- ترک
- اجازه
- فندک
- پسندیدن
- محدود شده
- زنده
- بار
- محلی
- به صورت محلی
- محل
- ساخته
- مدیریت
- مدیر
- دستی
- نقشه
- نقشه برداری
- به معنای
- اندازه
- اندازه گیری
- ملانی
- متاداده
- روش شناسی
- میلیون ها نفر
- آینه
- نوین کردن
- ماژول ها
- بیش
- اکثر
- چند رشته ای
- چندگانه
- شهری
- نام
- بومی
- ne
- ضرورت
- نیاز
- نیازهای
- جدید
- NV
- of
- ارائه
- دفتر
- غالبا
- اوماها (روباز انتخابی)
- on
- ONE
- or
- سازمان یافته
- ما
- خارج
- خارج از
- روی
- به طور کلی
- پارامترهای
- بخش
- شرکت کردن
- شرکای
- شور
- احساساتی
- سنگفرش
- برای
- انجام
- فاز
- تصویر
- محل
- برنامه
- برنامه
- سیستم عامل
- افلاطون
- هوش داده افلاطون
- PlatoData
- بازی
- جمعیت
- مثبت
- پست
- صفحه اصلی
- شیوه های
- خصوصی
- روش
- روش
- روند
- تولیدی
- اثبات
- اثبات مفهوم
- نمونه اولیه
- ارائه
- سریع
- به سرعت
- محدوده
- خام
- داده های خام
- رسیدن به
- به راحتی
- دنیای واقعی
- متوجه
- دریافت
- تغییر مسیر
- کاهش
- مناطق
- مربوط
- مخزن
- نشان دادن
- قابل احترام
- پاسخ دهندگان
- پاسخ
- نتیجه
- نتیجه
- نتایج
- تنومند
- قوانین
- دویدن
- اجرا می شود
- همان
- گفتن
- مقیاس پذیری
- مقیاس پذیر
- مقیاس
- تصاویر
- دوم
- بخش
- ایمن
- به دنبال
- را انتخاب کنید
- بدون سرور
- خدمات
- تنظیم
- شکل
- به اشتراک گذاشته شده
- او
- نشان
- نشان داد
- نشان می دهد
- به طور قابل توجهی
- ساده
- آگاهی
- تغییر اجتماعی
- جامعه
- راه حل
- مزایا
- منابع
- فضا
- اسپانیایی
- فضایی
- متخصص
- تخصص دارد
- خاص
- انشعاب
- ورزش ها
- SQL
- ذینفع
- سهامداران
- استاندارد
- می ایستد
- دولت
- ایالات
- گام
- مراحل
- هنوز
- ذخیره سازی
- opbevare
- ذخیره شده
- داستان
- داستان
- استراتژیک
- استراتژی
- ساختار
- موفق
- چنین
- کافی
- پشتیبانی
- حمایت از
- بررسی
- قابل تحمل
- جدول
- طراحی شده
- طول می کشد
- هدف
- هدف قرار
- تیم
- فنی
- اراده
- نسبت به
- که
- La
- آینده
- آینده کار
- دولت
- شان
- آنها
- آنجا.
- در نتیجه
- اینها
- آنها
- این
- کسانی که
- از طریق
- زمان
- بار
- به
- در زمان
- ابزار
- جعبه ابزار
- ابزار
- ابزار
- دگرگون کردن
- دگرگونی
- تحولات
- سفر
- درست
- تلاش
- TX
- نوع
- فهمیدن
- درک
- ناشناخته
- به روز شده
- به روز رسانی
- us
- ایالات ایالات متحده
- استفاده
- کاربر
- کاربر پسند
- استفاده
- با استفاده از
- متفاوت است
- بسیار
- زنده ماندن
- مجازی
- بصری
- تجسم
- حیاتی
- جلد
- انبار کالا
- بود
- تماشای
- مسیر..
- we
- وب
- خدمات وب
- معروف
- بود
- چی
- چه زمانی
- که
- در حین
- WHO
- وسیع
- گسترده تر
- ویکیپدیا
- با
- در داخل
- بدون
- مهاجرت کاری
- مشغول به کار
- گردش کار
- جهان
- سال
- هنوز
- شما
- شما
- زفیرنت
- زیپ
- زوم