تقریباً یک سال پیش، آیبیام در جریان یکی از جریانهای داده ادغامها و اکتسابهای حساس به زمان، با مشکل اعتبارسنجی دادهها مواجه شد. در حین کار برای حل این مشکل با چالشهای متعددی مواجه شدیم، از جمله عیبیابی، شناسایی مشکل، رفع جریان داده، ایجاد تغییرات در خطوط لوله دادههای پایین دستی و اجرای یک جریان کاری خودکار.
افزایش وضوح داده و کارایی نظارت با Databand
پس از حل مشکل فوری، یک تجزیه و تحلیل گذشته نگر نشان داد که اعتبارسنجی داده ها و نظارت هوشمندانه ممکن است درد را کاهش داده و زمان حل را تسریع کند. به جای توسعه یک راه حل سفارشی صرفاً برای نگرانی فوری، IBM به دنبال یک راه حل اعتبارسنجی داده با کاربرد گسترده بود که بتواند نه تنها با این سناریو، بلکه همچنین مشکلات نادیده گرفته شده احتمالی را مدیریت کند.
این زمانی بود که یکی از محصولات اخیراً خریداری شده خود را کشف کردم، IBM® Databand® برای قابلیت مشاهده داده ها. بر خلاف ابزارهای نظارت سنتی با نظارت مبتنی بر قانون یا صدها اسکریپت نظارت سفارشی توسعه یافته، Databand نظارت خودآموز را ارائه می دهد. رفتار داده های گذشته را مشاهده می کند و انحرافاتی را که از آستانه های خاصی فراتر می رود، شناسایی می کند. این قابلیت یادگیری ماشینی کاربران را قادر می سازد تا داده ها را با حداقل پیکربندی قوانین و تشخیص ناهنجاری نظارت کنند، حتی اگر دانش محدودی در مورد داده ها یا الگوهای رفتاری آن داشته باشند.
بهینه سازی قابلیت مشاهده جریان داده با نظارت خودآموز Databand
Databand رفتار تاریخی جریان داده را در نظر می گیرد و ضمن هشدار به کاربر، فعالیت های مشکوک را علامت گذاری می کند. IBM Databand را در جریان داده ما که شامل بیش از 100 خط لوله است، ادغام کرد. بهروزرسانیهای وضعیت بهراحتی قابل مشاهده را برای همه اجراها و خطوط لوله ارائه میکند و مهمتر از آن، خرابیها را برجسته میکند. این به ما این امکان را میدهد که روی اصلاح حوادث جریان داده تمرکز کرده و آن را تسریع کنیم.
باند داده برای مشاهده پذیری داده ها از خودآموزی برای نظارت بر موارد زیر استفاده می کند:
- تغییرات طرحواره: هنگامی که تغییر طرح شناسایی می شود، Databand آن را روی داشبورد پرچم گذاری می کند و یک هشدار ارسال می کند. هر فردی که با داده کار می کند احتمالاً با سناریوهایی مواجه شده است که در آن منبع داده تحت تغییرات طرحواره قرار می گیرد، مانند اضافه کردن یا حذف ستون ها. این تغییرات بر جریانهای کاری تأثیر میگذارد، که به نوبه خود بر پردازش خط لوله دادههای پاییندستی تأثیر میگذارد و منجر به اثر امواج میشود. باند داده می تواند تاریخچه طرحواره را تجزیه و تحلیل کند و به سرعت ما را در مورد هر گونه ناهنجاری آگاه کند و از اختلالات احتمالی جلوگیری کند.
- تأثیر قرارداد سطح خدمات (SLA): Databand خط و نسب داده ها را نشان می دهد و خطوط لوله داده های پایین دستی را که تحت تأثیر خرابی خط لوله داده قرار گرفته اند را شناسایی می کند. اگر SLA برای تحویل داده تعریف شده باشد، هشدارها به شناسایی و حفظ انطباق SLA کمک می کنند.
- ناهنجاری های عملکرد و زمان اجرا: Databand مدت زمان اجرای خط لوله داده را نظارت می کند و یاد می گیرد که ناهنجاری ها را تشخیص دهد و در صورت لزوم آنها را علامت گذاری کند. لازم نیست کاربران از مدت زمان خط لوله آگاه باشند. Databand از داده های تاریخی خود یاد می گیرد.
- وضعیت: باند داده وضعیت اجراها، از جمله عدم موفقیت، لغو یا موفقیت آمیز بودن اجراها را نظارت می کند.
- اعتبار سنجی داده ها: Databand محدودههای ارزش دادهها را در طول زمان مشاهده میکند و با تشخیص ناهنجاریها هشداری ارسال میکند. این شامل آمارهای معمولی مانند میانگین، انحراف معیار، حداقل، حداکثر و چارک ها می شود.
هشدارهای انتقال داده باند برای خطوط لوله داده پیشرفته
کاربران می توانند هشدارها را با استفاده از رابط کاربری Databand تنظیم کنند که پیچیده نیست و دارای داشبورد بصری است که گردش کار را نظارت و پشتیبانی می کند. از طریق نمودارهای غیر چرخه ای جهت دهی شده، دید عمیقی را فراهم می کند، که هنگام برخورد با بسیاری از خطوط لوله داده مفید است. این سیستم یکپارچه به تیمهای پشتیبانی قدرت میدهد تا روی مناطقی که نیاز به توجه دارند تمرکز کنند و آنها را قادر میسازد تا تحویلها را تسریع کنند.
ادغام و ادغام IBM Enterprise Data به ما این امکان را داده است که خطوط لوله داده خود را با Databand تقویت کنیم و ما به گذشته نگاه نکرده ایم. ما خوشحالیم که این نرم افزار تحول آفرین را به شما پیشنهاد می کنیم که به شناسایی زودتر حوادث داده، حل سریع تر آنها و ارائه داده های قابل اعتمادتر به مشاغل کمک می کند.
ارائه داده های قابل اعتماد با قابلیت مشاهده مداوم داده ها
این مقاله به شما کمک کرد؟
بلهنه
اطلاعات بیشتر از Data and Analytics
خبرنامه های آی بی ام
خبرنامهها و بهروزرسانیهای موضوعی ما را دریافت کنید که جدیدترین رهبری فکری و بینش را در مورد روندهای نوظهور ارائه میدهد.
مشترک شدن در حال حاضر
خبرنامه های بیشتر
- محتوای مبتنی بر SEO و توزیع روابط عمومی. امروز تقویت شوید.
- PlatoData.Network Vertical Generative Ai. به خودت قدرت بده دسترسی به اینجا.
- PlatoAiStream. هوش وب 3 دانش تقویت شده دسترسی به اینجا.
- PlatoESG. کربن ، CleanTech، انرژی، محیط، خورشیدی، مدیریت پسماند دسترسی به اینجا.
- PlatoHealth. هوش بیوتکنولوژی و آزمایشات بالینی. دسترسی به اینجا.
- منبع: https://www.ibm.com/blog/ibm-databand-self-learning-for-anomaly-detection/
- : دارد
- :است
- :نه
- :جایی که
- 00
- 1
- 100
- 11
- 2%
- 2024
- 24
- 28
- 29
- 30
- 300
- 36
- 39
- 4
- 400
- 41
- 5
- 50
- 6
- 7
- 8
- 9
- a
- درباره ما
- شتاب دادن
- تسریع شد
- پذیرفتن
- مطابق
- به دست آورد
- جمع آوری
- فعالیت ها
- حلقوی
- Ad
- وفق دادن
- اضافه کردن
- اتخاذ
- پیشرفته
- تبلیغات
- اثر
- تحت تاثیر قرار
- از نو
- پیش
- توافق
- AI
- هوشیار
- تصویر، موسیقی
- معرفی
- همه در یکی
- مجاز
- همچنین
- شگفت انگیز
- amp
- an
- تحلیل
- علم تجزیه و تحلیل
- تحلیل
- و
- تشخیص ناهنجاری
- هر
- هر کس
- مربوط
- روش
- معماری
- هستند
- مناطق
- مقاله
- AS
- At
- توجه
- نویسنده
- خودکار
- چشم انتظار
- مطلع
- به عقب
- ممنوعیت
- پایه
- BE
- زیرا
- رفتار
- رفتاری
- بودن
- بهتر
- مسدود شده
- بلاگ
- وبلاگ ها
- آبی
- جعبه
- مارک های
- به ارمغان می آورد
- ساخته
- کسب و کار
- عملکرد کسب و کار
- کسب و کار
- اما
- دکمه
- by
- CAN
- لغو شد
- قابلیت های
- قابلیت
- توانا
- کربن
- کارت
- کارت ها
- CAT
- دسته بندی
- معین
- چالش ها
- تغییر دادن
- تبادل
- گپ
- GPT چت
- بررسی
- محافل
- CIS
- کلاس
- CNN
- هم قطار
- رنگ
- ستون ها
- انجمن
- شرکت
- پیچیدگی ها
- انطباق
- شامل
- تمرکز
- نگرانی
- پیکر بندی
- در نظر می گیرد
- مصرف کننده
- رفتار مصرف کننده
- مصرف کنندگان
- ظرف
- متنی
- ادامه دادن
- مداوم
- هسته
- هزینه
- cpg
- ایجاد شده
- خالق
- CSS
- سفارشی
- راه حل سفارشی
- روزانه
- داشبورد
- داده ها
- ذخیره سازی داده ها
- پایگاه داده
- تاریخ
- روز
- معامله
- به طور پیش فرض
- مشخص
- تعاریف
- ارائه
- تحویل
- تقاضا
- شرح
- میز
- تشخیص
- شناسایی شده
- کشف
- توسعه دهنده
- در حال توسعه
- انحراف
- جهت دار
- کشف
- بحث در مورد
- متفاوت
- اختلالات
- do
- سند
- پایین
- مدت
- در طی
- مشتاقانه
- پیش از آن
- به آسانی
- اثر
- بهره وری
- خروج
- سنگ سنباده
- توانمندسازی
- فعال
- را قادر می سازد
- را قادر می سازد
- پایان
- تعامل
- مورد تأیید
- بالا بردن
- افزایش
- عظیم
- وارد
- وارد
- سرمایه گذاری
- شرکت
- موسس شرکت
- اتر (ETH)
- حتی
- تا کنون
- هر کس
- در حال تحول
- تجاوز
- برانگیخته
- خروج
- تجارب
- بررسی
- در مواجهه
- ناموفق
- شکست
- شکست
- غلط
- پنکه
- سریعتر
- امکانات
- فوریه
- پرچم ها
- قابل انعطاف
- جریان
- جریانها
- تمرکز
- به دنبال
- پیروی
- فونت
- برای
- تاسیس
- از جانب
- توابع
- جمع آوری شد
- گارتنر
- همه منظوره
- مولد
- مولد
- هوش مصنوعی مولد
- ژنراتور
- دریافت کنید
- مغازه
- نمودار ها
- بزرگترین
- توری
- دست
- دسته
- اداره
- آیا
- he
- عنوان
- شنیده
- ارتفاع
- کمک
- کمک کرد
- مفید
- کمک می کند
- برجسته
- تاریخی
- تاریخ
- افقی
- چگونه
- اما
- HTTPS
- صدها نفر
- i
- آی بی ام
- ICO
- ICON
- ایده ها
- شناسایی می کند
- شناسایی
- شناسایی
- if
- تصویر
- فوری
- تأثیر
- اهمیت
- مهمتر
- تحمیل
- in
- در عمق
- حوادث
- شامل
- از جمله
- شاخص
- افراد
- صنعت
- شالوده
- ابداع
- بینش
- در عوض
- یکپارچه
- ادغام
- ادغام
- هوشمند
- رابط
- داخلی
- به
- معرفی
- حسی
- موضوع
- مسائل
- IT
- ITS
- ژانویه
- پیوستن
- JPG
- دانش
- زبان
- لپ تاپ
- بزرگ
- آخرین
- رهبری
- برجسته
- یادگیری
- سطح
- احتمالا
- محدود شده
- زندگی
- محلی
- محل
- مکان
- نگاه
- دستگاه
- فراگیری ماشین
- ماشین آلات
- حفظ
- ساخت
- بسیاری
- حداکثر عرض
- بیشترین
- متوسط
- دیدار
- مربی
- ادغام
- ادغام و مالکیتها
- قدرت
- دقیقه
- حداقل
- حد اقل
- دقیقه
- بدرفتاری
- موبایل
- مدل
- مدل
- مدرن
- MongoDB
- مانیتور
- نظارت بر
- مانیتور
- بیش
- my
- جهت یابی
- لازم
- نیاز
- جدید
- خبرنامه
- یادداشت
- هیچ چی
- اکنون
- مشاهده می کند
- of
- خاموش
- ارائه
- پیشنهادات
- دفتر
- غالبا
- on
- یک بار
- ONE
- فقط
- بهینه
- بهینه سازی
- or
- دیگر
- ما
- روی
- بسته بندی
- با ما
- درد
- گذشته
- الگوهای
- انجام دادن
- انجام
- شخص
- شخصی کردن
- تلفن
- پی اچ پی
- پیشگام
- خط لوله
- محل
- افلاطون
- هوش داده افلاطون
- PlatoData
- پلاگین
- سیاست
- موقعیت
- مثبت
- پست
- پتانسیل
- پراکاش
- جلوگیری
- اصلی
- مشکل
- در حال پردازش
- محصولات
- برجسته
- وعده
- مناسب
- ارائه
- فراهم می کند
- محدوده ها
- مطالعه
- واقعیت
- تازه
- شناختن
- قابل اعتماد
- تصفیه
- به یاد داشته باشید
- از بین بردن
- نیاز
- وضوح
- تصمیم
- مصمم
- رفع
- پاسخگو
- محدود کردن
- خرده فروشی
- صنعت خرده فروشی
- خرده فروشان
- نشان داد
- انقلاب
- موج دار شدن
- خطر
- ربات ها
- اتاق
- قانون
- دویدن
- اجرا می شود
- مقیاس پذیری
- مقیاس پذیر
- سناریو
- سناریوها
- مدرسه
- پرده
- اسکریپت
- به دنبال
- می فرستد
- حساس
- جستجوگرها
- تنظیم
- چند
- نشان می دهد
- پس از
- سایت
- کوچک
- نرم افزار
- فقط
- راه حل
- برخی از
- به دنبال
- منبع
- جرقه
- تخصصی
- خاص
- سخنرانی - گفتار
- حمایت مالی
- مربع
- استاندارد
- شروع
- ارقام
- وضعیت
- هنوز
- ذخیره سازی
- قدم می گذارد
- مشترک
- موفق
- چنین
- پشتیبانی
- پشتیبانی از
- مشکوک
- SVG
- سیستم
- جدول
- مصرف
- محسوس
- وظایف
- تیم ها
- پیشرفته
- سومین
- متن
- نسبت به
- با تشکر
- که
- La
- آنها
- موضوع
- آنجا.
- اینها
- آنها
- این
- فکر
- رهبری فکر
- از طریق
- زمان
- حساس به زمان
- عنوان
- به
- ابزار
- بالا
- موضوع
- نسبت به
- سنتی
- دگرگونی
- روند
- روند
- دور زدن
- توییتر
- نوع
- نوعی
- تحت عمل قرار می گیرد
- فهمیدن
- بر خلاف
- به روز رسانی
- بر
- URL
- اروگوئه
- us
- استفاده کنید
- مفید
- کاربر
- رابط کاربری
- کاربران
- استفاده
- با استفاده از
- اعتبار سنجی
- ارزش
- ماشین های فروش
- دید
- W
- بود
- we
- چی
- چه شده است
- چه زمانی
- چه
- که
- در حین
- چرا
- به طور گسترده ای
- با
- در داخل
- زن
- وردپرس
- مهاجرت کاری
- مشغول به کار
- گردش کار
- گردش کار
- کارگر
- در سرتاسر جهان
- نوشته
- کتبی
- سال
- شما
- جوان
- شما
- زفیرنت