Прогнози управління даними на 2024 рік: п’ять нових тенденцій - DATAVERSITY

Перевидано Платоном

читають: 0

Оскільки ми наближаємося до кінця 2023 року, керівникам управління даними вкрай необхідно подивіться в дзеркала заднього виду оцінити та, якщо необхідно, удосконалити свої стратегії керування даними. Ясно одне; Якщо організації, орієнтовані на дані, хочуть досягти успіху в 2024 році, їм потрібно буде підготуватися до середовища, в якому дані все більше поширюються.

Зважаючи на це, ми бачимо, що у 2024 році з’являться п’ять важливих тенденцій управління даними: переважатиме антигравітація даних; важливість продуктів даних зростатиме; організації навчаться застосовувати генеративний штучний інтелект (GenAI) і успішно використовувати його; організації ефективніше керуватимуть витратами на хмару; безпека даних і управління будуть спрощені.

Давайте детальніше розглянемо кожну з цих тенденцій по черзі:

Антигравітація даних переважатиме

Поняття тяжкості даних, яке є аналогією природи даних і їх здатності залучати додаткові програми та сервіси, більше не існує. Кожна організація з сучасним Стратегія даних потребує сховища даних поряд з озером даних, якщо не кількома, для задоволення своїх бізнес-потреб. За останні два десятиліття сховища даних і озера даних стали популярними для вирішення проблем корпоративних даних, але те, що вони створили, було ще більшими проблемами. Це тому, що сховища даних і озера даних складаються як з локальних, так і з хмарних систем, і вони часто географічно розосереджені. Крім того, незважаючи на те, що кожен постачальник хмарних послуг намагається вирішити багато проблем з даними та аналітикою самостійно, більшість організацій запускають свої дані та аналітику в багатохмарному середовищі, вибираючи продукти та послуги від двох або більше постачальників хмарних послуг.

Ось чому антигравітація даних, де дані та програми залишаються розподіленими між регіональними та хмарними кордонами, стане новою нормою у 2024 році та далі. Іншими факторами, що сприятимуть антигравітації даних, будуть зростання вартості реплікації даних, суверенітет даних, місцеві закони та правила управління даними, а також вимога до прискореної швидкості ознайомлення. Оскільки тенденція до антигравітації даних продовжується, лідери з управління даними повинні інвестувати в технології, які базуються на передумові розподіленого керування даними.

Продукти даних ставатимуть все важливішими

2024 рік стане ключовим для сходження сітка даних, що охоплює розподілену природу даних. На відміну від традиційних централізованих парадигм, у яких дані зберігаються та керуються центральною групою даних, яка надає проекти даних бізнес-користувачам, сітка даних організована навколо кількох доменів даних, кожним з яких керує основний бізнес-споживач даних. У сітці даних роль ІТ зміщується до забезпечення основи для доменів даних для виконання їхньої роботи, тобто створення та розповсюдження продуктів даних по всьому підприємству.

Поворотним моментом стане усвідомлення того, що продукти обробки даних повинні розглядатися з таким самим рівнем важливості, як і будь-які інші пропозиції продуктів. Візьмемо, наприклад, капсулу Tylenol: її цінність полягає не лише в самій капсулі, а й у комплексному пакеті, який заслужив довіру споживачів — від опису та призначення до списку інгредієнтів і заходів безпеки. Подібним чином каталоги даних діють як важлива «упаковка», яка перетворює необроблені дані на надійні споживані активи.

У цю епоху, орієнтовану на дані, недостатньо просто привабливо упакувати дані; організаціям необхідно покращити весь досвід кінцевого користувача. Повторюючи найкращі практики гігантів електронної комерції, сучасні платформи даних повинні пропонувати такі функції, як персоналізовані рекомендації та основні відомості про популярні продукти, а також зміцнювати довіру завдяки схваленням користувачів і видимості походження даних. Крім того, ці платформи повинні сприяти виконанню запитів у реальному часі безпосередньо з каталогу даних і підтримувати інтерактивний цикл зворотного зв’язку для запитів користувачів, запитів на дані та змін. Подібно до того, як своєчасна доставка є важливою в електронній комерції, швидкий і надійний доступ до даних стає незамінним для організацій.

Організації намагатимуться як запровадити GenAI, так і успішно використовувати його

Під час спроб впровадження GenAI і великих мовних моделей (LLM) організації стикаються з багатьма проблемами, включаючи проблеми з якістю даних, управлінням, дотриманням етичних норм і управлінням витратами. Кожна перешкода має прямий або опосередкований зв’язок із загальною стратегією управління даними організації, що впливає на здатність організації забезпечувати цілісність даних, що надходять у моделі ШІ, дотримуватись складних нормативних вказівок або сприяти інтеграції моделі в існуючі системи.

Організаціям потрібно буде ефективніше керувати хмарними витратами

Оскільки компанії продовжують переносити операції з даними в хмару, вони стикаються зі значною перешкодою: невпинним, нестійким зростанням витрат на хмарні дані. На наступний рік завдання полягає не лише в тому, щоб стримати ці зростаючі витрати, але й у тому, щоб зберегти високу якість обслуговування та конкурентоспроможність. Стрімке зростання витрат на хмарний хостинг і керування даними заважає компаніям ефективно прогнозувати та складати бюджет, а раніше надійні витрати на локальне зберігання даних стали затьмарені нестабільністю цінових структур хмари.

Подолання цього фінансового тиску вимагає від компаній ретельного аналізу хмарних витрат і пошуку ефективності без шкоди продуктивності. Це передбачає детальний аналіз моделей використання даних, визначення областей неефективності та розгляд більш рентабельних варіантів зберігання. Щоб ефективно керувати витратами на хмарні дані, компаніям потрібно зосередитися на обчисленнях, які споживають запити, і пов’язаних обсягах вихідних даних, таблицях використання наборів даних і оптимізації рішень для зберігання. Ці зусилля посилюються шляхом впровадження принципів фінансових операцій (FinOps), які поєднують фінансову підзвітність із гнучкою хмарною моделлю витрат.

Регулярно відстежуючи витрати, прогнозуючи витрати та впроваджуючи найкращі фінансові практики в управлінні хмарою, організації можуть збалансувати економію коштів і операційну ефективність, забезпечуючи економічну та функціональну надійність своїх стратегій обробки даних. У 2024 році ми побачимо значне зростання використання інформаційних панелей FinOps для кращого управління оплатою хмарних даних.

Безпеку даних і управління потрібно буде спростити

Погано інтегровані дані впливають на гнучкість організації на багатьох рівнях, але, мабуть, цей вплив найбільше відчувається в безпеці даних і управлінні. Оскільки для індивідуального оновлення безлічі ізольованих систем потрібен час, неможливо захистити або керувати всіма корпоративними системами одночасно.

Щоб впоратися з цим викликом, організації використовують глобальні політики безпеки та управління даними. Глобальна політика безпеки даних може ґрунтуватися не лише на ролях користувачів, але й на місці розташування, так що людина у відпустці може не мати доступу до даних із головного офісу. Глобальна політика управління даними також може автоматично стандартизувати написання певних слів у різних системах компанії.

Однак для того, щоб синхронізувати застосування глобальних політик у режимі реального часу, такі реалізації захисту даних і управління вимагають основи логічного підходу до керування даними, і такий підхід розглядається в наступному розділі.

Майбутнє логічне

Щоб подолати проблеми, пов’язані з кожною з цих п’яти тенденцій, організаціям потрібно буде використовувати стратегії керування даними, розроблені з нуля для підтримки розподілених даних. Традиційні підходи до керування даними покладаються на фізичну реплікацію даних із кількох систем у центральне сховище, як-от сховище даних або озеро даних, але такі підходи, за визначенням і на практиці, не підтримують розподілені дані за своєю суттю. Навпаки, логічні підходи до керування даними забезпечують з’єднання в реальному часі для розрізнення даних без реплікації, щоб підтримувати розподілені дані за своєю суттю.

Як наслідок, логічне керування даними залишиться тут у 2024 році та надалі, оскільки воно дає змогу кожній організації керувати розподіленими даними найбільш ефективним і економічно ефективним способом.