Informatica утверждает, что фрагментация данных мешает развитию генеративного искусственного интеллекта в Азиатско-Тихоокеанском регионе
7 марта 2024 г.Согласно международному опросу 600 мировых лидеров в области данных, проведенному компанией Informatica, руководители данных в Азиатско-Тихоокеанском регионе серьезно занимаются внедрением искусственного интеллекта. Индия лидирует в регионе: 75% опрошенных уже внедрили генеративный искусственный интеллект.
Однако респонденты из Азиатско-Тихоокеанского региона сталкиваются с препятствиями, связанными с управлением данными для ИИ. К ним относятся фрагментация данных на фоне растущего числа источников данных, качество данных, доступных для ИИ, и внедрение управления данными, достаточно надежного для решения задач ИИ.
Ричард Скотт, старший вице-президент Informatica по Азиатско-Тихоокеанскому региону и Японии, сказал, что грамотность в отношении данных важна для поддержки управления данными в организации. Скотт рекомендовал с самого начала разработать архитектуру облачных данных и сосредоточиться на людях, процессах и технологиях.
Искусственный интеллект уделяет параллельное внимание управлению данными
Руководители данных в Азиатско-Тихоокеанском регионе заявили, что способность предоставлять надежные и согласованные данные, подходящие для генеративного ИИ (40%), является главным приоритетом стратегии обработки данных на 2024 год, наряду с улучшением управления данными и процессами (40%). Это указывает на то, что ИИ способствует взаимному вниманию к управлению данными.
СМОТРИТЕ: 10 главных преимуществ повышения качества данных для вашей организации.
Тесная связь между ИИ и данными также нашла отражение в инвестиционных намерениях. Трое из четырех (78%) руководителей данных из Азиатско-Тихоокеанского региона предсказали, что их инвестиции в данные увеличатся в 2024 году. Ни один респондент не планировал инвестировать в возможности управления данными в той или иной форме.
Региональные инвестиции в ключевые возможности обработки данных растут
Ряд возможностей управления данными получает инвестиции в соответствии с приоритетами стратегии обработки данных. Конфиденциальность и защита данных были названы номером один (45%), что отражает необходимость обеспечения конфиденциальности и безопасности данных в условиях быстро меняющейся среды кибербезопасности.
Далее следовали качество и наблюдаемость данных (42%), а также интеграция и проектирование данных (40%).
«Мы наблюдаем рост качества данных как области нашего внимания и управления данными», — сказал Скотт. «Таким образом, искусственный интеллект действительно вызовет новую волну очистки массивов данных».
СМОТРИТЕ: Как Мэтью Кэнди из IBM рассматривает стремление Австралии к 2024 году к масштабированию генеративного искусственного интеллекта.
ИИ создает множество проблем с управлением данными
Согласно результатам глобального опроса Informatica, который был получен от лидеров данных в организациях с доходом более 500 миллионов долларов США, почти все (99%) лидеры данных сталкивались с препятствиями на своем пути к ИИ, в том числе в Азиатско-Тихоокеанском регионе.
Фрагментация данных и рост данных
Лидеры данных в Азиатско-Тихоокеанском регионе ожидают, что в 2024 году фрагментация и сложность данных ухудшятся. Informatica обнаружила, что 56% лидеров данных изо всех сил пытались сбалансировать более 1000 источников данных. Кроме того, 78% лидеров данных в Азиатско-Тихоокеанском регионе ожидают, что в этом календарном году количество источников данных увеличится.
«Только в прошлом году Informatica обрабатывала около 86 триллионов облачных транзакций в месяц, что на 60% больше, чем годом ранее», — пояснил Скотт. «Поэтому, пока организации пытаются привести в порядок свои данные, объем данных все еще стремительно растет; мы наблюдаем действительно взрывной рост», — сказал он.
Качество данных и предвзятость модели ИИ
Качество данных было названо самой большой проблемой для генеративного искусственного интеллекта 42% респондентов по всему миру. Возможность предвзятости вызывала особую озабоченность в Азиатско-Тихоокеанском регионе из-за больших языковых моделей; 53% австралийских респондентов заявили, что их самой большой заботой является предотвращение предвзятости (рисунок A).
«В эпоху аналитики, если бы у вас была плохая база данных, вы бы быстрее пришли к неправильному решению», — сказал Скотт. «Точно так же, если у вас плохая среда управления данными, вы получите ответ от генеративного ИИ, но он может увести вас в неправильном направлении».
Грамотность данных за пределами хранилища данных
По мнению опрошенных лидеров данных, организационная грамотность в отношении данных сдерживает прогресс в области искусственного интеллекта. Например, 98% глобальных лидеров в области данных заявили, что сталкивались с нетехническими организационными препятствиями на пути к улучшению управления данными, такими как отсутствие поддержки со стороны руководства.
Повышение культуры управления данными и грамотности в отношении данных было названо 39% мировых лидеров в области данных главным приоритетом на 2024 год. Повышение грамотности в отношении данных было вторым по значимости (42%) показателем эффективности стратегии обработки данных, уступая только подготовке данных для ИИ. и аналитические инициативы.
«Наш генеральный директор Informatica много говорит о том факте, что, поскольку предприятия передают на аутсорсинг приложения, здания и многие другие аспекты бизнеса, для многих компаний единственным активом являются данные. Поэтому это должно быть действительно высоким приоритетом для исполнительной команды и совета директоров», — сказал Скотт.
Рост инструментов управления данными
Количество инструментов управления данными растет. Две трети (60%) руководителей Азиатско-Тихоокеанского региона говорят, что им понадобится пять или более инструментов управления данными для поддержки приоритетов и управления массивами данных — это больше, чем количество руководителей данных, которым требовалось такое количество инструментов в 2023 году (55%).
Управление данными и демократизация
Улучшение управления данными и процессами было названо 40% региональных лидеров в области данных главным приоритетом стратегии данных на 2024 год. Лидеры в области данных в Азиатско-Тихоокеанском регионе также уделяли наибольшее внимание (67%) обеспечению большей демократизации данных в своей организации при использовании генеративного искусственного интеллекта.
Это побуждает поставщиков предлагать услуги и инструменты управления. Informatica недавно запустила интегрированный инструмент управления доступом к облачным данным после приобретения Privitar, который помогает поддерживать соответствующее требованиям управление, обмен и использование данных в юрисдикциях по всему миру.
SEE: Управление данными станет новым приоритетом в сфере ИТ для австралийских организаций в 2024 году.
Informatica также предлагает рынок данных самообслуживания, предназначенный для «демократизации» доступа к данным. Пользователи могут запрашивать данные и получать к ним доступ на основе разрешений. Данные предоставляются с рейтингами качества и релевантности и отслеживаются, чтобы администраторы данных понимали, как они используются.
Архитектура, лежащая в основе решения проблем с данными
Ричард Скотт из Informatica посоветовал региональным лидерам данных создать правильную облачную архитектуру для поддержки масштабирования и сосредоточиться на людях и процессах, а также на технологиях.
Начните с правильной облачной архитектуры
По словам Скотта, организациям следует начать с обеспечения надежности своей облачной архитектуры, поскольку правильное решение этого вопроса с самого начала будет способствовать будущим усилиям по масштабированию.
«Именно тогда, когда вы масштабируетесь и у вас нет подходящей архитектуры управления данными, у вас возникают настоящие проблемы», — сказал Скотт.
Скотт добавил, что создание облачной архитектуры с самого начала также обходится дешевле.
«Компании с несколькими облачными контрактами платят большие деньги за входящие и исходящие затраты между облаками», — сказал Скотт. «Неправильная облачная архитектура не только приводит к созданию среды, которая, возможно, не поддерживает генеративный искусственный интеллект, но и к тому, что она становится очень дорогой».
Клиент Informatica NRMA, одна из старейших членских организаций Австралии, успешно работает с более чем 3000 наборами данных. По словам Скотта, организации, которые прилагают усилия для правильной архитектуры, могут получить доступ к данным и оказать существенное влияние на их хранилище.
Посмотрите на людей, процессы и технологии
Характер проблем с данными означает, что организациям необходимо более целостно смотреть на людей, процессы и технологии. Скотт сказал, что для руководителей данных в организациях, которые пытаются решать проблемы по мере их возникновения, это может быть похоже на «засунуть палец в дамбу, чтобы остановить наводнение».
«Если вы просто заткнете каждую маленькую дырку в дамбе, создав новое приложение или написав какой-нибудь код, вы получите очень фрагментированную среду, которая будет очень хрупкой. Вам необходимо смотреть на людей, процессы и технологии и иметь четкое представление о том, куда вы направляетесь; тогда вы сможете внедрить технологию, которая будет невероятно хорошо интегрироваться и даст вам возможность передавать данные по всей вашей среде».
Оригинал