Платформа анализа данных
К демократизации данных и аналитики
Сегодня каждый бизнес хочет проанализировать огромное количество доступных данных, чтобы создать ценность для бизнеса. Однако данные обычно хранятся в сложном ландшафте различных отделов, исходных систем и баз данных. Данные и инструменты аналитики, необходимые для принятия на основе этих данных важных бизнес-решений, редко доступны в одной и той же среде. Сейчас более чем когда-либо существует потребность в демократизации данных и аналитики; обеспечение легкого доступа к инструментам данных и аналитики для всех людей, которые в них нуждаются и обладают набором навыков для их анализа
Для этого важно централизовать хранилища данных, согласовать определения данных и обеспечить хорошее управление. Эта работа по созданию корпоративного озера данных в настоящее время выполняется директором по работе с данными и организацией по управлению данными ING. Тем не менее, важно воспользоваться преимуществами этой инициативы, предоставляя услуги на основе этих данных, чтобы люди могли действительно работать с ними и анализировать их. ING WB Advanced Analytics разработала такую платформу, которая называется Data Analytics Platform (DAP).
Обеспечение доступности и понимания данных внутри корпорации может ускорить принятие решений и раскрыть возможности для организации в реальном времени. Мы видим, что многие корпорации сидят на кладовой данных, но не имеют необходимых ресурсов для их использования. Для решения этой проблемы был создан ряд поставщиков больших данных и коммерческих инструментов, помогающих решить проблему работы с массивными наборами данных. Однако эти платформы не предназначены для использования широким кругом групп пользователей - от бизнес-пользователей до специалистов по обработке данных - и, как правило, они не успевают за быстрыми темпами развития в области машинного обучения и искусственного интеллекта.
Чтобы работать над гибкостью, масштабируемостью и эффективностью в реальном времени в аналитике данных, Болке де Брюин - руководитель отдела ИТ в WBAA, Роб Кивил - руководитель платформы аналитики данных и Кшиштоф Адамски - владелец продукта группы инфраструктуры данных - определили: необходимость в новом проекте для получения доступа к данным и аналитике в ING - платформе Data Analytics. Роб объясняет:
«Помимо того, что мы можем масштабироваться, быть более инновационными и продолжать создавать мощные проекты на основе ИИ в WBAA в будущем; Платформа Data Analytics позволит нам сделать аналитику данных более доступной для более широкого банка ING. Чтобы иметь возможность принимать решения на основе данных, вам понадобятся три вещи; достаточный объем данных (с основанием для обеспечения конфиденциальности данных, позволяющий использовать эти данные), достаточная вычислительная мощность, позволяющая вам выполнять аналитику в глобальных наборах данных, и доступ к подходящим инструментам (программному обеспечению), позволяющим вам применять свою аналитику определенным образом применимо к вашим навыкам и сфере деятельности. Я твердо верю, что DAP - это ведущая платформа ING, которая объединяет все три элемента в единой среде ».
Крис, ответственный за инфраструктуру данных, добавил:
«Мы все стремимся сделать ING компанией, управляемой данными. Мы хотим ускорить фазу экспериментов, чтобы наши специалисты по данным могли быстро начать с предоставления собственных данных, но при этом иметь доступ к тщательно отобранным (метрики качества данных) и управляемым (происхождение данных) множеству наборов данных. под рукой. Конечно, это необходимо сделать, одновременно убедившись, что данные все еще защищены внутри платформы (с помощью авторизации и ограниченного доступа по времени). DAP также предоставляет мощный механизм обработки, основанный на Kubernetes (платформу оркестровки контейнеров) и поддержку графических процессоров, чтобы гарантировать, что пределом является только наше воображение, а не инфраструктура. Наша конечная цель - сделать данные доступными для всех, кому они нужны для принятия бизнес-решений в ING. Мы должны убедиться, что мы поддерживаем эти решения со всеми необходимыми данными, актуальными и точными ».
В целом ожидается, что новая платформа аналитики данных, над которой работает WBAA:
Разрешить другим командам в банке использовать наши среды и данные (демократизация данных, аналитика и искусственный интеллект).
Поощряйте инновации, предоставляя больше свободы и экспериментирования с инструментами, которые ING может использовать.
Ускорьте реализацию проекта, сократив время, необходимое для создания продукта.
Повышение производительности обработки за счет быстрого расширения команды WBAA без снижения производительности обработки.
Повышение отказоустойчивости и времени безотказной работы за счет сквозного использования отказоустойчивых технологий.
Упростите обслуживание и поощряйте самообслуживание платформы (больше возможностей группы инфраструктуры, более быстрое решение проблем).
Эластичная масштабируемость (просто добавляйте новые машины, чтобы увеличить емкость, с учетом требований будущего).
Повышение эффективности платформы (повышение производительности на каждый евро, потраченный на инфраструктуру).
Подготовьте WBAA к облаку, чтобы решения можно было развертывать в инфраструктуре общедоступного облака с минимальными проблемами.
Повышение безопасности платформы (переход на новейшие стандарты и лучшие в своем классе алгоритмы шифрования).
Возможность полного отслеживания происхождения данных (точное знание того, откуда пришли ваши данные и что на их основе было получено).
Основная цель создания платформы аналитики данных - демократизировать искусственный интеллект и машинное обучение для всех уровней ING. Мы стремимся к эффективному управлению данными и аналитикой, соблюдая баланс между масштабируемостью и гибкостью, всегда поддерживая высокий уровень безопасности данных. Недавно Роб и Крис представили платформу аналитики данных на Варшавском саммите по технологиям больших данных, получив положительные отзывы и отзывы от высококлассной технической аудитории.
Роб также представлял ING WBAA в панельной дискуссии о текущих мегатенденциях, которые меняют ландшафт больших данных, с представителями Google, GetInData и Ververica.
Если вы хотите узнать больше о платформе аналитики данных или проектах WBAA, отправьте электронное письмо по адресу [email protected]
