Развитие Big Data в России: есть запрос и есть решения
Мнение экспертов

Развитие Big Data в России: есть запрос и есть решения

544
5 минут

Анализ данных как бизнес-задача был актуален всегда. Еще тридцать лет назад сформировалась концепция хранилищ данных, которая позволяла слить в единую базу сведения из различных источников и на основе полученных отчетов принимать управленческие решения.

В конце 2000-х годов методы работы с данными были полностью переосмыслены. Появилось понятие «больших данных», как совокупности технологий и методов работы с огромным массивом структурированной и неструктурированной информации. Этот класс решений сегодня постепенно завоевывает все большее количество клиентов и, по мнению некоторых аналитиков, может ускорить российскую экономику

Предпосылки для развития Big Data

  1. Объем данных за последние десять лет значительно увеличился, что подтверждают 78% российских компаний. Этот рост во многом обусловлен цифровизацией. Как только компании стали выносить в онлайн клиентские сервисы, они получили источник новых данных. Операторы связи, помимо звонков, начали анализировать множество других каналов коммуникации, из которых наиболее востребованным стал мобильный интернет. В целом проникновение сотовых сетей в регионах усилилось, благодаря чему компании начали исследовать, например, географическую информацию о своих пользователях. С широким распространением онлайн-магазинов изменилось отношение к данным и у крупных ритейлеров. Им важно знать о своих потребителях практически все, и подспорьем для этого выступают биржи данных, сообщающие о пользователе множество информации, начиная с его социально-демографических характеристик, заканчивая текущими интересами, построенными на базе поисковых запросов и посещаемых сайтов. А ведь раньше даже анализировать логи с веб-сервера было слишком трудозатратно для многих игроков на рынке.

    Тренд на развитие цифровых подходов стал сильно заметен и в банках. Сегодня любая уважающая себя финансовая организация развивает онлайн-банкинг, мобильное приложение и выстраивает отношения с клиентами с помощью дистанционных методов обслуживания. Кроме того, клиенты банков все реже используют наличные и все чаще — карты, что также привело к росту данных. В свою очередь, перевод всех чеков в электронной вид изменил работу регуляторов. С появлением операторов фискальных данных, получающих информацию от онлайн-касс ритейлеров, налоговым службам стало проще отслеживать движения средств граждан. Наконец, в такой консервативной отрасли, как промышленность, появился запрос на централизованный сбор данных с датчиков, установленных на объектах. Анализ информации, получаемой с них, позволил решать ряд важных задач — от контроля исправности производственного оборудования до обеспечения охраны труда и безопасности.

  2. Также появился запрос на оперативность анализа. Если раньше сложную аналитику достаточно было построить раз в неделю или раз в месяц, то сейчас требования сократились до минут. Иногда компании хотят принимать решения в режиме, близком к реальному времени, так как это становится существенным конкурентным преимуществом. Более того, в связи с цифровизацией бизнеса многие бизнес-процессы становятся автоматизированными, что также повышает требования к скорости построения аналитики.

  3. Анализ больших данных был бы не возможен без появления доступных технических решений. Раньше горизонтально масштабируемые аналитические системы могли позволить себе только несколько наиболее самых крупных российских компаний. Помимо стоимости лицензий на эти системы, компании должны были оплатить закупку мощного оборудования, используемого для генерации аналитики. Но все изменилось за последние несколько лет. На рынок вышли разработчики специализированных продуктов, обладающих принципиально иной архитектурой. Для них не нужна высокопроизводительная вычислительная инфраструктура, достаточно использовать относительно дешевое серверное оборудование. Более того, за счет адаптации продуктов под облачные платформы, компании могут вообще отказаться от эксплуатации собственных ИТ (и одновременно с этим уменьшить потребность в квалифицированных администраторах), перейдя на модель анализа больших данных как сервиса. В частности, такую схему работы с данными предлагаем мы, предоставляя доступ из K2 Cloud к системе на базе Open Source.

Сценарии использования Big Data

Использование больших данных в своей работе — уже не прерогатива только лишь самых крупных компаний. Из узкоспециализированного средства системы для анализа данных превращаются в массовый инструмент. Поэтому в ближайшее время мы все чаще будем видеть компании из среднего сегмента, которые только начинают внедрять технологии big data и следовать датаизму — концепции принятия решений, основанных исключительно на объективных данных. Вместе с тем, увеличится количество организаций, которые захотят сменить существующую корпоративную платформу для анализа данных на более доступное решение. А третья категория клиентов перестанет удовлетворяться скоростью создания отчетности в своей компании и примет решение перейти на легомасштабируемые решения, которые ускоряют анализ данных. Суммарно эти три категории пользователей Big data принесут до 1,5% ВВП, а общий объем российского рынка больших данных увеличится в десять раз к 2024 году.

Как подступиться к большим данным?

Работа с большими данными требует определенных компетенций. Раньше поставщики ИТ-решений стремились дать пользователям готовый продукт. С помощью предустановленных шаблонов компании готовили данные согласно своим запросам. Сегодня растет популярность self service концепции, согласно которой бизнесу предоставляются «сырые» данные и средства для их анализа. Благодаря этому компании могут увеличить оперативность принятия решений. В этом случае нет необходимости долго ждать, когда ИТ-специалисты сделают новый отчет.

Но это же преимущество современных систем Big Data накладывает и определенные ограничения: для работы с такой системой сотруднику необходимо обладать не только знаниями в области бизнес-анализа, но и хотя бы базовыми навыками программирования. Отсутствие же подобной компетенции — вовсе не проблема. Экспертная оценка и дополнительное обучение, которое проводят внешние эксперты, дают возможность в достаточно сжатые сроки обучиться работе с большими данными. Это, а также широкое распространение облачных услуг, дают право говорить о высоком потенциале Big Data и хороших перспективах технологии на российском рынке.

Материал для TechFusion.ru

15 октября 2024
Как подступиться к большим данным: технологии, инфраструктура и экономическое обоснование проектов

Недавно в подкасте «Откровенно об ИТ-инфраструктуре» состоялось обсуждение экономики больших данных. Как сейчас работает самая обсуждаемая ИТ-ниша? Разбирались с ведущим подкаста директором K2 Cloud Сергеем Зинкевичем и приглашенными гостями: Андреем Жуковым — коммерческим директором Arenadata, и Дмитрием Зуевым — ex-руководителем отдела Data-инфраструктуры в «Т-Банке».

1 минута
134
19 июня 2023
Семь трендов на рынке облачных услуг в 2023 году
До 2022 года на рынке облаков в России главенствовали мировые тренды, но сейчас наша страна пошла своим путем. О том, для чего сейчас компании используют облачные технологии и как меняется рынок, рассказал директор бизнес-юнита K2 Cloud Сергей Зинкевич.
1 минута
854
26 декабря 2022
Что выгоднее — использовать готовую платформу для управления контейнерами или разрабатывать своими силами?
Совсем недавно мы провели опрос среди ИТ-руководителей, чтобы выяснить, насколько они знакомы с технологией Kubernetes и используют ли ее в ИТ-инфраструктуре своей компании, личных проектах и т.д. Результаты показали, что 63% опрошенных уже работает с Kubernetes прямо сейчас, 23% пока не дошли и 14% участников планируют в ближайшее время.
1 минута
477
22 декабря 2022
Как сэкономить с помощью аутсорсинга: ИТ-процессы, которые можно делегировать
Есть ряд процессов, которые можно безболезненно передать на аутсорс и разом решить несколько задач: снять с себя вопрос поиска кадров, получить необходимый уровень экспертизы и, как правило, сэкономить время и деньги.
1 минута
578
15 ноября 2022
OpenShift остался без поддержки – как решить проблему российским клиентам
Интерес к семейству ПО для контейнеризации OpenShift был довольно высоким в корпоративном сегменте в прежние годы. По данным мониторинговой службы Datadog, только за прошлый год во всем мире количество пользователей платформ от RedHat увеличилось на 28%. Весной IBM объявил об уходе из России и прекращении поддержки всех программных продуктов для текущих клиентов. Разберемся, насколько критичной оказалась данная ситуация для заказчиков, и какие варианты действий существуют, чтобы минимизировать возможные риски отключения от сервиса.
0 минут
624
scrollup