Мистификация Big Data02 октября 2013

Что мы понимаем под термином Big Data?

Стереотипы

Обычно у неподготовленного потребителя данной информации в сознании возникает картина огромного количества данных, которые как – то связаны с Интернет технологиями и Социальными сетями, такими как Facebook или Одноклассники.

Gartner определяет термин “Big data”, как подход к обработке огромного массива данных, который характеризуется так называемыми 3 переменными (3-V definition):

1.Volume – физический объем данных2.Velocity – скорость прироста данных3.Variety – математический термин, подразумевающий многообразие данных.

В реальностиДанные о погоде, записи звонков, логи действий сотрудников, транзакции клиентов через АТМ и ДБО, SMS сообщения клиентов и многое другое.

История вопроса. А давно ли существует Big Data?

Для каких целей раньше встречалось использование подхода

Big Data

Распределенные Botnet сети для управления спам и DDOS атак

Противоправные Военные Метерология

Ракетостроение и балистика

Прогноз погоды

Фактически подход Big Data не новый и существует уже более 20-ти лет. Его реализации окружают нас в жизни в разных

сферах, там где требовались большие и серьезные вычисления.

Когда правильное время для использования Big Data?

Последние несколько лет идет активное мусирование перспективы использования подхода Big Data, как панацеи от всех «болезней». Но с другой стороны, если подумать, то с какого момента организации имеет смысл начинать работать с Big Data?

1. Когда вы точно понимаете ответ на какой вопрос вы хотите получить от Big Data.

2. Вы уже достигли возможностей и пределов в части текущих технологий получения новой информации и обработки данных.

Технологии Big Data, это Add-on к существующим технологиям хранения и обработки данных. Они дорогостоящие и требуют наличия высококвалифицированных ресурсов. Hadoop не панацея от всего.

Как используют западные банки Big Data?

Фактически последнее время на Западе установились 2 устойчивых

тренда

Развитие программы лояльности

Развитие направления противодействия мошенничеству

Анализ истории транзакций клиента

Анализ отзывов и комментариев клиентов в Интернет

Анализ качества проведенных с клиентов разговоров.

Анализ психологического портрета клиента на основании данных социальных сетей

Использование систем класс «Большой Брат»

Несмотря на внушительную популярность в медиа пространстве подхода “Big Data” и казалось бы его привлекательность, к сожалению, доля проникновения таких технологий среди западных банков не так высока. В начале года одна из крупных консалтинговых компаний провела исследование насколько распространены эти технологии. В опросе приняли участие 33 крупных мировых банков. Результат оказался весьма неожиданным, так только 6% респондентов ответили, что используют технологии Big Data в своей работе.

Заключение

• На рынке есть искусственный ажиотаж в части технологий Big Data

• Hadoop не решает всех проблем, это просто технология. Прежде чем начать внедрять Big Data, нужно понять, а нужны ли они компании в целом и что компания хочет от них получить

• Как показывает анализ, в западном мире среди банков эти технологии еще не приобрели большую популярность, как это представляется в СМИ.