Big Data

MForum.ru

Big Data

10.06.2014, MForum.ru

MForum.ru на Facebook. Подпишись!

Подборка публикаций по теме BigData


Big Data

Современные технологии обработки больших данных позволяют принимать эффективные управленческие решения в широком спектре областей, таких как здравоохранение, занятость, торговля, экономическое развитие и безопасность. Использование Big Data позволяет компаниям создавать новые продукты, улучшать качество предлагаемых услуг, увеличивать прибыль и снижать издержки. Именно поэтому вопрос систематизации и использования больших данных является актуальным для большого количества как государственных компаний, так и частных бизнесов. 

Технология Big Data предоставляет услуги, помогающие раскрыть коммерческий потенциал больших массивов данных за счет поиска ценных закономерностей и фактов путем объединения и анализа больших объемов данных.

Для чего используют Big Data в России?

Почему начинают использовать Big Data

 

Определение Big Data

С технологической точки зрения Big Data можно считать такие наборы данных, чьи размеры, типы и скорость формирования делают непрактичной их обработку и анализ традиционными технологиями и соответствующими инструментами с точки зрения денежных и временных затрат на это. Также о Big Data можно говорить в том случае, если речь идет о подходе, позволяющем опираться на обработанные тем или иным способом данные для принятия решений и высказывания предположений, вместо того, чтобы полагаться на "интуицию" и "дар". Если используется этот подход, то можно говорить о Big Data даже в том случае, если для обработки данных используются те или иные традиционные инструменты и методы.  

 

Что такое Big Data

Группа технологий и методов производительной обработки динамически растущих объемов данных (структурированных и неструктурированных) в распределенных информационных системах, обеспечивающих организацию качественно новой полезной информации. 

Это наборы данных такого объема, что традиционные инструменты не способны осуществлять их захват, управление и обработку за приемлемое для практики время.

Что такое Big Data

В России по опросу CNews и Oracle в 2015 году более четверти респондентов считают, что Big Data это скорее концепция, включающая подходы, методики, технологии и пр. В то же время 14% по-прежнему увязывают Big Data и Hadoop. 

 

История появления термина Big Data

Клиффорд Линч, редактор журнала Nature, в 2008 году впервые упомянул термин Big Data в специальном номере журнала, посвященного теме "Как могут повлиять на будущее науки технологии, открывающие возможности работы с большими объемами данных", в котором были собраны материалы о феномене взрывного роста объемом и многообразия обрабатываемых данных и технологических перспективах в парадигме вероятного скачка "от количества к качеству".

В 2010 году появились первые продукты и решения, относящиеся непосредственно к проблемам обработки Big Data. С 2011 году понятие используют практически все крупные участники рынка информационных технологий, такие как IBM, Oracle, Microsoft, Hewlett-Packard, EMC. 

 

3V в Big Data

Volume 

Действительно большие объемы данных в физическом смысле, от петабайт к экзабайтам и зеттабайтам

Variety

Слабо структурированные и разнородные данные, например DB, XML, Logs, тексты, видео, аудио

Velocity

Необходимость и возможность высокой скорости обработки данных - близко к реальному времени

 

 

Почему данные Большие? 

Facebook собирает 180 ПБ информации в год (300 млн фото в день)

Twitter обеспечивает доставку 1.2 млн сообщений в секунду (103 млрд сообщений в месяц в 2014)

Google - 24 ПБ в день

 

 

Оценка объема рынка Big Data

2018

$41,5 млрд в 2018 году (прогнозируемый рост 26,4% в год) / прогноз IDC в августе 2014 года  

2017

Прогноз роста рынка BigData

 Источник: Wikibon-2014 

2015 

2015.12.07 Согласно прогнозам, годовой рост рынка технологий Big Data составит 32%, что в деньгах - $21 млрд. Российская доля - менее 1%. Порядка 70% крупных компаний в различных отраслях приобретают внешние данные. К 2020 году ожидается рост до 100%. В России в октябре-ноябре проведен опрос, который показал, что только 12% респондентов активно используют технологии Big Data, 39% находятся на начальном этапе внедрения решений, чуть менее половины вообще их не используют. Из тех, кто уже применяет Big Data 29% используют их для анализа удовлетворенности клиентов и потребительских предпочтенийб 22% - для управления производственным процессом. Интересно, что 45% из тех, кто пока не использует Big Data, не планирует это делать и в будущем, а 55% готовы инвестировать при условии, что эти инвестиции обещают практическую выгоду и возврат инвестиций.  В целом, согласно прогнозу F&S в России будет быстро развиваться сегмент визуализации Big Data, также в перспективе ожидается втрое больший рост затрат на облачные решения в сегменте Big Data, нежели чем на локальные решения / Frost & Sullivan. 

2015.05.15 Объем данных в Российских компаниях согласно опросу CNews / Oracle 

Объем Big Data в российских компаниях

2013

$1,368,000,000 - IBM (доходы компании от направления Big Data)

$869,000,000 - HP

$652,000,000 - DELL

$545,000,000 - SAP

$518,000,000 - Teradata

$491,000,000 - Oracle

$480,000,000 - SAS Institute

$418,000,000 - Palantir

$415,000,000 - Accenture

$312,000,000 - PWC 

 

Доходы от Big Data в общей структуре доходов компаний

Доходы от Big Data на фоне от суммарных доходов компаний

 2014.10.17 Инфографика UMBEL. Легенда: размер кружка - общие доходы компании, тонкая граница - доходы от Big Data менее 1% в общих доходах; темный кружок (как у SAP) - 2-10%; кружок с заполнением, как у Teradata или SAS Institute - 11-30%; кружок яркого цвета, как у DON - 41-99%, желтые кружки - 100%. 

 

Структура доходов на рынке Big Data

Big Data доходы по типам

  Источник: Wikibon-2014

Можно выделить следующие крупные направления получения доходов на рынке Big Data: профессиональные услуги; вычисления ; хранение данных ; разработка приложений ; SQL ; облачные сервисы ; инфраструктурное ПО ; сетевое взаимодействие ; NoSQL. 

 

Участники рынка решений Big Data и примеры продуктов 

Рынок Big Data формируют активности как титанов технологической индустрии, таких, как IBM, HP и Dell, так и ньюкамеры, как Neo Technology, Sumo Logic, Cloudera. Доля больших компаний на рынке Big Data в 2015 году высока, несмотря на то, что в структуре их доходов доходы от Big Data пока занимают ничтожную долю, менее 1%. Для ньюкамеров - это основной источник их доходов. Как правило, компании, занимающиеся Big Data, стараются специализироваться в области либо услуг и ПО, либо услуг и железа. Только несколько корпораций инвестируют во все три области одновременно, есть также компании которые оказывают услуги, не занимаясь разработкой софта или железа. По данным UMBEL, 46% компаний на рынке Big Data инвестируют в услуги, 41% в ПО, 13% - в железо. 

 

Вертикальные приложения

Вертикальные приложения

 источник: BigData Landscape, 2015.06 

 

Потребительские приложения

Потребительские приложения

  источник: BigData Landscape, 2015.06  

 

Business Intelligence

Business Intelligence

 

Приложения для аналитики и визуализации

Analytics and Visualization

 

Инфраструктура для аналитики

Инфраструктура / аналитика

 

Операционная инфраструктура

Операционная инфраструктура

 

Инфраструктура как услуга

Инфраструктура как услуга

 

Структурированные базы данных 

Структурированные базы данных

 

 

Список участников рынка Big Data 

1010DATA, услуги, приложения аналитики и визуализации

Accenture, услуги

Actian, услуги и ПО, инфраструктура для аналитики 

Actix, Amdocs 

Actuate, услуги и ПО

Aerospike, услуги и ПО, операционная инфраструктура

Alpine, приложения аналитики и визуализации 

Alterix, услуги и ПО

Amazon, услуги, консьюмерские приложения, Amazon Webservices - инфраструктура как услуга 

Apache Hibase, технологическая инфраструктура 

Arieso, JDSU 

Atigeo, приложения аналитики и визуалиазации

AT&T, инфраструктура как услуга 

Attivio, услуги и ПО, приложения Business Intelligence

Attunity, услуги и ПО

AutoGrid, вертикальные приложения

Autonomy, приложения Business Intelligence 

Ayata, приложения аналитики и визуализации

Basho, услуги и ПО 

Bime, приложения Business Intelligence 

Birst, приложения Business Intelligence 

Booz Allen Hamilon, услуги 

Business Objects, приложения Business Intelligence 

Calpont, инфраструктура для аналитики 

Capgemini, услуги

Cassandra, технологическая инфраструктура 

Centrifuge, приложения для аналитики и визуализации

Centurylink, услуги

Chart.io, приложения Business Intelligence

Cirro, приложения для аналитики и визуализации  

Cisco Systems, услуги, ПО, железо

ClearStory, приложения для аналиткии и визуализации

CleverDATA, продукт 1DMP.ru (биржа для обмена данными)

Cloudera, услуги и ПО, инфраструктура для аналитики 

Couchbase, услуги и ПО, операционная инфраструктура 

CSC, услуги, инфраструктура как услуга

Datameer, услуги и ПО, приложения для аналитики и визуализации

Datastax, услуги и ПО, операционная инфраструктура 

Dell, услуги и железо

Deloitte, услуги

Digital Reasoning, услуги и ПО

DOMO, приложения Business Intelligence 

DON, услуги и железо

eBay, потребительские приложения

Ellucian, вертикальные приложения

EMC, услуги, железо, ПО

Exasol, инфраструктура для аналитики 

Facebook, потребительские приложения

Fractal Analytics, услуги

Fusion-IO, услуги и железо

General Electric, услуги и ПО

Gooddata, услуги, приложения Business Intelligence 

Google, услуги, потребительские приложения, Google bigquery - инфраструктура как услуга

Guavus, услуги и ПО

Hadapt, инфраструктура для аналитики 

Hadoop, технологическая инфраструктура 

Hadoop mapReduce, технологическая инфраструктура 

Hitachi, услуги

Hortonworks, услуги и ПО, инфраструктура для аналитики

HP, услуги, железо, ПО

IBM, услуги, железо, ПО, приложения Business Intelligence, структурированные базы данных DB2 

Infobright, инфраструктура для аналитики 

Informatica, услуги и ПО, операционная инфраструктура 

Intel, услуги и железо

JasperSoft, услуги и ПО, приложения Business Intelligence 

Juniper, услуги и железо

KarmaSphere, приложения для аналитики и визуализации 

Knweton, вертикальные приложения

Kognitio, услуги и ПО, инфраструктура для аналитики

LinkedIn, потребительские приложения

Mahout, технологичская инфраструктура 

MAPR Technologies, услуги и ПО, инфраструктура для аналитики 

Marklogic, услуги и ПО, операционная инфраструктура

memSQL, структурированные базы данных 

metaLayer, приложения для аналитики и визуализации

Microsoft, услуги и ПО, приложения Business Intelligence, структурированная DB Microsoft SQL Server 

Microstrategy, услуги и ПО, приложения Business Intelligence

MongoDB, услуги и ПО, операционная инфраструктура 

Mortar, инфраструктура как услуга 

Mu Sigma, услуги и ПО 

MySQL, структурированные базы данных

Neo Technologies, услуги и ПО

Netapp, услуги и железо 

Netezza, инфраструктура для аналитики

NetFlex, потребительские приложения

NG Data, приложения Business Intelligence

Opera Solutions, услуги, приложения для аналитики и визуализации

Opower, вертикальные приложения

Oracle, услуги и ПО, приложения Business Intelligence (Hyperion), структурированные базы данных ; 

2015.06.26 Программно-аппаратный комплекс Oracle Big Data Appliance X5 компания начала продвигать с января 2015 года. В июне 2015 года этот комплекс установлен в FORS Solution Center в России. Достоинство - сервера предварительно сконфигурированы и протестированы вендором, что упрощает их развертывание. В России уже есть заказчики системы. Подробнее

Palantir, услуги и ПО, приложения для аналитики и визуализации

Panopticon, приложения для аналитики и визуализации 

Pentaho, услуги и ПО

Pivotal, услуги и ПО,  инфраструктура для аналитики

Platfora, приложения для аналитики и визуализации

PostgreSQL, структурированные базы данных

Practise fusion, вертикальные приложения

Predictive Policing, вертикальные приложения

PWC, услуги

QLIKView, услуги и ПО, приложения для аналитики и визуализации

Qubole, инфраструктура как услуга 

Rackspace, услуги

Rainstor, услуги

Recomminnd, приложения Business Intelligence 

Recorded Future, приложения Business Intelligence 

Red Hat, услуги и ПО

Revolution Analytics, услуги и ПО

RJMetrics, приложения Business Intelligence 

RxAnte, вертикальные приложения

Saffron Technology, приложения для аналитики и визуализации 

SAP, услуги и ПО, приложения Business Intelligence 

SAS Institute, услуги и ПО, приложения для аналитики и визуализации

SGI, услуги и железо

SiSense, услуги, приложения для аналитики и визуализации 

Space Curve, инфраструктура для аналитики 

Splice Machine, инфраструктура для аналитики

Sumo Logic, услуги и ПО

SurveyMonkey, вертикальные приложения 

Sybase, структурированные базы данных

Syncsort, услуги и ПО

Tableau Software, услуги и ПО, приложения для аналитики и визуализации

Talend, услуги и ПО

TCS, услуги

Teradata, услуги и ПО, приложения для аналитики и визуализации Aster 

Terracotta, операционная инфраструктура 

Think Big Analytics, услуги и ПО

Tibco, услуги и ПО, приложения для аналитики и визуализации

Tresata, услуги и ПО

Trifacta, приложения для аналитики и визуализации 

Twitter, потребительские приложения 

Ufora, приложения для аналитики и визуализации

Vertica, инфраструктура для аналитики 

Visual.ly, приложения для аналитики и визуализация 

VoltDB, операционная инфраструктура 

@WalmartLabs, потребительские приложения

Windows Azure Marketplace, инфраструктура как услуга 

WMWARE, услуги и ПО

 

Инструменты

Hadoop - набор утилит, библиотеки и программный каркас для разработки и исполнения распределенных программ, работающих на кластерах из сотен и тысяч узлов

MapReduce - фреймворк для вычисления некоторых наборов распределенных задач с использованием большого числа компьютеров, называемых "нодами", образующими кластер. Разработан компанией Google. 

MPP (Vertica, Exadata, Greenplum, Teradata)

NoSQL (Key-Value, Document-oriented, Column-based, Graph-oriented). Ряд подходов, направленных на реализацию хранилищ баз данных, существенно отличающихся от традиционных реляционных СУБД со средствами доступа языка SQL. Такие подходы характерны для использования с базами данных, в которых стоит задача решить проблемы масштабирования и доступности  за счет атомарности и согласованности данных

In-memory Data Grids (Calculation Grids)

Data Mining

Machine Learning (Statistics / Natural Language Processing)

Event-Stream Processing 

 

Расходы на инфраструктуру в сегменте BigData

48,2% прогнозируемый рост рынка инфраструктуры в сегменте Big Data / прогноз IDC в августе 2014 года   

 

Драйверы роста рынка Big Data

- участники рынка сформировали "дорожные карты" своих продуктов и услуг для предприятий 

- можно говорить о зрелости продуктов, в частности после появления YARN (MRv2 - Map Reduce), которая заложила обеспечила мультиплатформенность для Hadoop

- улучшились механизмы защиты конфиденциальности данных

 

Барьеры рынка Big Data

- опасения в достаточной защищенности данных

- быстрое развитие рынка, разнообразие решений и большое число поставщиков решений Big Data, затрудняющее выбор инструментов

- недостаточное число завершенных приложений для решения специфичных проблем бизнеса

 

Доля компаний, запустивших проекты с использованием технологии Big Data

13% в 2014 году / Gartner, 2014

8% в 2013 году / Gartner, 2014

 

В России

Доля компаний, использующих Big Data

2015.05.15 Объем данных в Российских компаниях согласно опросу CNews / Oracle  

 

Кадры Big Data

Типовые требования к специалисту в области Big Data в крупной российской телеком-компании

  • Развитие направления предсказательного моделирования, создание новых методов моделирования абонентского поведения;
  • Построение математических моделей, улучшение работы моделей, направленных на развитие абонентов (увеличение доходности);
  • Анализ абонентской базы на основе потребностей \ ценности \ профиля использования услуг и других характеристик;
  • Анализ влияния маркетинговых активностей на отток;
  • Участие в управлении КИХ (корпоративное информационное хранилище);
  • Аналитическая поддержка проектов CRM.

Требуется отказ от классического дедуктивного мышления в пользу эмпирического, опытного мышления и использования статистики в качестве основы для реального бизнеса. Нужно, чтобы мысля эмпирически, люди владели математическим аппаратом. Требуется сочетание взаимоисключаемых ментальных факторов: интуиции, широкого кругозора и "математичности" в мозгах и образовании. Дефицит таких специалистов пока что будет только нарастать. Мнение Сергея Мацоцкого, председателя правления IBS. 

Профессия: аналитик Big Data, специалист по Data Mining, архитектор баз данных и т.п.

Как стать специалистом в области Big Data

Специалист по Big Data

 

В каких отраслях используют Big Data

2013.12.10 Big Data в отраслях. Apcon, McKinsey & Company, CNews Analytics, 2013 

 

 

Какие компании внедряют Big Data в России 

Кто использует Big Data 

2015.05.15 Инфографика: Большие данные пришли в Россию. CNews / Oracle. 

 

Участники российского рынка Big Data

АБД (Ассоциация больших данных)

2019.10.14 Развитие рынка больших данных в период до 2024 способно дать экономический эффект в 0,3% ВВП. Для этого необходимо снять барьеры и реализовать ряд шагов для развития рынка больших данных в России. Одной из приоритетных задач мы видим необходимость обеспечения упрощенного и регламентированного доступа к госданным. | MForum.ru 

Билайн, МТС, МегаФон, Tele2, Ростелеком (см. ниже Big Data в телекоме)

Сбербанк

Яндекс

Mail.ru Group 

 

Big Data в телекоме

Есть возможностьанализировать местоположение и активность абонентов. 

Сегментация абонентской базы, персонализация клиентских сервисов и услуг. При прибытии в аэропорт можно предложить подключение услуг роуминга или дать информацию о возможностях личного кабинета для самостоятельного управления услугой.

Мониторинг качества услуг.

Оптимизация рабты колл-центра за счет угадывания причин обращения, а также индивидуального подбора и предложения сервисов и тарифов. 

Можно измерить качество сервиса на уровне каждого клиента, синхронизировавшись с геолокацией, - получить мониторинг качества сервиса по всем точкам пребывания клиента, что дает возможность повышать качество в тех или иных точках сети. 

 

Большая четверка и Big Data

ВымпелКом

Направления: Повышение качества обслуживания (персональный менеджер и т.п.), оптимизация каналов коммуникации с клиентом, аналитика и отчетность, анализ данных для развития сети, геоаналитика, анализ M2M-данных, борьба с мошенничеством и спамом, персонализация услуг, управление оттоком. Школа данных Билайн. 

Внешние: работа с правительством Москвы, скоринг для банков

Инструменты: Hadoop, IBM SPSS, Oracle Exadata, Spark SQL; Spark Streaming; MLib (машинное обучение), GraphX, Apach Spark; Rapidminer; python; scikit learn.  

2016.02.08 Школа данных Билайн - курс для менеджеров, подробности 

2016.02.02 Школа данных Билайн. Как прошло мое 3-е занятие.  

2016.02.01 Обучение: Data-MBA для менеджеров и бизнесменов

2016.01.26 Школа данных Билайн. Как прошло мое первое занятие

2015.12.23 Конспекты: Сергей Марин, руководитель службы разработки продуктов Big Data компании Билайн, "Персональный менеджер и другие воплощения Big Data в Билайн".

2014.03.21 Интервью: Сергей Марин, Билайн: Как Big Data входят в повседневную практику оператора 

МегаФон

Направления: геоаналитика, маркетинг и продажи. Начали заниматься в 2012 году. 

Программный стек: Java, Scala и Data Science ориентированные функциональные языки (Scalding). 

Стараются не полагаться на готовые решения, предпочитая собственную разработку. Более 200 машин в серверном парке, для управления используется Puppet. Рабочие серверы (ноды) - в виде обычных железных машин, в облаке только утилитарные задачи, не требующие больших мощностей. Виртуальные машины управляются Vagrant. 

Производительность - более 200 тысяч сообщений в секунду. Накопленная база для анализа к концу 2014 года - около 1.5 ПБ. 

2016.02.12 BigData в тренде - экс-мегафоновцы собираются торговать аналитикой данных

2015.07.02 МегаФон запустил сервис анализа пассажироперевозок. #романпостников 

2015.05.26 Роман Постников, Использование геоаналитики мобильного оператора для решения транспортных и логистических задач, презентация. 

 

МТС

Маркетинг и продажи, сегментация абонентской базы, персонализация услуг ; увеличение доходности абонентов ; Аналитическая поддержка проектов CRM; Анализ влияния маркетинговых активностей на отток 

2012 Big Data в целевом маркетинге, МТС, презентация, .pdf

 

 

Полезные ссылки по теме Big Data 

Big Data на Pinterest  - обновляемые

 

Публикации по теме BigData 

2019.10.14 Развитие рынка больших данных в период до 2024 способно дать экономический эффект в 0,3% ВВП. Для этого необходимо снять барьеры и реализовать ряд шагов для развития рынка больших данных в России. Одной из приоритетных задач мы видим необходимость обеспечения упрощенного и регламентированного доступа к госданным. | MForum.ru 

2016.09.09 Huawei и Informatics представили платформу для обработки "больших данных"

2016.02.12 BigData в тренде - экс-мегафоновцы собираются торговать аналитикой данных

2016.02.08 Школа данных Билайн - курс для менеджеров, подробности 

2016.02.02 Школа данных Билайн. Как прошло мое 3-е занятие.  

2016.02.01 Обучение: Data-MBA для менеджеров и бизнесменов

2016.01.26 Школа данных Билайн. Как прошло мое первое занятие

2015.12.23 Конспекты: Сергей Марин, руководитель службы разработки продуктов Big Data компании Билайн, "Персональный менеджер и другие воплощения Big Data в Билайн".

2015.12.18 Конспекты: Андрей Свирщевский, SAS Big Data cases. Кейсы бигдата 

2015.07.02 МегаФон запустил сервис анализа пассажироперевозок. #романпостников 

2015.07.01 Компания Amdocs представляет новое практическое решение для анализа «больших данных»

2015.06.26 Программно-аппаратный комплекс Oracle Big Data Appliance X5 компания начала продвигать с января 2015 года. В июне 2015 года этот комплекс установлен в FORS Solution Center в России. Достоинство - сервера предварительно сконфигурированы и протестированы вендором, что упрощает их развертывание. В России уже есть заказчики системы. Подробнее 

2015.06.03 Speaker Interview: Sean Thorne, T-Mobile USA. Плюсы использования бигдата. Возможность формировать предложения opt-in практически в реальном времени, релевантные запросам клиентов, которые улучшают их опыт пользования. Новые технологии в бигдата: использование возможностей обработки информации в ОЗУ (in-memory), использование для принятия решения механизма "слушания данных" (data listening), 

2015.05.29 МТС проанализировала структуру трафика ШПД в Москве в день ЕГЭ

2015.05.27 Большая тройка активно использует бигдату для своих внутренних целей и уже начала приторговывывать этой информацией

2015.05.26 Роман Постников, Использование геоаналитики мобильного оператора для решения транспортных и логистических задач, презентация. 

2015.05.15 Инфографика: Большие данные пришли в Россию

2015.03.30 Сергей Мацоцкий: Успех с большими данными - за пределами вашей зоны комфорта

2015.03.10 Курс по Big Data: три месяца на основные знания, и зачем это нужно  

2014.12 Обзор: Что большие данные могут дать бизнесу  

2014.12 Обзор: Бизнес-аналитика и большие данные в России 2014 

2014.12 Обзор: Новые задачи вынуждают ECM анализировать большие данные

2014.09.09 Большие данные: внутренняя кухня или наш опыт внедрения методологии разработки под Big Data. #МегаФон

2014.09.02 В Москве 19 сентября 2014 года состоится конференция Big Data Russia, посвященная теме больших данных.  

2014.08.04 HP и Hortonworks расширяют стратегическое партнерство в сфере Больших Данных. Пресс-релиз 

2014.06.10 SafeNet помогает предприятиям повысить уровень безопасности больших данных на платформе Hadoop

2014.06.03 Компания Amdocs представляет комплексный портфель аналитики больших данных в сфере коммуникаций

2014.04.01 Инфографика: Автомобиль - продукт Big Data  

2014.03.21 Интервью: Сергей Марин, Билайн: Как Big Data входят в повседневную практику оператора

2014.03.14 Яндекс займется "большими данными"  

2014.03.03 Amdocs представил на MWC2014 решение TeraScale

2014.02.16 Ovum reveals Big Trust as big data’s missing DNA

2013.12.10 Big Data в отраслях. Apcon, McKinsey & Company, CNews Analytics, 2013 

2012.05.26 Ovum Big Data Analytics Forum: Evolution Beyond Revolution 

2012 Big Data в целевом маркетинге, МТС, презентация, .pdf

 


 

 

© Алексей Бойко, MForum.ru

MForum.ru на Facebook. Подпишись!

Публикации по теме:

11.10. [Новости компаний] Телеком: Конспекты. Георг Вермишян, о растущей роли оператора в сферах E-com, финтеха и развлечений / MForum.ru

10.10. [Новости компаний] Телеком: Билайн поможет в поиске клиентов и создании продуктов / MForum.ru

07.10. [Новости компаний] Телеком: Билайн перейдет на систему единого мониторинга качества сервисов от RADCOM / MForum.ru

01.10. [Новости компаний] Телеком: МегаФон отметил победителей хакатона "Цифровой прорыв" / MForum.ru

09.09. [Новости компаний] Телеком: МегаФон подписал соглашение с администрацией Владимирской области / MForum.ru

Предложения интернет-магазинов:

Обсуждение (открыть в отдельном окне)

04.08.2014 16:06 От: Алексей Бойко

HP и Hortonworks расширяют стратегическое партнерство в сфере Больших Данных

HP направляет инвестиции и исследовательские ресурсы в развитие Hortonworks Data Platform — среды Больших Данных на базе Enterprise Apache Hadoop

Москва, 4 августа 2014 г., пресс-релиз через MForum.ru — HP и Hortonworks анонсируют начало стратегического партнерства, цель которого — разработать решения, способные удовлетворить потребности корпоративных клиентов в технологиях Больших Данных. Совместный проект позволит ускорить эволюцию Enterprise Apache Hadoop благодаря глубокой интеграции платформ Больших Данных Hortonworks Data Platform и HP HAVEn. Кроме того, HP инвестирует в Hortonworks 50 млн долл. США.

HP и Hortonworks планируют интегрировать свои стратегии разработки и углубить сотрудничество в сфере маркетинга, что поможет клиентам HP развертывать Hortonworks Data Platform в качестве Hadoop-компонента HP HAVEn. Наконец, HP планирует сертифицировать HP Vertica на соответствие требованиям Apache Hadoop YARN — центра разработки архитектуры Hadoop 2.0.

«Сегодня компаниям как никогда важна возможность эффективно анализировать данные и извлекать из них информацию, — говорит Колин Махони (Colin Mahony), руководитель подразделения HP Vertica.

Hortonworks является признанным лидером в сфере инновационных технологий работы с данными. Мы уверены, этот проект сотрудничества поможет нам предложить клиентам еще больше инноваций в данной области».

«Мы очень рады сотрудничеству с HP. Оно поможет нашим клиентам быстрее перейти на современные архитектуры данных, — говорит Роб Берден (Rob Bearden), генеральный директор Hortonworks. — Благодаря более глубокой интеграции с Enterprise Apache Hadoop клиенты HP смогут без труда создавать инновационные приложения на базе Hortonworks Data Platform».

Мартин Финк станет членом совета директоров Hortonworks.

Для того чтобы еще более углубить партнерство, HP и Hortonworks решили, что Мартин Финк (Martin Fink), исполнительный вице-президент и директор по технологиям HP, войдет в состав совета директоров Hortonworks.

Мартин Финк руководит работой исследовательского центра HP Labs. Кроме того, он является «визионером», то есть, отвечает за определение технологических тенденций и проблем, с которыми могут столкнуться клиенты компании в ближайшее десятилетие. Наконец, в качестве руководителя подразделения HP Cloud Мартин Финк отвечает за развитие облачной стратегии HP. За почти 30 лет работы в HP Финк возглавлял такие ключевые направления бизнеса компании, как формирование стратегии open source и Linux.

«Наше партнерство с Hortonworks является подтверждением огромного внимания, какое HP уделяет корпоративным технологиям open source, — говорит Мартин Финк. — Я уверен: наше сотрудничество с Hortonworks поможет им предлагать своим клиентам гибкие открытые решения, созданные на базе самой мощной платформы Больших Данных в отрасли».

О компании НР

Компания HP создает новые возможности для того, чтобы технологии приносили максимальную пользу людям, компаниям, правительству и обществу в целом. Обладая широчайшим портфелем технологий, который включает в себя принтеры, персональные компьютеры, программное обеспечение, услуги и IT-инфраструктуру, HP предоставляет решения для самых комплексных задач покупателей в любом регионе мира.

С дополнительной информацией о компании HP (NYSE: HPQ) можно ознакомиться на сайте www.hp.ru

О компании Hortonworks

Hortonworks — это единственный поставщик платформ open-source в мире, который разрабатывает, распределяет и поддерживает Apache Hadoop — платформу, созданную специально для корпоративных развертываний. Hortonworks управляет ядром своей системы и предлагает клиентам бизнес-критичные сервисы, которые позволяют им удобно и безопасно развертывать среды Hadoop любого масштаба. Дистрибутив Hortonworks Data Platform предоставляет открытую, надежную платформу уровня предприятия, современную архитектуру данных, а также поддерживается ключевыми технологическими партнерами. Кроме того, Hortonworks предлагает уникальные программы обслуживания, обучения и сертификации. Более подробную информацию см. по адресу www.hortonworks.com.

02.09.2014 09:27 От: ABloud

В Москве состоится конференция Big Data Russia

Пресс-релиз, через MForum.ru. 19 сентября, 2014 в Москве пройдет конференция, посвященная большим данным. Организаторами конференции Big Data Russia выступили компания Global Innovation Labs, стартап-акселлератор и эксперт в области больших данных и компания RusBase, специалист в области проведения профильных отраслевых конференций и создатель российской цифровой платформы, объединяющей инвесторов и предпринимателей.

Конференция Big Data Russia – это уникальная кросс-индустриальная площадки для встречи специалистов из разных профессиональных сфер. Современные технологии обработки больших данных позволяют принимать эффективные управленческие решения в широком спектре областей, таких как здравоохранение, занятость, торговля, экономическое развитие и безопасность. Использование Big Data позволяет компаниям создавать новые продукты, улучшать качество предлагаемых услуг, увеличивать прибыль и снижать издержки. Именно поэтому вопрос систематизации и использования больших данных является актуальным для большого количества как государственных компаний, так и частных бизнесов.

В числе спикеров конференции – сооснователь Silicon Valley Data Science Петр Лукьянов, руководитель направления стратегического развития бизнеса Intel в России Вадим Сухомлинов, руководитель «ТехИнвестЛаб» Анатолий Левенчук и другие ведущие эксперты в области больших данных. В панельных дискуссиях примут также участие представители IBM, Google, SAP и Mail.Ru.

Участников конференции ждет обсуждение источников получения данных, способов ее хранения и обработки, значение аналитической обработки Big Data и областей ее практического применения. В представленных участникам кейсах эксперты расскажут об эффективном использовании Big Data для бизнес-решений.

Создателей новых проектов c применением Big Data организаторы конференции приглашают на Аллею стартапов. Десять лучших проектов получат бесплатные стенды для представления своего продукта всем участникам конференции. Спонсор Аллеи стартапов – «Mail.Ru для бизнеса». Подать заявку на участие можно на сайте конференции. Регистрация участников конференции Big Data Russia началась. Специальная цена при регистрации до 12 сентября составляет пять тысяч рублей. Подробная информация: www.bigdatarussia.ru

Алексей Бойко, редактор MForum.ru

27.05.2015 14:53 * От: ABloud

Большая тройка активно использует бигдату для своих внутренних целей и уже начала приторговывывать этой информацией

В МегаФоне этой темой занимается дирекция по сегментному маркетингу и клиентской аналитике Романа Постникова. Проводятся совместные исследования геопространственных данных (нагрузки на базовые станции), например, с Thomson Reuters. Кроме геолокационной информации анализируются также данные биллинга и платежей. Это позволяет персонализовать продуктовые предложения для отдельных абонентов, эффективно оптимизировать инвестиции в развитие сети. Также в МегаФон запущен сервис геопространственного анализа, услуги которого можно покупать. Их покупает, в частности, Правительство Москвы.

В ВымпелКом темой бигдата занята служба разработки продуктов, Сергей Марин. На основе анализа выбираются, например, места для открытия офисов продаж и обслуживания, идет борьба с мошенничеством, спамом, оттоком. Билайн также сотрудничает с Правительством Москвы в плане совместного использования геоданных. Бигдата намного эффективнее переписей и опросов.

В МТС также работают с бигдата - геоданными, профилями потребления трафика, типами используемых абонентских устройств, покупок. Это позволяет формировать индивидуальные предложения для клиентов. Есть планы расширения сферы применения бигдаты, в том числе для партнерства.

++ источник
++

Алексей Бойко, редактор MForum.ru

28.03.2016 12:02 От: ABloud
14.10.2019 17:19 От: ABloud

Обмен данными между участниками рынка и государством даст положительный эффект для экономики

пресс-релиз

14 октября 2019 года, Москва. – Алексей Нейман, Исполнительный директор Ассоциации больших данных (АБД) принял участие в пленарной дискуссии «Регулирование оборота данных» ежегодного форума IT Government Day.

В дискуссии также приняли участие управляющий директор управления развития компетенций по исследованию данных Сбербанка Владимир Авербах, директор департамента цифровой трансформации Счетной палаты РФ Михаил Петров, заместитель министра, CDO Минздрава Елена Бойко, руководитель Департамента информационных технологий г. Москвы Эдуард Лысенко, руководитель центра цифрового развития АСИ Вера Адаева, начальник управления методологического сопровождения работы с данными Аналитического центра при Правительстве РФ Александр Малахов. Модерировал сессию директор АНО «Информационная культура» Иван Бегтин.

«Развитие рынка больших данных в период до 2024 способно дать экономический эффект в 0,3% ВВП. Для этого необходимо снять барьеры и реализовать ряд шагов для развития рынка больших данных в России. Одной из приоритетных задач мы видим необходимость обеспечения упрощенного и регламентированного доступа к госданным. Государство — большой игрок на поле данных. Мы осознаем, что не все госданные можно открывать или разрешать их вторичное и коммерческое использование, при этом некоторые виды информации все же имеет смысл открывать для научно-исследовательских целей и целей статистики. Ассоциация больших данных ведет открытый диалог с государством, бизнес готов к сотрудничеству в вопросах взаимного обмена данными и их обогащения. Регуляторные инициативы в области данных необходимо предварительно тестировать в регуляторных и технологических песочницах, и это общая задача государства и бизнеса», - отметил Алексей Нейман.

В рамках сессии были обсуждены вопросы доступности и открытости данных, важность соблюдения этических принципов работы с данными, классификация чувствительных данных и другие.

14.10.2019 18:06 От: ABloud

Максим Еременко, старший управляющий директор Управления развития компетенций по исследованию данных Сбербанка:

«Если говорить о больших данных, которыми пронизана вся работа банковского сектора, то сейчас есть, например, репозиторий различных моделей, который позволяет систематизировать управление жизненным циклом моделей, в том числе модельным риском. Сейчас мы видим очень высокую скорость адаптации open-source фреймворков машинного обучения, многие команды активно разрабатывают собственные и внедряют существующие алгоритмы AutoML (автоматическое машинное обучение). Последние, кстати, снимают существенную часть рутинной работы с Data Scientistов, но предоставляют новые задачи и вызовы для дальнейшей работы.

Далее возникает другая сложность, уже связанная с человеческим фактором, — поиск исследователя данных с хорошим продуктовым видением и навыками коммуникации. Они на самом деле встречаются, но с ними надо работать и непрерывно заниматься их развитием. И еще в больших компаниях всегда возникает вопрос, кто сможет возглавить процесс по внедрению машинного обучения — это вопрос ответственности и открытости к новым решениям. Сейчас, к счастью, мы наблюдаем, как среди молодых исследователей данных есть более открытые и независимые ребята, которые не боятся интересных и нестандартных решений, предлагают и внедряют их в своей работе».

14.10.2019 18:10 От: ABloud

Rohde & Schwarz, Cardinality and Dell introduce joint telco data analytics solution

press-release

Best-of-breed big data analytics with Cardinality’s Perception platform, the new software IP probe R&S®Net Sensor OEM and Dell EMC PowerEdge servers

Leipzig, Germany, October 14, 2019 — ipoque GmbH, a Rohde & Schwarz company providing market-leading network analytics software, announced today a partnership with Cardinality and Dell. R&S®Net Sensor OEM, the new leading-edge software IP probe by Rohde & Schwarz, is integrated in Cardinality’s Perception platform, a big data analytics solution. With the solution running on Dell EMC PowerEdge servers, customers have access to big data and traffic analytics based on the latest processing and IP probing technologies. R&S®Net Sensor OEM will make its debut at the Mobile World Congress Americas in Los Angeles, where it will be showcased at the Rohde & Schwarz booth (#S-2024) in the South Hall from October 22 to 24.

“This partnership brings technology leaders together to offer a best-of-breed big data analytics solution,” said Prashant Kumar, CTO at Cardinality. “It is a perfect strategic fit that leverages the three companies’ respective strengths. With enhanced insights into customer and network behavior, communication service providers can harness the joint solution to reduce operational costs and maximize return on investment.”

In a world of increasing network convergence and ever-growing data rates, communication service providers (CSPs) need to maintain optimal network performance and quality of experience (QoE) for their customers. They must also gain the business intelligence to manage network expansion and control. To fulfill these demands, an analytics solution with cutting-edge processing power providing real-time network visibility is key. The new joint solution combines the processing optimization of Dell EMC PowerEdge servers with the traffic visibility provided by R&S®Net Sensor OEM and the large-scale analytics of Cardinality’s Perception platform. In this way, CSPs get a solution that generates deep insights into network traffic and subscriber behavior in real time. These insights provide valuable business intelligence for use cases such as operational intelligence, cell experience, control plane analytics, marketing and customer experience management or service issues.

A flexible pricing concept independent from bandwidth growth guarantees a safe investment for CSPs. The solution will be available immediately after Rohde & Schwarz has presented it at the MWC Americas in Los Angeles.

For more information on R&S®Net Sensor OEM and the joint telco analytics solution, visit the Rohde & Schwarz booth (#S-2024) in the South Hall at MWC Los Angeles, from October 22 to 24.


Новое сообщение:
Complete in 32 ms, lookup=0 ms, find=32 ms

Последние сообщения в форумах

Все форумы »



Поиск по сайту:

Подписка:

Подписаться
Отписаться


Новости

14.11. [Новинки] Слухи: Realme 5s с 48 Мп камерой анонсируют 20 ноября / MForum.ru

13.11. [Новинки] Анонсы: Honor 20S появился в России / MForum.ru

12.11. [Новинки] Слухи: Oppo Reno3 может получить экран 90 Гц, поддержку 5G-соединение и 64 Мп камеру / MForum.ru

12.11. [Новинки] Компоненты: Появились подробности о Snapdragon 865 / MForum.ru

11.11. [Новинки] Анонсы: Официально представлен Gigaset GS290 / MForum.ru

11.11. [Новинки] Анонсы: Xiaomi Redmi 8 и Redmi 8A появились в России / MForum.ru

08.11. [Новинки] Анонсы: Представлены Blade A7 Prime и Blade 10 Prime / MForum.ru

08.11. [Новинки] Анонсы: Huawei Y9s с чипсетом Kirin 710 появился на сайте производителя / MForum.ru

08.11. [Новинки] Анонсы: Наушники Honor Sport Pro появились в России / MForum.ru

08.11. [Новинки] Анонсы: В России начались продажи Sony Xperia 5 / MForum.ru

06.11. [Новинки] Анонсы: Xiaomi Mi Watch представлены официально / MForum.ru

05.11. [Новинки] Анонсы: Xiaomi CC9 Pro получил пентакамеру 108 Мп / MForum.ru

03.11. [Новинки] Анонсы: ASUS ROG Phone II появился в России / MForum.ru

03.11. [Новинки] Анонсы: Объявлены российские цены Meizu 16Xs, Note 9 и M10 / MForum.ru

03.11. [Новинки] Анонсы: Официально представлен Smartisan Jianguo Pro 3 / MForum.ru

31.10. [Новинки] Слухи: Появились изображения Motorola Razr нового поколения / MForum.ru

31.10. [Новинки] Слухи: Раскрыты ключевые спецификации Lenovo Tab M10 (2nd gen) / MForum.ru

31.10. [Новинки] Слухи: Redmi Note 8T получит поддержку NFC / MForum.ru

31.10. [Новинки] Слухи: Раскрыты подробности о Xiaomi CC9 Pro / MForum.ru

29.10. [Новинки] Анонсы: INOI 117B – телефон с док-станцией для пожилых людей / MForum.ru