14
12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных https://slon.ru/posts/60413 1/14 Мы привыкли не верить прогнозам погоды и любим рассказывать анекдоты о синоптиках, но за всеми этими шутками мы пропустили одну важную вещь: метеорология превратилась, по сути, в подотрасль ИТ-индустрии. Это одно из Елена Краузова (/authors/100018) Обозреватель Slon Magazine Шторм у юго-западного побережья Австралии NASA БИЗНЕС (/MACROTAGS/64) И о погоде. Как метеопрогнозы стали продуктом больших данных 30 ноября, 17:09 6 991 просмотр И о погоде. Как метеопрогнозы стали продуктом (/) 105 16

И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

  • Upload
    others

  • View
    2

  • Download
    0

Embed Size (px)

Citation preview

Page 1: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 1/14

Мы привыкли не верить прогнозам погоды илюбим рассказывать анекдоты о синоптиках, но завсеми этими шутками мы пропустили одну важнуювещь: метеорология превратилась, по сути, вподотрасль ИТ-индустрии. Это одно из

(/authors/100018)

Елена Краузова (/authors/100018)Обозреватель Slon Magazine

Шторм у юго-западного побережья Австралии NASA

БИЗНЕС (/MACROTAGS/64)

И о погоде. Какметеопрогнозы сталипродуктом большихданных30 ноября, 17:09 6 991 просмотр

И о погоде. Какметеопрогнозысталипродуктом

(/) 105 16

Page 2: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 2/14

направлений, где большие данные успешноиспользуются для предсказания картиныбудущего. Качество прогнозов постоянно растет иуже превышает (http://www.metoffice.gov.uk/about-us/who/accuracy/forecasts) для некоторыхтемпературных показателей 85%.

Главное изменение последних лет – рост числадатчиков, фиксирующих природные явления. Сотнилет метеорологическими данными занималисьтолько национальные бюро погоды, жившие засчет господдержки (все они входят во Всемирнуюметеорологическую ассоциацию(https://www.wmo.int/pages/members/members_ru.html)).Теперь свой вклад в метеопрогнозы может внестикаждый. Домашние метеостанции с выходом винтернет стоят (http://www.ebay.com/bhp/home-weather-station) от $50–100, любой автомобильсможет отправлять данные о погоде(http://www.itsinternational.com/sections/nafta/features/pioneering-sensors-collect-weather-data-from-moving-vehicles/).Погодные cенсоры, по всей видимости, вскорепоявятся в наших мобильных девайсах(http://www.pcworld.com/article/2935872/smartphone-beacons-power-crowdsourced-weather-forecasts.html): например, стартап WeatherSignal(http://weathersignal.com/about/), создателикоторого случайно обнаружили взаимосвязьмежду работой аккумулятора смартфона итемпературой воздуха, уже составляет картупогоды от сотен тысяч пользователей. А японскаякомпания Weathernews, поставляющая датчики

ГЛАВНЫЕ НОВОСТИ

C I S C O ®C O L L A B O R A T I O N

cisco.com/go/collaboration

Empowering Ideas That Will

Define Tomorrow's Marketplace.

Learn More.

CISCO® BIG DATA SOLUTIONS

w/ Intel® Xeon®. See 5 Must-Haves for Your

Big Data Infrastructure.

20:42 «Яндекс.Деньги» исключиливлияние санкций США на своюработу

(/posts/61663)

Page 3: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 3/14

температуры, влажности и давления длясмартфонов WxBeacon и одноименное приложение,собирает информацию от 13 млн человек.

Появились и новые потребители информации.Ритейлеры прогнозируют спрос на подарки исувениры в рождественские каникулы илиХеллоуин и увязывают старт маркетинговыхкампаний для дачных товаров или для товаров длябега с первым теплым днем в марте.Фармкомпании рассчитывают объемы продажлекарств от гриппа и простуды, вчитываясь впрогнозы погоды на год вперед. Не говоря уже оработе с этими данными организаторовмероприятий на открытом воздухе и туристическихкомпаний. И даже рекламные агентства – правда,пока только продвинутые – предлагаюттаргетировать пользователей по тому, какаяпогода их окружает: показывать объявлениякофеен надо тем, кто мерзнет под мокрым снегом,а крутить баннеры с охлаждающими напиткамитем, кто изнывает от жары. (Такую возможностьдействительно дает алгоритм Google.)

реклама (http://nativeroll.tv)

Все новости (/news)

20:50 Кремль отреагировална расширение санкций США

(/posts/61662)

17:28 Депутаты разрешили ФСБстрелять по толпе, женщинами детям

(/posts/61648)

Page 4: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 4/14

Тот, кто построит глобальную платформу,собирающую максимально много метеоданных,анализирующих их и передающих бизнесу, завоюеттеплое место на рынке, который к 2020 годувырастет как минимум до $6 млрд(http://knowledge.wharton.upenn.edu/article/todays-forecast-for-the-weather-business-increased-revenues-and-a-focus-on-innovation/). Weather Underground,компания с двадцатилетней историей наамериканском рынке, обрабатывающая сегодняданные примерно от 140 тысяч человек, делящихсяинформацией о локальной погоде, была продана в2012 году(http://www.wunderground.com/about/pr/news.asp?date=20120702) группе компаний Weather Company,а затем интернет-продукты последней былипоглощены IBM за $2 млрд. Другой американскийкрупный игрок, AccuWeather, уже давно продаетинформацию о погоде и сервисы на ее основебизнес-клиентам, но так как доступ к егоплатформе платный, то не может быстрорасширить аудиторию энтузиастов-партнеров.Есть десятки компаний(http://www.programmableweb.com/news/26-weather-apis-12-support-json/2012/01/11),собирающих и обрабатывающих данные о погоде ипередающих их сторонним пользователям. Одна из

Page 5: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 5/14

них – OpenWeatherMap, московский стартап,который делает что-то вроде «Википедии» дляпогоды.

Основатели компании – Денис и Ольга Уколовы –вложили несколько сотен тысяч долларов изсобственных средств в платформу, котораясобирает данные от любых владельцевметеоданных и с помощью API позволяетсоздавать на их основе любые приложения.OpenWeatherMap обрабатывает данные 50 тысячпогодных станций, треть из них – любительские,треть – продвинутые погодные станциистоимостью в десятки тысяч долларов отофициальных метеослужб, треть – метеослужбыаэропортов, у которых, по словам Уколовых, самыйточный мониторинг. Информацию с каждогоустройства OpenWeatherMap получает с задержкойне более одного часа, иначе она отправляется вархив – для уточнения общей статистики поклимату определенной местности.

Денис Уколов

Page 6: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 6/14

Да, качество многих данных не очень высокое, ноалгоритмы OpenWeatherMap автоматическиопределяют серьезные отклонения (например,если твоя погодная станция расположена унагревающейся бетонной стены, она показываетстабильно на несколько градусов больше) иисключают их из расчетов. «Когда астрономыследят за перемещениями планет в далекихгалактиках, они могут узнать о местерасположения каждой из них только через падениеяркости звезд, когда планеты проходят на фоне ихдиска, – говорит Денис Уколов. – Это огромноеколичество информации, с многими шумами, но,анализируя ее и очищая от шумов, можно получитьдействительно уникальные данные. Мы пошли темже путем – если национальные метеослужбыработали по принципу: меньше информации, номаксимально точной, то мы решили, что лучшебольше данных – самых разных, – из которыхможно будет самим вытянуть полезные».

Через OpenWeatherMap каждый день пользователиполучают более миллиарда прогнозов погоды.Число разработчиков, подключивших данныеOpenWeatherMap в свои продукты, около ста тысяч.В основном они пользуются API бесплатно, лишь«несколько процентов» переходят на платныеаккаунты (их стоимость – $40–2000 ежемесячно, взависимости от объемов загружаемых данных исервисов по аналитике).

За три года работы сервиса стартапу удалосьполучить таких клиентов, как PepsiCo, Samsung,Benetton, мобильные платформы Ubuntu Phone и

Page 7: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 7/14

CyanоgenMod (операционки для многихсмартфонов и планшетов) и даже Google AdWords– как раз для алгоритма размещения рекламы взависимости от погоды. Все это позволилокомпании пройти точку безубыточности.Показатели выручки OpenWeatherMap нераскрывает.

OpenWeatherMap

Сейчас OpenWeatherMap работает во всехотраслях, связанных с изменениями погоды, – отсельского хозяйства до спорта и туризма. Большиеперспективы Уколовы видят в приложениях длястрахового рынка. Например, уверены они, современем можно будет рассчитывать рискипредоставления кредита фермерам на покупкуучастка. Если точно знать, что на конкретном полеза 15 лет было три засухи и четыре наводнения,можно спрогнозировать перспективность посадкиздесь кукурузы. А потом можно подгрузитьспутниковые снимки и, наблюдая за работой

Page 8: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 8/14

фермера, оценить его трудолюбие. Может быть, научастке трудного земледелия благодарятрудолюбию и новым технологиям он добилсяогромной урожайности, пока другой фермер,владелец участка с хорошим климатом, не смогполучить хорошие результаты. Логично, чтостраховая компания сделает условия по кредитудля первого фермера мягче.

Лишь 5% пользователей OpenWeatherMapнаходятся в России, но Уколовы надеются, что вкризис на новые технологии наконец обратятвнимание. «В России сильный корпоративныйрынок и суровый климат, но пока можноэкстенсивно наращивать ренту, тонкая аналитиканикому не нужна. Когда такой возможности нет,бизнес возьмется корректировать бизнес-процессы, настраивать нюансы», – считает ОльгаУколова.

На днях сервис предсказания погоды(https://pogoda.yandex.ru/meteum) представил«Яндекс». Технология Meteum, основанная намашинном обучении, собирает данные снескольких тысяч метеостанций по всему миру (втом числе от ФГБУ «Гидрометцентр России» ифинской компании Foreca), анализируетспутниковые снимки, применяет уже известныеметеорологические модели – и может показатьпользователю прогноз погоды с точностью дорайона города (пока сервис доступен в 36 городах).«Яндекс» тоже вовлекает людей в повышениеточности прогноза погоды: они могут сообщитьчерез приложение «Яндекс.Погода» или веб-

Page 9: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 9/14

интерфейс, что прогноз оказался далек отдействительности. При этом Дмитрий Соломенцев,руководитель группы метеопрогнозирования«Яндекса», не исключает, что «Яндекс» тоже будетиспользовать данные с домашних метеостанций. Ктому же бесплатный API «Яндекс.Погоды» ужедоступен всем партнерам платформы «Яндекс длямедиа» (https://yandex.ru/promo/yandex-for-media#about).

И тем не менее фокус «Яндекса» – конечныепользователи, а не разработчики приложений ианалитических продуктов на базе погодныхданных, как у OpenWeatherMap. Уколовы вообщесчитают, что мы движемся к совершенно новомупонимаю прогноза погоды. «Монополизмметеослужб полностью исчезнет, ценакачественных метеостанций упадет до $1,5–2тысяч, – говорит Ольга Уколова. – Погодныеданные будут собираться экосистемой,напоминающей интернет, – без единого центраконтроля, без конкретного владельца, а простосовокупностью единых схем работы, общихпротоколов сбора данных». По ее словам, данныхбудет становиться все больше, все больше будет ианалитических продуктов, облачных сервисов,приложений. «Если 20 лет назад точный прогнозпогоды можно было получить только на два дня, тотеперь уже на 5–7 дней, и скорость улучшенияпредсказаний будет только расти», – заключаетУколова.

Page 10: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 10/14

Офис OpenWeatherMap

Точный прогноз погоды важен для куда большихотраслей бизнеса, чем может показаться напервый взгляд. Климатическая ситуация не тольковлияет на сельское хозяйство, добывающиеотрасли, строительство и энергетику. Постатистике американских ученых, повышениетемпературы на 1° выше определенного уровня всреднем по стране уменьшает(http://www.economist.com/news/finance-and-economics/21594252-economists-are-getting-grips-impact-climate-change-weather)ВВП на душунаселения на 8,5%. Потому что, например,производительность труда падает(http://economics.mit.edu/files/9138) на 2% сповышением температуры на каждый 1º после25ºC, а доходы неаграрных отраслей оказываютсяменьше (http://economics.mit.edu/files/9138) всреднем на 2,4% с повышением среднесуточнойтемпературы на 1º. Многие исследованияподтвердили, что чем выше температура воздуха,тем выше уровень преступности, смертности из-за

Page 11: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 11/14

возрастных заболеваний и даже случаевполитических конфликтов. Поэтому к 2100 году из-за глобального потепления мировой ВВП рискуетнедобрать(http://www.nature.com/nature/journal/v527/n7577/full/nature15725.html)23%.

Веками защиту от ураганов и наводненийобеспечивали дамбы и прочие укрепления, в XXIвеке главное оружие – 20 террабайтовметеорологических данных, ежедневнообрабатываемых компаниями по всему миру.

Фото: Арсений Несходимов для Slon Magazine

Подпишитесь на Slon Magazine,чтобы читать больше

аналитических статей на нашемсайте

ОФОРМИТЬ ПОДПИСКУ

Нужна помощь? (/faq)

Уже оформили? (/signin?scrollto=payline)

Page 12: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 12/14

Специальноепредложение

Slon + «Дождь»Как это работает

Подписавшись на SlonMagazine, вы сможетеежедневно читатьаналитические материалы,расследования, интервью с

НА ГОД

3900 ₽

При покупкеподписки на годвы экономите

780 рублей

ПОДПИСАТЬСЯ

(/PREMIUM/PAYTURE/INIT/3)

4680

НА МЕСЯЦ

390 ₽

ПОДПИСАТЬСЯ

(/PREMIUM/PAYTURE/INIT/2)

НА ГОД

5500 ₽

При покупкепакета

Slon + «Дождь»на год

вы экономите3200 рублей

ПОДПИСАТЬСЯ

(/PREMIUM/PAYTURE/INIT/6)

8700

НА МЕСЯЦ

600 ₽

При покупкепакета

Slon + «Дождь»на месяц

вы экономите270 рублей

ПОДПИСАТЬСЯ

(/PREMIUM/PAYTURE/INIT/5)

870

Page 13: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 13/14

известными экспертами ибизнесменами. Подписчикитакже получаютнеограниченный доступ кархиву. Подробнее опроекте (/subscribe)

Цена включает НДС 18%

105 16

САМОЕ ПОПУЛЯРНОЕ

71 223 просмотра1 «Путин, сдай назад». Письмо президенту (/posts/61360)

64 811 просмотров

2 Мягко стелют. Почему новый Шелковый путь обходитстороной Россию? (/posts/61380)

53 394 просмотра

3 Пусть говорит: три высказывания Путина, которыезацепили Запад (/posts/61479)

© 2009 — 2015. Все права защищены.

Любое использование материалов допускается только с согласия редакции. Свидетельствоо регистрации Эл №ФС77-36570. Выдано Роскомнадзором 11 июня 2009 года. 16+

Заметили ошибку? Выделите ее и нажмите Ctrl+Enter

Push-уведомления: включить

Page 14: И о погоде Как метеопрогнозы стали большихemiguel.econ.berkeley.edu/assets/miguel_media/625/... · 2015-12-22 · информацию о погоде

12/22/2015 И о погоде. Как метеопрогнозы стали продуктом больших данных

https://slon.ru/posts/60413 14/14