Добрый день, уважаемый читатель!

Данная статья представляет собой маленький обзор трех облачных сервисов для накопления и обработки данных для ваших IoT устройств:

Народный мониторинг – https://narodmon.ru/
Thing Speak – https://thingspeak.com/
Open monitoring – http://open-monitoring.online/

Облачные сервисы накопления и обработки данных, как и следует из обобщающего названия, предназначены для получения данных по http-протоколу с целью их хранения, обработки и представления в виде различных графиков и гистограмм. На самом деле, большинство из них умеют гораздо больше, но это мы как раз и обсудим в данной статье.

Если вы читали мои предыдущие статьи, посвященные прошивке на базе ESP-IDF, то, наверное, заметили, что прошивка “умеет” отправлять данные на все три сервиса одновременно. Возникает резонный вопрос – а зачем так много?!

Дело в том, что эти сервисы, хоть и выполняют одну и ту же “базовую задачу” – накопление данных и отображение их в виде графиков, обладают разными дополнительными возможностями и разными ограничениями. И их использование дает разные возможности, которые иногда очень удобно сочетать. Что-то удобнее использовать на компьютере, что-то – на смартфоне. Давайте и рассмотрим их отличия и особенности, на мой взгляд.

ПыСы: всё перечисленное в статье – не реклама, а лишь демонстрация возможностей и как их можно применить в своем “доме с зачатками разума”. Все права и названия принадлежат их владельцам.

Народный мониторинг

Сайт: https://narodmon.ru/

Отечественный проект Интернета вещей (IoT Cloud) для сбора, обработки, хранения и отображения (на карте и в приложениях) показаний датчиков и веб-камер своих участников с публичным или приватным доступом на различных платформах. Проект очень хорошо документирован, имеется разветвленная система справки и техническая поддержка.

Этот сервис в первую очередь ориентирован на представление данных с привязкой к геолокации. Как напрямую и следует из названия, он в первую очередь ориентирован на мониторинг фактических параметров погоды множеством пользователей, однако только погодой его возможности не ограничиваются.

Из дополнительных возможностей сервиса ещё хотелось бы отметить возможность подключения к Алисе от Яндекса, хотя лично я этим не пользуюсь.

Передача данных на сервер

Передавать показания датчиков на сервер можно посредством протоколов TCP/UDP или HTTP(S) GET или POST, а также MQTT (для приборов с обратной связью) и HTTP(S) JSON для одновременной передачи данных сразу нескольких приборов и интеграции с другими системами мониторинга.

Просмотр графиков

Для того, чтобы посмотреть графики изменений того или иного значения с датчика, достаточно нажать на пиктограмму справа от значения (либо нажать на строчку с данными датчика в мобильном приложении):

Но так получится посмотреть только один-единственный график. Чтобы наложить несколько графиков друг на друга (например совместить температуру в доме с температурой на улице), придется сделать это через меню “Датчики”, отметив нужные датчики в списке, а затем нажав на ссылку “построение графика”:

Совмещенные графики с нескольких датчиков

Публичный доступ к данным

В силу своей специфики данный сервис предлагает самый простой и логичный способ публичного доступа к вашим данным – вы просто делаете некоторое датчики публичными и они сразу же (ну почти) становятся видимыми для всех пользователей, которые зашли на данный сайт. В том числе и для не зарегистрированных посетителей. Для публичных сервисов типа метеостанций это очень удобно.

Но если вы открываете публичный доступ к вашим данным – будьте готовы к постоянным закрытиям публикации со стороны сервиса из-за различных правил и ограничений, зачастую надуманных. Например: у меня постоянно отключают датчик скорости ветра, когда на улице долгое время штиль и “показания датчика не изменяются”. Бороться с техподдержкой в данном случае бесполезно – проще залезть на крышу и периодически дуть в анемометр.

Уведомления

В настройках прибора есть возможность настроить уведомления на электронную почту при неактивности прибора в течение заданного времени (от 10 минут). Кроме этого, в профиле пользователя можно настроить уведомления разных типов на разные события в системе:

Обратная связь

Сервис поддерживает REST API для “обратного” управления вашими приборами или их настройки через сайт народного мониторинга. Передача команд происходит сразу после получения от прибора очередного пакета показаний датчиков в уже открытый сокет, что позволяет управлять приборами с “серыми” IP находящимися за роутерами (т.е. за NAT). Сам я этой возможностью не пользуюсь, однако в справочной системе сайта всё достаточно хорошо описано, я думаю, проблем возникнуть не должно.

Вывод данных на сторонние сайты

На сайте имеется ещё одно API – для получения накопленных данных с сервиса в ваше приложение или для на ваш сайт. Есть возможность легко добавить виджет народного мониторинга на любой сторонний сайт.

Приложения и виджеты для смартфонов

У сервиса имеется свое официальное приложение, которое, в том числе, позволяет добавить виджет на рабочий стол устройства для удобного отображения данных. Есть версии для Android и для iOS. То есть с отображением данных с прибора на экране проблем возникнуть не должно.

Ограничения

Базовый функционал сайта и доступ к API передачи и/или запроса данных является бесплатным для частного некоммерческого использования. В этом режиме вам доступен только один приватный прибор или веб-камеру. Дополнительные приборы нужно “заработать” тем или иным способом – привести нас сайт пользователей, заплатить и т.д. Но количество датчиков в приборе ограничено лишь максимальным размером пакета данных с показаниями датчиков, который на данный момент составляет 4 КБ. Если вы переводите данные прибора в публичный доступ – вам будет доступен ещё один прибор. Так же есть возможность увеличить лимиты за счет помощи проекту и донатов – за более подробной информацией обращайтесь к соответствующему разделу справки.

Данные обрабатываются и загружаются в базу не чаще 1 раз в минуту. При отправке показаний чаще чем 1 раз в минуту прибор попадает в бан до устранения проблемы его владельцем. Минимальный интервал записи показаний датчиков в историю (для построения графиков, выгрузки во внешние системы и CSV) составляет 5 минут и может быть уменьшен для партнеров и донаторов. Поэтому нет смысла отправлять на него показания чаще, чем один раз в 5 минут.

Срок хранения подробных показаний датчиков составляет 30 дней, среднечасовых значений – 1 год, среднесуточных – вечность. Если нужно хранить подробные показания дольше, то можно настроить их автоматическую выгрузку на Ваш Яндекс.Диск или Google Drive.

Лично для меня это достаточно существенные ограничения и я мало пользуюсь данным сервисом. Единственный мой прибор, отправляющий свои данные на этот сервис – метеостанция. Да и то только потому, что я хочу поделиться данными о фактической погоде со своими друзьями и соседями.

Thing Speak

Сайт: https://thingspeak.com/

Сервис компании Math Works, созданный для Интернета вещей, тесно связанный с продуктами Math Works (MATLAB). ThingSpeak — это служба аналитической платформы IoT, которая позволяет собирать, визуализировать и анализировать потоки данных в реальном времени в облаке. Вы можете отправлять данные в ThingSpeak со своих устройств, создавать мгновенные визуализации данных в реальном времени и отправлять оповещения с помощью веб-сервисов, таких как Twitter и Twilio. Благодаря аналитике MATLAB внутри ThingSpeak вы можете писать и выполнять код MATLAB для выполнения предварительной обработки, визуализации и анализа.

Сразу оговорюсь – я не использую возможности MATLAB, так как у меня возникли сложности в его использовании, вероятно из-за кириллицы в названиях. Ну не очень то и хотелось, как говориться. Поэтому эту часть функционала я описывать не буду.

Сервис имеет достаточно подробную справочную систему и множество примеров кода для различных устройств. На английском языке, онлайн переводчик вам в помощь.

В терминологии сайта каждый из приборов или устройств – это канал. Каждый канал может включать до 8 полей с данными. На бесплатном аккаунте вы можете создать до 4 каналов. Полученные данные можно выводить в виде настраиваемых графиков, гистограмм и виджетов-“приборов”.