🚀 go-pugleaf

RetroBBS NetNews Server

Inspired by RockSolid Light RIP Retro Guy

Article View: pl.comp.bazy-danych
Article #195562

Re: struktura bazy do zbierania danych z czujników

#195562
From: baItiz
Date: Sun, 11 Feb 2018 23:21
12 lines
2308 bytes
W dniu 11.02.2018 o 21:02, kuczek@kuczek.pl pisze:
> Bardzo dobrej rady udzielili już szanowni przedmówcy, potwierdzam z doświadczenia - rozdziel zbieranie danych od ich obróbki. W pierwszej części upewnij się, że zebrane surowe dane są kompletne, nic nie ginie, nie następują problemy w komunikacji (nie wiem z jakimi czujnikami pracujesz, czy transmisje danych przewidują jakieś sumy kontrolne pozwalające na wykrycie ewentualnych przekłamań, czy można zażądać ponownej transmisji itp.).

Czujniki własnej "produkcji" więc o wszystko będzie można zadbać. 
Planuję użycie protokołu MQTT z QOS 2. lub 1. co pozwoli na automatyczne 
ponawiane wysyłania w przypadku niepowodzenia.

> Zbieraj te wartości jako tekst, konwersją pomartwisz się na etapie obróbki, równocześnie przechowując informację jaki rodzaj pomiaru i z jakiego urządzenia dostałeś w sposób umożliwiający późniejszą identyfikację.
> Nikt Ci przecież nie zabroni na etapie obróbki zdefiniować sobie tabel pomocniczych, w których zdefiniujesz sobie Twoje czujniki, jakie pomiary wykonują, jaki rodzaj danych mogą zwracać czy też nawet jak te dane mogą być zinterpretowane. A później już do woli sobie generuj wydruki, wykresy czy czego tam dusza zapragnie.

Obecnie skłaniam się ku zapisywaniu surowych danych do MongoDB 
ewentualnie pójście w ekosystem Amazona: IoT Core / DynamoDB / Lambda
Technical Details
Message-ID: <p5qj5g$ff2$1@node2.news.atman.pl>
Path: mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed2.atman.pl!newsfeed.atman.pl!.POSTED!not-for-mail
References: <p5an7s$eou$1@node2.news.atman.pl> <8f9698a6-7844-43b3-b115-e31012a3021f@googlegroups.com>

Show Full Headers
Complete Article Headers
Path: mbox-mo1.pugleaf.net!news-archive.icm.edu.pl!news.icm.edu.pl!newsfeed2.atman.pl!newsfeed.atman.pl!.POSTED!not-for-mail
From: baItiz <baltis@haiv.ui>
Newsgroups: pl.comp.bazy-danych
Subject: Re: struktura bazy do zbierania danych z czujników
Date: Mon, 12 Feb 2018 00:21:20 +0100
Organization: ATMAN - ATM S.A.
Lines: 12
Message-ID: <p5qj5g$ff2$1@node2.news.atman.pl>
References: <p5an7s$eou$1@node2.news.atman.pl> <8f9698a6-7844-43b3-b115-e31012a3021f@googlegroups.com>
NNTP-Posting-Host: 89-78-50-190.dynamic.chello.pl
Mime-Version: 1.0
X-Trace: node2.news.atman.pl 1518391280 15842 89.78.50.190 (11 Feb 2018 23:21:20 GMT)
X-Complaints-To: usenet@atman.pl
NNTP-Posting-Date: Sun, 11 Feb 2018 23:21:20 +0000 (UTC)
In-Reply-To: <8f9698a6-7844-43b3-b115-e31012a3021f@googlegroups.com>
Content-Type: text/plain; charset=UTF-8
Content-Transfer-Encoding: 8bit