- 時間序列資料庫是管理持續不斷的感測器資料流的首選方案。
- NoSQL 和 SQL 模型之間的選擇完全取決於所處理資訊的靈活性和數量。
- 可擴充性和寫入速度是避免儲存瓶頸的關鍵因素。
如果你即將參加黑客馬拉松,並且偶然接觸到物聯網領域,那麼在儲存方面感到有些迷茫是很正常的。當你使用感測器時,你保存的不僅僅是簡單的姓名或地址;你需要處理每隔幾秒鐘就不斷湧入的資料流,這與傳統的 Web 應用程式截然不同。
為了防止專案在開始收集數據時崩潰,你需要明白關鍵不僅在於儲存數據,還在於有效率地檢索數據以產生你提到的後續配置。處理使用者查詢與精確到毫秒分析一小時的溫度趨勢是截然不同的。
物聯網的核心:時間序列資料庫(TSDB)

對於初學者來說,首先要了解的是時間序列資料庫(TSDB)。這類資料庫是為處理時間戳記資料而設計。它們並非將每次讀取視為一條獨立的記錄,而是優化儲存時間序列數據,從而顯著降低磁碟佔用率並加快基於時間的查詢速度。
如果您使用 InfluxDB 之類的工具,您會發現它們可以輕鬆地每秒攝取數千個資料點。這一點至關重要,因為在感測器環境中,寫入速度遠比讀取速度重要,設備無法等待資料庫完成處理後再發送下一條資料。
為實現最大靈活性而選擇的 NoSQL 替代方案

有時,感測器發送的資料並不總是相同的;例如,您可能某天添加了濕度感測器和二氧化碳感測器,而您肯定不想頻繁地更改表結構。這時,NoSQL 資料庫就派上了用場,尤其是像 MongoDB 這樣的文檔型資料庫。透過以 JSON 格式儲存訊息,您可以完全靈活地控制資料結構,從而輕鬆地根據需求隨時調整項目。
但是,務必注意數據量。雖然這種儲存方式用途廣泛,但如果資料量達到數百萬條,且沒有對日期欄位進行正確的索引,儲存和記憶體成本可能會飆升。這種儲存方式非常適合儲存設備配置或元數據,但如果數據量龐大,可能就不適合儲存原始遙測數據了。
現在使用 SQL 還有意義嗎?

許多學生選擇使用 MySQL 或 PostgreSQL,因為他們熟悉這些資料庫。如果資料量可控,並且需要處理實體間複雜的關聯關係(例如將感測器與特定所有者、房間和建築物關聯起來),那麼這不失為一個好選擇。 SQL 的引用完整性在維護資產管理秩序方面無可匹敵。
當讀取的表呈指數級增長時,問題就出現了。關係型資料庫通常難以應對海量行數據,導致按日期篩選時速度變慢。如果您決定採用這種方式,我建議您研究一下表格分割區,以防止系統成為瓶頸。
決定你參加黑客鬆的關鍵因素

為避免活動期間出現問題,請考慮需要連接的感測器數量。如果您需要快速設定且可擴充的方案,那麼採用NoSQL 進行設定、TSDB 進行資料讀取的組合策略是理想之選。此外,請記住,網路延遲和頻寬也會影響您如何建立硬體資料傳輸。
此外,還要考慮是否需要即時處理數據,還是事後分析就足夠了。有些資料庫允許你在某個值超過閾值時自動發出警報,這樣就不需要在後端程式碼中直接編寫相關邏輯,讓你有更多時間來完善使用者介面。
儲存方式的選擇取決於您是優先考慮 SQL 的嚴格結構、NoSQL 的多功能性,還是時間序列的專門性,後者對於管理來自感測器的持續遙測資料流以及確保系統的流暢性和可擴展性最為有效。