如何管理無人機收集的非結構化數(shù)據(jù)

當?shù)湽鞠Ｍ麍?zhí)行水下調查的幾個淺池塘在全國蔓延,很快就發(fā)現(xiàn),海藻在池塘的厚度呈現(xiàn)不可能進行水下調查與標準潛水回聲測深設備反射聲納波從海底砂和水下物體。

解決辦法是一架無人機，它能發(fā)射出探地雷達(GPR)來完成同樣的工作，而不用被海藻淹沒。

類似無人機和大數(shù)據(jù)收集的案例幾乎出現(xiàn)在每個行業(yè)部門——從交通監(jiān)控、事故記錄到農(nóng)業(yè)檢查和森林野火滅火。

在每種情況下，數(shù)據(jù)通常以照片和視頻的形式收集。這些數(shù)據(jù)可以存儲在無人機上，然后傳回地面數(shù)據(jù)倉庫，在那里可以進行研究和分析。

這個過程看起來很簡單，但是對于IT和運行無人機的終端業(yè)務部門來說，需要有新的協(xié)議、業(yè)務流程和數(shù)據(jù)實踐。

如果你負責從無人機上收集大數(shù)據(jù)，你應該問自己以下六個問題:

由于帶寬和位置的限制，很少有網(wǎng)站希望將無人機數(shù)據(jù)實時下載到遙遠的中央存儲庫，甚至在飛行之后立即批量下載。存儲架構最常部署的是云中的遠程存儲，或者部署在靠近無人機活動的安全現(xiàn)場辦公室。稍后可以將數(shù)據(jù)傳輸?shù)街醒霐?shù)據(jù)存儲庫。它必須做的是在任何無人機活動之前定義這個無人機數(shù)據(jù)架構以及它如何工作。

無人機在現(xiàn)場收集數(shù)據(jù)，數(shù)據(jù)通常存放在遠程辦公室。在這些遠程辦公室中，很有可能由非it人員負責。需要對這些非IT員工實施標準的IT安全和管理實踐并進行培訓，以便數(shù)據(jù)和數(shù)據(jù)存儲在物理上和邏輯上保持安全。

“如果你飛每周3到5次,平均每飛行500圖片,你每周積累數(shù)十千兆字節(jié),你需要制定一個計劃關于所有這些信息,有什么會發(fā)生在這個領域和特定的選擇取決于你要做什么,”本杰明·范德Jagt說的聯(lián)合創(chuàng)始人UMAP技術,三維映射啟動。

數(shù)據(jù)才是關鍵。在早期，IT和業(yè)務用戶應該決定要保留哪些數(shù)據(jù)，丟棄哪些數(shù)據(jù)。如果您沒有做出這些決定，那么數(shù)據(jù)將超出您的存儲容量，然后您將發(fā)現(xiàn)對所有數(shù)據(jù)進行排序以找到您真正想要的信息更加困難。

存儲相對便宜，但必須維護服務器行和存儲驅動器，其中包含從未或很少使用的數(shù)據(jù)，這不是您想要的。這就是為什么在無人機項目的早期規(guī)劃中，你想要確定哪些數(shù)據(jù)需要保存在無人機任務中;以及你需要部署或投資多少存儲空間來存儲這些數(shù)據(jù)。

由于電池的限制，無人機的飛行時間有限。如果遇到意外的逆風，這些飛行時間可以進一步縮短。然后，無人機也可能出現(xiàn)故障——或者被攔截。選擇使用無人機的公司應該有一個行動計劃來恢復丟失的無人機(以及潛在的敏感數(shù)據(jù))，或者在無人機無法恢復時鎖定無人機數(shù)據(jù)。

無人機收集的數(shù)據(jù)幾乎總是一些非結構化的視頻或照片格式。這并不容易與來自其他公司系統(tǒng)的基于字符的固定長度記錄形式的數(shù)據(jù)集成。

地理信息系統(tǒng)(GIS)是一個與無人機收集的數(shù)據(jù)有效集成的重要平臺。GIS系統(tǒng)主要用于制圖?？梢灾С趾图煞俏谋拘畔⒑虶PS等類型的數(shù)據(jù)，是無人機采集數(shù)據(jù)的理想集成平臺。

不幸的是，無人機和GIS數(shù)據(jù)數(shù)據(jù)很難與其他公司系統(tǒng)的數(shù)據(jù)進行集成。在某些情況下，如果它還沒有GIS系統(tǒng)，它可能會選擇投資。在其他情況下，如果需要業(yè)務案例和分析，它可能選擇追求范圍更廣、難度更大的數(shù)據(jù)集成。

了解有關數(shù)據(jù)科學、大數(shù)據(jù)分析和人工智能的最新消息和最佳實踐。星期一交付