根據美國運輸部,約有94%的車輛事故可以歸因於人為錯誤。應對這一挑戰開始捕捉卡車周圍的世界,這翻譯大量的月神探測器拍攝記錄的高清晰度視頻,激光雷達,雷達數據來訓練他們的模型。不出所料,這的密度大數據量提出了各種各樣的技術挑戰。首先,開始正與內部機器和個人筆記本電腦訪問數據和運行查詢和分析。但由於它的規模,他們局限於隻有30秒的數據的分析。當你有k 37小時的記錄數據,分析30秒的短片是行不通的。
除了有限的數據訪問,單一的使用筆記本電腦阻止團隊存儲足夠的有意義的數據在一個位置,並將它從他們的辦公室是緩慢而昂貴的。任何小故障或改變意味著大量的工程時間和多天的機器隻是為了得到他們需要的結果。“我們隻能大概30秒的數據視圖。這真的很難做出明智的決定,”傑森•斯奈爾說,領導開始的開發平台的軟件工程師團隊。Beplay体育安卓版本
一旦開始實現數據磚,一切都改變了。數據分析的統一方法攝取和ETL容易管理,和分布式平台規模來滿足他們的數據需求。Beplay体育安卓版本更好的是,團隊開始從單一的筆記本電腦內存有限的成百上千的機器在雲中,簡化集群,並最終允許數據科學家專注於數據而不是基礎設施。
跨團隊協作與互動的筆記本也得到了提升,這使得團隊編寫代碼,想象在一個地方所有的結果,以及容易與不同團隊分享和協作(數據工程師、產品管理、數據和數據科學)。
“磚允許我們解開了35000小時的記錄數據從我們的卡車,”傑森說。“我們的工程師可以隨時訪問這些數據,無論大小,無論他們想要的決議。”
從分析的角度看,開始的數據分析師能夠生成儀表盤-由磚通過畫麵更好地理解他們的軟件和運動傳感器是如何執行。
磚啟用了最終開始實現所需的大規模數據處理和模型訓練,同時保持一如既往的安全意識。之前部署一個新模型在路上,例如,進行團隊的措施其性能離線並確保它符合安全標準。磚之前,每一個變化將天。磚允許進行離線分析擴展到幾分鍾,推動更快和更安全的迭代。
“建立無人駕駛卡車從未做過,”傑森說。“它需要大量的創造力、解決問題和直覺,和沒有磚,我們隻是不能這樣做。”
開始的數據分析師利用內部指標和生成指示板通過畫麵更好地理解他們的軟件和傳感器是如何執行的。今天,他們的數據分析師團隊運行的畫麵指示板數量——所有的磚——包括他們的軟件版本的性能,傳感器校準性能等等。