【太平洋汽車網(wǎng) 行業(yè)頻道】豐田互聯(lián)科技開發(fā)有限公司基于亞馬遜云服務(wù)（AWS）開發(fā)的數(shù)據(jù)湖——Toyota Big Data Center China正式上線。它可以存儲、處理上千萬輛豐田汽車每天在行駛過程中產(chǎn)生的數(shù)十TB數(shù)據(jù)，推動豐田汽車的車聯(lián)網(wǎng)解決方案在中國市場大規(guī)模落地。

　　通過對海量數(shù)據(jù)的存儲、分析，Toyota Big Data Center China可以為用戶提供各種創(chuàng)新的服務(wù)，例如，幫助駕駛員更安全地使用汽車，依據(jù)駕駛行為數(shù)據(jù)幫助車主獲得汽車保險折扣等。

　　從2019年開始，豐田汽車希望在中國市場全面推廣車聯(lián)網(wǎng)服務(wù)，為所有新上市的汽車標配了車載數(shù)據(jù)通信模塊（DCM），成功實現(xiàn)在用戶同意的情況下將車輛數(shù)據(jù)全部傳輸?shù)胶笈_的車聯(lián)網(wǎng)系統(tǒng)。車聯(lián)網(wǎng)服務(wù)的全面落地，首當其沖面臨的就是海量數(shù)據(jù)的存儲、處理和分析問題。豐田汽車2019年在中國全年銷量超過162萬輛，行駛的車輛每天不斷地生成新數(shù)據(jù)，隨著聯(lián)網(wǎng)汽車數(shù)量不斷增長，這些汽車每天將產(chǎn)生數(shù)十億條消息，生成TB級的數(shù)據(jù)。

　　為了給用戶提供更好的車聯(lián)網(wǎng)服務(wù)，豐田互聯(lián)希望通過搭建數(shù)據(jù)湖，構(gòu)建一個能夠?qū)崟r存儲、處理、分析數(shù)據(jù)的管理平臺，為穩(wěn)定、可靠、高效的車聯(lián)網(wǎng)服務(wù)系統(tǒng)打好基礎(chǔ)。

　　AWS在大數(shù)據(jù)方面有一套完整的解決方案，可以存儲任意規(guī)模的結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，并對原始數(shù)據(jù)進行查詢、處理、實時分析和機器學習等，幫助企業(yè)利用數(shù)據(jù)做出更好的決策。Amazon Simple Storage Service (Amazon S3) 是AWS數(shù)據(jù)湖方案的核心，具有優(yōu)異的可伸縮性、高可用性。Amazon S3為實現(xiàn)99.999999999% 的持久性而設(shè)計，可以快速、低成本地攝取和存儲各種數(shù)據(jù)。

　　豐田互聯(lián)還采用了Amazon Kinesis實時數(shù)據(jù)流服務(wù)、AWS Lambda無服務(wù)器計算服務(wù)、Amazon Elastic MapReduce大規(guī)模并行處理服務(wù)等，安全、靈活、高效地完成從實時數(shù)據(jù)注入、解碼到分析、應(yīng)用的全流程。

　　同時，豐田汽車的車聯(lián)網(wǎng)項目是全球性的，中國數(shù)據(jù)湖系統(tǒng)的架構(gòu)和平臺也需與全球統(tǒng)一。豐田汽車和AWS正在開展全球協(xié)作，采用AWS龐大的云服務(wù)組合擴展豐田的行駛服務(wù)平臺，幫助豐田工程師開發(fā)、部署和管理下一代數(shù)據(jù)驅(qū)動的行駛服務(wù)。豐田在AWS中國區(qū)域可以選用與AWS海外區(qū)域相同的數(shù)據(jù)湖解決方案，因此AWS成為豐田互聯(lián)構(gòu)建數(shù)據(jù)湖系統(tǒng)的理想選擇。

　　在AWS技術(shù)專家團隊的幫助下，豐田互聯(lián)在5個月內(nèi)完成了這一項目的開發(fā)及部署，并借助AWS強大的云服務(wù)和功能大大降低了云資源使用成本。AWS的云原生和托管服務(wù)也使豐田互聯(lián)可以把更多精力放在應(yīng)用創(chuàng)新上，縮短項目上線時間，減少開發(fā)和運維的成本。

　　豐田互聯(lián)的成本節(jié)省主要體現(xiàn)在兩個方面：其一是云資源使用成本的節(jié)省。利用AWS豐富的功能建立起成本優(yōu)化模型，豐田互聯(lián)極大地降低了云資源的使用成本。例如，通過制定數(shù)據(jù)生命周期策略，在指定持續(xù)時間之后將數(shù)據(jù)從Amazon S3移動到Amazon S3 Glacier，從而將數(shù)據(jù)存儲成本降低了6倍，更進一步地將數(shù)據(jù)從Amazon S3 Glacier移動到Amazon S3 Glacier Deep Archive，成本又降低了4倍。另一方面，采用AWS無服務(wù)器架構(gòu)等技術(shù)，實現(xiàn)了架構(gòu)的自動靈活擴展，降低成本。其二是系統(tǒng)的運維成本大幅度降低，基于AWS構(gòu)建的業(yè)務(wù)系統(tǒng)實現(xiàn)了高度自動化運維。