<正>隨著互聯(lián)網(wǎng)、云計(jì)算、大數(shù)據(jù)等信息技術(shù)的快速發(fā)展,可為數(shù)據(jù)量龐大的云南省農(nóng)業(yè)環(huán)境與農(nóng)產(chǎn)品質(zhì)量現(xiàn)狀調(diào)查與安全評(píng)價(jià)提供數(shù)據(jù)支撐與保障。云南省農(nóng)業(yè)環(huán)境保護(hù)工作在實(shí)施耕地及農(nóng)產(chǎn)品協(xié)同監(jiān)測(cè)中,不能及時(shí)可視化、電子化、信息化,工作模式嚴(yán)重滯后于國家倡導(dǎo)的"智慧農(nóng)業(yè)、數(shù)字農(nóng)業(yè)",嚴(yán)重影響了全省耕地土壤環(huán)境質(zhì)量與農(nóng)產(chǎn)品質(zhì)量安全評(píng)價(jià)的時(shí)效性

【文章頁數(shù)】：6 頁

【部分圖文】：

圖1大數(shù)據(jù)架構(gòu)

通過數(shù)據(jù)融合任務(wù),將已有的各個(gè)部門、州(市)的土壤相關(guān)數(shù)據(jù)、農(nóng)產(chǎn)品數(shù)據(jù)、污染面源數(shù)據(jù)等從各個(gè)系統(tǒng)中抽取到平臺(tái)或通過Excel、CSV數(shù)據(jù)格式導(dǎo)入到平臺(tái)中,并進(jìn)行數(shù)據(jù)的清洗、轉(zhuǎn)換和存儲(chǔ)。數(shù)據(jù)融合平臺(tái)負(fù)責(zé)多數(shù)據(jù)源融合、大數(shù)據(jù)平臺(tái)管理、系統(tǒng)基礎(chǔ)支撐管理、系統(tǒng)監(jiān)控。在整個(gè)項(xiàng)目中總領(lǐng)“心臟....

圖2管理界面

(2)開發(fā)Spark作業(yè)提交、任務(wù)監(jiān)控和資源調(diào)度、任務(wù)提交管理、任務(wù)隊(duì)列管理、任務(wù)刪除管理、任務(wù)執(zhí)行策略管理、任務(wù)狀態(tài)管理功能;(3)實(shí)現(xiàn)平臺(tái)使用Sqoop組件對(duì)外圍業(yè)務(wù)系統(tǒng)的關(guān)系型數(shù)據(jù)庫數(shù)據(jù)的抽取;

圖3數(shù)據(jù)庫管理后臺(tái)

完成功能:(1)實(shí)現(xiàn)HDFS/HBase分布式存儲(chǔ)框架存儲(chǔ)耕地土壤詳查數(shù)據(jù)、專題成果基礎(chǔ)檔案數(shù)據(jù)的結(jié)構(gòu)化數(shù)據(jù);

圖4工作流圖

(10)開發(fā)數(shù)據(jù)共享交換服務(wù)的安全保障功能。3.云南省耕地土壤環(huán)境質(zhì)量數(shù)據(jù)平臺(tái)及分析系統(tǒng)。

本文編號(hào)：3963911