智慧社區(qū)信息系統(tǒng)和基層治理綜合信息指揮系統(tǒng)數(shù)據(jù)智能化應(yīng)用的設(shè)計(jì)與實(shí)現(xiàn)
發(fā)布時間:2021-03-07 06:08
傳統(tǒng)智慧社區(qū)信息系統(tǒng)較為封閉、數(shù)據(jù)單一,導(dǎo)致很難開展數(shù)據(jù)智能化應(yīng)用。通過安全連通區(qū)級基層治理綜合信息指揮系統(tǒng),將網(wǎng)格屬地的數(shù)據(jù)信息和小區(qū)本地?cái)?shù)據(jù)信息有效結(jié)合,再根據(jù)小區(qū)各種需求進(jìn)行數(shù)據(jù)挖掘,形成智能化應(yīng)用,既提高了小區(qū)管理的響應(yīng)率,又增強(qiáng)了網(wǎng)格基層治理的高效性,使數(shù)據(jù)賦能,提升整體管理效率。
【文章來源】:計(jì)算機(jī)時代. 2020,(08)
【文章頁數(shù)】:3 頁
【部分圖文】:
智慧社區(qū)信息系統(tǒng)整體構(gòu)架圖
考慮到數(shù)據(jù)平臺對數(shù)據(jù)存儲和運(yùn)算的海量需求,采用了大數(shù)據(jù)相關(guān)的分布式架構(gòu),建設(shè)后臺軟件數(shù)據(jù)庫,運(yùn)用于信息管理。用分布式數(shù)據(jù)倉庫提供統(tǒng)一的存儲平臺,存放海量的歷史數(shù)據(jù)及每日新增數(shù)據(jù),包括基礎(chǔ)數(shù)據(jù)庫、標(biāo)準(zhǔn)代碼庫、應(yīng)用主題庫等。通過并行數(shù)據(jù)庫與數(shù)據(jù)倉庫、數(shù)據(jù)處理功能,分析處理大數(shù)據(jù)下的結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),形成數(shù)據(jù)沉淀后存放在數(shù)據(jù)超市方便智能應(yīng)用提取。具體結(jié)構(gòu)如圖2所示。在數(shù)據(jù)分析和挖掘方面,采用基于MapReduce[5]及其之上的HIVE進(jìn)行離線運(yùn)算,方便大計(jì)算量下的運(yùn)算,實(shí)現(xiàn)數(shù)據(jù)管理功能、查詢與統(tǒng)計(jì)功能。MapReduce是面向大數(shù)據(jù)并行處理的計(jì)算模型、框架和平臺,它可以使一堆雜亂無章的數(shù)據(jù)按照某種特征歸納起來,然后處理并得到最后的結(jié)果。通過解析每個數(shù)據(jù),從中提取出key和value,也就是提取了數(shù)據(jù)的特征。經(jīng)過MapReduce的Shuffle階段之后,在Reduce階段看到的都是已經(jīng)歸納好的數(shù)據(jù)了,我們將這些數(shù)據(jù)存放到數(shù)據(jù)超市中,形成新的數(shù)據(jù)表集合,直接用于各類應(yīng)用和報表,提高數(shù)據(jù)快速響應(yīng)能力,降低系統(tǒng)負(fù)擔(dān)。
【參考文獻(xiàn)】:
期刊論文
[1]MapReduce大數(shù)據(jù)處理平臺與算法研究進(jìn)展[J]. 宋杰,孫宗哲,毛克明,鮑玉斌,于戈. 軟件學(xué)報. 2017(03)
[2]小區(qū)物業(yè)管理系統(tǒng)的研究與設(shè)計(jì)[J]. 陳舒. 電子測試. 2013(19)
[3]住宅小區(qū)物業(yè)管理信息系統(tǒng)設(shè)計(jì)[J]. 楊帆. 武漢化工學(xué)院學(xué)報. 2002(04)
[4]松散耦合的分布式信息系統(tǒng)[J]. 劉衛(wèi)東,徐恪,劉亞霄. 清華大學(xué)學(xué)報(自然科學(xué)版). 2002(01)
本文編號:3068536
【文章來源】:計(jì)算機(jī)時代. 2020,(08)
【文章頁數(shù)】:3 頁
【部分圖文】:
智慧社區(qū)信息系統(tǒng)整體構(gòu)架圖
考慮到數(shù)據(jù)平臺對數(shù)據(jù)存儲和運(yùn)算的海量需求,采用了大數(shù)據(jù)相關(guān)的分布式架構(gòu),建設(shè)后臺軟件數(shù)據(jù)庫,運(yùn)用于信息管理。用分布式數(shù)據(jù)倉庫提供統(tǒng)一的存儲平臺,存放海量的歷史數(shù)據(jù)及每日新增數(shù)據(jù),包括基礎(chǔ)數(shù)據(jù)庫、標(biāo)準(zhǔn)代碼庫、應(yīng)用主題庫等。通過并行數(shù)據(jù)庫與數(shù)據(jù)倉庫、數(shù)據(jù)處理功能,分析處理大數(shù)據(jù)下的結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù),形成數(shù)據(jù)沉淀后存放在數(shù)據(jù)超市方便智能應(yīng)用提取。具體結(jié)構(gòu)如圖2所示。在數(shù)據(jù)分析和挖掘方面,采用基于MapReduce[5]及其之上的HIVE進(jìn)行離線運(yùn)算,方便大計(jì)算量下的運(yùn)算,實(shí)現(xiàn)數(shù)據(jù)管理功能、查詢與統(tǒng)計(jì)功能。MapReduce是面向大數(shù)據(jù)并行處理的計(jì)算模型、框架和平臺,它可以使一堆雜亂無章的數(shù)據(jù)按照某種特征歸納起來,然后處理并得到最后的結(jié)果。通過解析每個數(shù)據(jù),從中提取出key和value,也就是提取了數(shù)據(jù)的特征。經(jīng)過MapReduce的Shuffle階段之后,在Reduce階段看到的都是已經(jīng)歸納好的數(shù)據(jù)了,我們將這些數(shù)據(jù)存放到數(shù)據(jù)超市中,形成新的數(shù)據(jù)表集合,直接用于各類應(yīng)用和報表,提高數(shù)據(jù)快速響應(yīng)能力,降低系統(tǒng)負(fù)擔(dān)。
【參考文獻(xiàn)】:
期刊論文
[1]MapReduce大數(shù)據(jù)處理平臺與算法研究進(jìn)展[J]. 宋杰,孫宗哲,毛克明,鮑玉斌,于戈. 軟件學(xué)報. 2017(03)
[2]小區(qū)物業(yè)管理系統(tǒng)的研究與設(shè)計(jì)[J]. 陳舒. 電子測試. 2013(19)
[3]住宅小區(qū)物業(yè)管理信息系統(tǒng)設(shè)計(jì)[J]. 楊帆. 武漢化工學(xué)院學(xué)報. 2002(04)
[4]松散耦合的分布式信息系統(tǒng)[J]. 劉衛(wèi)東,徐恪,劉亞霄. 清華大學(xué)學(xué)報(自然科學(xué)版). 2002(01)
本文編號:3068536
本文鏈接:http://sikaile.net/guanlilunwen/shequguanli/3068536.html
最近更新
教材專著