隨著安徽省高速路網(wǎng)的快速發(fā)展,通行量越來越大,稽查管理工作壓力也越來越大,如何利用技術(shù)手段提高稽查分析的效率和準(zhǔn)確性成為一大課題。開源分布式搜索引擎ElasticSearch是一個(gè)分布式高可用開源全文檢索和分析組件,可提供存儲(chǔ)、搜索、大數(shù)據(jù)準(zhǔn)實(shí)時(shí)分析等服務(wù)本文闡述了其在安徽省高速收費(fèi)稽查分析系統(tǒng)中的應(yīng)用架構(gòu)、數(shù)據(jù)規(guī)劃、集群建設(shè)以及應(yīng)用情況等內(nèi)容,重點(diǎn)解決收費(fèi)流水?dāng)?shù)據(jù)的統(tǒng)一存儲(chǔ)、統(tǒng)一查詢以及查詢的時(shí)效等問題,并結(jié)合實(shí)際情況,證明了Elasticsearch能夠滿足未來高速路網(wǎng)收費(fèi)稽查業(yè)務(wù)的發(fā)展需要。

【文章頁(yè)數(shù)】：4 頁(yè)

【部分圖文】：

圖１稽查分析系統(tǒng)架構(gòu)??

了表分區(qū)和索引技術(shù)，但在億級(jí)數(shù)據(jù)量的情況下查詢?nèi)匀??很慢，難以滿足收費(fèi)流水稽查的需求。??經(jīng)過多種技術(shù)方案對(duì)比，最終決定采用時(shí)序數(shù)據(jù)庫(kù)方式實(shí)現(xiàn)??收費(fèi)流程稽查庫(kù)設(shè)計(jì)。根據(jù)目前稽查工作的問題，對(duì)收費(fèi)流水稽??查系統(tǒng)做如下要求：一是能夠承受高并發(fā)和高吞吐量，可以同時(shí)??進(jìn)行數(shù)據(jù)導(dǎo)入....

圖７?Ｅｌａｓｔｉｃｓｅａｒｃｈ插件字段項(xiàng)設(shè)置??數(shù)據(jù)源是ＨＤＰ＋ＨＤＢ大數(shù)據(jù)集群，ＨＤＰ共六個(gè)節(jié)點(diǎn)，一個(gè)名稱??節(jié)點(diǎn)，一個(gè)備用名稱節(jié)點(diǎn)，五個(gè)數(shù)據(jù)節(jié)點(diǎn)；ＨＤＢ共六個(gè)節(jié)點(diǎn)，一??

示。??（Ｑ）?Ｖ??ＨＤＢ?Ｋｅｔｔｌｅ?Ｅｌａｓｔｉｃｓｅａｒｃｈ??圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．２兼容ＰｏｓｔｇｒｅＳＱＬ?８．４，提供了ＧｒｅｅｎＰｌｕｍ?ＪＤＢＣ驅(qū)動(dòng)??程序：Ｋｅｔｔｌｅ支持ＧｒｅｅｎＰｌｕｍ數(shù)據(jù)源，并提供Ｅｌａｓｔｉｃｓｅａｒｃｈ?５丄１插??....

圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．２兼容ＰｏｓｔｇｒｅＳＱＬ?８．４，提供了ＧｒｅｅｎＰｌｕｍ?ＪＤＢＣ驅(qū)動(dòng)??

技術(shù)〈ＴＥＣＨＮＯＬＯＧＹ??圖２出口流水稽查分析查詢條件??Ｋｅｔｔｌｅ作為ＥＴＬ工具，把ＨＤＢ表中的數(shù)據(jù)油取到Ｅｌａｓｔｉｃｓｅａｒｃｈ索??引中：數(shù)據(jù)油取流程如圖３所示。??（Ｑ）?Ｖ??ＨＤＢ?Ｋｅｔｔｌｅ?Ｅｌａｓｔｉｃｓｅａｒｃｈ??圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．....

圖５?Ｅｌａｓｔｉｃｓｅａｒｃｈ插件服務(wù)器項(xiàng)設(shè)置??

據(jù)油取流程如圖３所示。??（Ｑ）?Ｖ??ＨＤＢ?Ｋｅｔｔｌｅ?Ｅｌａｓｔｉｃｓｅａｒｃｈ??圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．２兼容ＰｏｓｔｇｒｅＳＱＬ?８．４，提供了ＧｒｅｅｎＰｌｕｍ?ＪＤＢＣ驅(qū)動(dòng)??程序：Ｋｅｔｔｌｅ支持ＧｒｅｅｎＰｌｕｍ數(shù)據(jù)源，并提供Ｅｌａｓｔｉｃｓｅａｒ....

本文編號(hào)：4027773