隨著安徽省高速路網(wǎng)的快速發(fā)展,通行量越來越大,稽查管理工作壓力也越來越大,如何利用技術(shù)手段提高稽查分析的效率和準確性成為一大課題。開源分布式搜索引擎ElasticSearch是一個分布式高可用開源全文檢索和分析組件,可提供存儲、搜索、大數(shù)據(jù)準實時分析等服務本文闡述了其在安徽省高速收費稽查分析系統(tǒng)中的應用架構(gòu)、數(shù)據(jù)規(guī)劃、集群建設以及應用情況等內(nèi)容,重點解決收費流水數(shù)據(jù)的統(tǒng)一存儲、統(tǒng)一查詢以及查詢的時效等問題,并結(jié)合實際情況,證明了Elasticsearch能夠滿足未來高速路網(wǎng)收費稽查業(yè)務的發(fā)展需要。

【文章頁數(shù)】：4 頁

【部分圖文】：

圖１稽查分析系統(tǒng)架構(gòu)??

了表分區(qū)和索引技術(shù)，但在億級數(shù)據(jù)量的情況下查詢?nèi)匀??很慢，難以滿足收費流水稽查的需求。??經(jīng)過多種技術(shù)方案對比，最終決定采用時序數(shù)據(jù)庫方式實現(xiàn)??收費流程稽查庫設計。根據(jù)目前稽查工作的問題，對收費流水稽??查系統(tǒng)做如下要求：一是能夠承受高并發(fā)和高吞吐量，可以同時??進行數(shù)據(jù)導入....

圖７?Ｅｌａｓｔｉｃｓｅａｒｃｈ插件字段項設置??數(shù)據(jù)源是ＨＤＰ＋ＨＤＢ大數(shù)據(jù)集群，ＨＤＰ共六個節(jié)點，一個名稱??節(jié)點，一個備用名稱節(jié)點，五個數(shù)據(jù)節(jié)點；ＨＤＢ共六個節(jié)點，一??

示。??（Ｑ）?Ｖ??ＨＤＢ?Ｋｅｔｔｌｅ?Ｅｌａｓｔｉｃｓｅａｒｃｈ??圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．２兼容ＰｏｓｔｇｒｅＳＱＬ?８．４，提供了ＧｒｅｅｎＰｌｕｍ?ＪＤＢＣ驅(qū)動??程序：Ｋｅｔｔｌｅ支持ＧｒｅｅｎＰｌｕｍ數(shù)據(jù)源，并提供Ｅｌａｓｔｉｃｓｅａｒｃｈ?５丄１插??....

圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．２兼容ＰｏｓｔｇｒｅＳＱＬ?８．４，提供了ＧｒｅｅｎＰｌｕｍ?ＪＤＢＣ驅(qū)動??

技術(shù)〈ＴＥＣＨＮＯＬＯＧＹ??圖２出口流水稽查分析查詢條件??Ｋｅｔｔｌｅ作為ＥＴＬ工具，把ＨＤＢ表中的數(shù)據(jù)油取到Ｅｌａｓｔｉｃｓｅａｒｃｈ索??引中：數(shù)據(jù)油取流程如圖３所示。??（Ｑ）?Ｖ??ＨＤＢ?Ｋｅｔｔｌｅ?Ｅｌａｓｔｉｃｓｅａｒｃｈ??圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．....

圖５?Ｅｌａｓｔｉｃｓｅａｒｃｈ插件服務器項設置??

據(jù)油取流程如圖３所示。??（Ｑ）?Ｖ??ＨＤＢ?Ｋｅｔｔｌｅ?Ｅｌａｓｔｉｃｓｅａｒｃｈ??圖３數(shù)據(jù)抽取流程圖??ＨＤＢ?２．２兼容ＰｏｓｔｇｒｅＳＱＬ?８．４，提供了ＧｒｅｅｎＰｌｕｍ?ＪＤＢＣ驅(qū)動??程序：Ｋｅｔｔｌｅ支持ＧｒｅｅｎＰｌｕｍ數(shù)據(jù)源，并提供Ｅｌａｓｔｉｃｓｅａｒ....

本文編號：4027773