國家稅務(wù)總局作為統(tǒng)籌全國稅務(wù)數(shù)據(jù)的負(fù)責(zé)單位,在金稅三期工程在全國范圍內(nèi)順利推廣上線之后,提出了將全國稅務(wù)數(shù)據(jù)集中予以挖掘分析以及利用,因此金稅三期子項(xiàng)目即大數(shù)據(jù)云平臺(tái)項(xiàng)目應(yīng)運(yùn)而生。大數(shù)據(jù)技術(shù)在各行各業(yè)的不斷普及應(yīng)用,使得運(yùn)用大數(shù)據(jù)技術(shù)解決稅務(wù)問題已經(jīng)成為稅收現(xiàn)代化建設(shè)的重要指標(biāo)之一。全國稅務(wù)數(shù)據(jù)范圍覆蓋國、地稅70+個(gè)上線單位的源頭數(shù)據(jù)、總局和各省局的外部門交換數(shù)據(jù)以及從互聯(lián)網(wǎng)渠道獲取的開放數(shù)據(jù)。考慮這些數(shù)據(jù)量大冗雜的特性,本文系根據(jù)國家稅務(wù)總局提出的關(guān)于數(shù)據(jù)歸集的實(shí)際需求,完成了企業(yè)與自然人數(shù)據(jù)歸集系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)。本文基于軟件工程處理問題的思想,描述系統(tǒng)的需求分析和設(shè)計(jì)實(shí)現(xiàn)的語言采用的是UML(統(tǒng)一建模語言),采用RUP(統(tǒng)一過程)的軟件開發(fā)方法,利用阿里搭建的稅務(wù)專有云平臺(tái)為框架,全面分析了企業(yè)與自然人數(shù)據(jù)歸集系統(tǒng)的6個(gè)子系統(tǒng),并且對各個(gè)子系統(tǒng)進(jìn)行了詳細(xì)的設(shè)計(jì)與實(shí)現(xiàn)。目前,系統(tǒng)完成了包括數(shù)據(jù)同步配置文件產(chǎn)出管理、datax腳本調(diào)用管理、同步任務(wù)執(zhí)行管理、編碼轉(zhuǎn)換管理、數(shù)據(jù)預(yù)處理管理、數(shù)據(jù)相似度計(jì)算管理以歸集MapReduce實(shí)現(xiàn)管理等在內(nèi)的一系列功能模塊。應(yīng)用于稅務(wù)專有云平臺(tái)開發(fā)...

【文章頁數(shù)】：101 頁

【學(xué)位級別】：碩士

【文章目錄】：
中文摘要
ABSTRACT
第1章 緒論
    1.1 研究背景和意義
        1.1.1 研究的背景
        1.1.2 項(xiàng)目實(shí)施的意義
    1.2 國內(nèi)外研究現(xiàn)狀
    1.3 本文解決的主要問題
    1.4 本文的主要工作及組織結(jié)構(gòu)
        1.4.1 本文的主要工作
        1.4.2 本文的組織結(jié)構(gòu)
第2章 系統(tǒng)需求分析
    2.1 系統(tǒng)主要使用者及邊界
    2.2 系統(tǒng)的功能需求
        2.2.1 金三系統(tǒng)稅務(wù)數(shù)據(jù)同步至MAXCOMPUTE平臺(tái)需求分析
        2.2.2 MAXCOMPUTE平臺(tái)編碼問題處理需求分析
        2.2.3 歸集數(shù)據(jù)預(yù)處理的需求分析
        2.2.4 歸集數(shù)據(jù)相似度計(jì)算的需求分析
        2.2.5 歸集方式MapReduce實(shí)現(xiàn)的需求分析
        2.2.6 數(shù)據(jù)歸集結(jié)果篩選的需求分析
    2.3 系統(tǒng)性能需求
        2.3.1 云平臺(tái)運(yùn)行環(huán)境要求
        2.3.2 客戶端計(jì)算機(jī)的要求
第3章 系統(tǒng)的概要設(shè)計(jì)
    3.1 企業(yè)與自然人數(shù)據(jù)歸集的設(shè)計(jì)目標(biāo)與設(shè)計(jì)原則
        3.1.1 系統(tǒng)的設(shè)計(jì)原則
        3.1.2 系統(tǒng)的設(shè)計(jì)目標(biāo)
    3.2 系統(tǒng)技術(shù)架構(gòu)設(shè)計(jì)
    3.3 系統(tǒng)網(wǎng)絡(luò)架構(gòu)設(shè)計(jì)
    3.4 系統(tǒng)功能架構(gòu)設(shè)計(jì)
    3.5 系統(tǒng)安全架構(gòu)設(shè)計(jì)
第4章 系統(tǒng)的詳細(xì)設(shè)計(jì)
    4.1 核心業(yè)務(wù)的詳細(xì)設(shè)計(jì)
        4.1.1 相似度計(jì)算功能子系統(tǒng)詳細(xì)設(shè)計(jì)
        4.1.2 歸集的MR實(shí)現(xiàn)子系統(tǒng)詳細(xì)設(shè)計(jì)
    4.2 數(shù)據(jù)庫設(shè)計(jì)
第5章 系統(tǒng)的實(shí)現(xiàn)與測試
    5.1 系統(tǒng)實(shí)現(xiàn)
        5.1.1 數(shù)據(jù)采集層的實(shí)現(xiàn)
        5.1.2 數(shù)據(jù)處理層的實(shí)現(xiàn)
        5.1.3 數(shù)據(jù)歸集層的實(shí)現(xiàn)
    5.2 系統(tǒng)測試
        5.2.1 系統(tǒng)測試方案
        5.2.2 系統(tǒng)功能性測試
        5.2.3 系統(tǒng)性能測試
第6章 總結(jié)與展望
參考文獻(xiàn)
致謝
學(xué)位論文評閱及答辯情況表



本文編號：3738639