【摘要】：中國(guó)移動(dòng)作為中國(guó)最大的通信運(yùn)營(yíng)商,在幾十年的運(yùn)營(yíng)過(guò)程中,積累了蘊(yùn)含巨大價(jià)值的海量數(shù)據(jù)。中國(guó)移動(dòng)集團(tuán)公司為支撐省公司及地市子公司業(yè)務(wù)發(fā)展,委托華為公司為其構(gòu)建大數(shù)據(jù)PaaS云平臺(tái)。省公司、子公司及第三方廠商可入駐中國(guó)移動(dòng)PaaS云平臺(tái),并在平臺(tái)中申請(qǐng)資源,定制工具的開(kāi)發(fā)。然而,由于平臺(tái)租戶資源隔離,數(shù)據(jù)無(wú)法在租戶間流轉(zhuǎn)。且存在不同租戶的數(shù)據(jù)源異構(gòu),數(shù)據(jù)系統(tǒng)之間數(shù)據(jù)分散、冗余,數(shù)據(jù)挖掘應(yīng)用獲取跨領(lǐng)域數(shù)據(jù)困難等問(wèn)題。而直接訪問(wèn)各個(gè)數(shù)據(jù)源工作量大,且不易協(xié)調(diào)。為此,中國(guó)移動(dòng)建設(shè)其數(shù)據(jù)共享系統(tǒng),為租戶進(jìn)行數(shù)據(jù)挖掘準(zhǔn)備基礎(chǔ)條件,成為發(fā)揮數(shù)據(jù)價(jià)值所必須先期解決的問(wèn)題。本文通過(guò)對(duì)中國(guó)移動(dòng)數(shù)據(jù)現(xiàn)狀的分析,提出了構(gòu)建中國(guó)移動(dòng)數(shù)據(jù)共享系統(tǒng)面臨的兩個(gè)主要難題:(1)異構(gòu)數(shù)據(jù)源集成難題。(2)數(shù)據(jù)共享難題。并給出了解決問(wèn)題的方法。通過(guò)設(shè)計(jì)數(shù)據(jù)訪問(wèn)接口規(guī)范,對(duì)接異構(gòu)數(shù)據(jù)源,實(shí)現(xiàn)異構(gòu)數(shù)據(jù)源集成。通過(guò)發(fā)布數(shù)據(jù)、訂閱數(shù)據(jù)的方式,實(shí)現(xiàn)數(shù)據(jù)共享。在數(shù)據(jù)共享的同時(shí),實(shí)現(xiàn)低耦合、高可擴(kuò)展性。論文闡述了項(xiàng)目背景,簡(jiǎn)述了相關(guān)研究與應(yīng)用現(xiàn)狀,綜述了包括Docker、Kubernetes、Spring Boot、RBAC、Apache Shiro等相關(guān)技術(shù)。論文簡(jiǎn)述了系統(tǒng)總體規(guī)劃,界定了系統(tǒng)邊界,詳細(xì)分析了系統(tǒng)需求,提煉出數(shù)據(jù)源接入、數(shù)據(jù)源服務(wù)管理、數(shù)據(jù)產(chǎn)品管理、訂購(gòu)管理、權(quán)限管理五大功能。在此基礎(chǔ)上,闡述了系統(tǒng)設(shè)計(jì)思想及工作原理,通過(guò)系統(tǒng)架構(gòu)結(jié)構(gòu)設(shè)計(jì)、功能組成設(shè)計(jì)、系統(tǒng)部署設(shè)計(jì)、系統(tǒng)數(shù)據(jù)庫(kù)設(shè)計(jì)等方式方法,對(duì)系統(tǒng)進(jìn)行了概要設(shè)計(jì)。詳細(xì)設(shè)計(jì)了數(shù)據(jù)源接入、數(shù)據(jù)源服務(wù)管理、數(shù)據(jù)產(chǎn)品管理、訂購(gòu)管理、權(quán)限管理五個(gè)功能模塊,給出具體實(shí)現(xiàn)細(xì)節(jié),并進(jìn)行了系統(tǒng)測(cè)試。本系統(tǒng)已投入實(shí)際使用,較好地實(shí)現(xiàn)了中國(guó)移動(dòng)多個(gè)異構(gòu)數(shù)據(jù)源、多種模式的數(shù)據(jù)共享,為挖掘數(shù)據(jù)價(jià)值準(zhǔn)備了基礎(chǔ)條件,經(jīng)用戶實(shí)際使用,反饋良好。
【學(xué)位授予單位】：南京大學(xué)
【學(xué)位級(jí)別】：碩士
【學(xué)位授予年份】：2019
【分類號(hào)】：F626;TP311.52
【圖文】：

南京大學(xué)碩士論文邐第三章系統(tǒng)分析與總體設(shè)計(jì)逡逑數(shù)據(jù)市場(chǎng)運(yùn)營(yíng)等能力，用戶通過(guò)系統(tǒng)的門(mén)戶界面，查看數(shù)據(jù)源的元數(shù)據(jù)信息，將逡逑數(shù)據(jù)以數(shù)據(jù)產(chǎn)品的形式發(fā)布在平臺(tái)上供其他租戶訂閱，同時(shí)平臺(tái)租戶也可以訂閱逡逑其他租戶發(fā)布的數(shù)據(jù)產(chǎn)品。發(fā)布的數(shù)據(jù)產(chǎn)品被訂閱成功后，系統(tǒng)將通過(guò)返回?cái)?shù)據(jù)逡逑使用憑證供用戶連接數(shù)據(jù)源，或進(jìn)行數(shù)據(jù)推送完成數(shù)據(jù)共享。其中數(shù)據(jù)推送需要逡逑使用ＰａａＳ平臺(tái)的數(shù)據(jù)交換中間件的能力，包含定時(shí)任務(wù)調(diào)度引擎和數(shù)據(jù)遷移引逡逑擎組件，該部分設(shè)計(jì)與實(shí)現(xiàn)不在本系統(tǒng)設(shè)計(jì)和實(shí)現(xiàn)范圍內(nèi)。系統(tǒng)用戶來(lái)源于中國(guó)逡逑移動(dòng)ＰａａＳ云平臺(tái)用戶，ＰａａＳ平臺(tái)提供了用戶管理能力，本系統(tǒng)在ＰａａＳ平臺(tái)逡逑的用戶管理基礎(chǔ)上，對(duì)系統(tǒng)內(nèi)部角色進(jìn)一步劃分，對(duì)用戶訪問(wèn)系統(tǒng)的操作權(quán)限進(jìn)逡逑行校驗(yàn)。逡逑一邋一－一一一－ ：－－－－－－：－？－—－

憑證信息由數(shù)據(jù)源服務(wù)保存，用戶發(fā)起獲取憑證信息請(qǐng)求時(shí)，數(shù)據(jù)源服務(wù)查詢憑逡逑證信息返回給用戶。逡逑圖３．２為數(shù)據(jù)源接入用例圖。數(shù)據(jù)源服務(wù)針對(duì)具體的數(shù)據(jù)源，實(shí)現(xiàn)數(shù)據(jù)訪問(wèn)逡逑接口規(guī)范并對(duì)外開(kāi)放數(shù)據(jù)訪問(wèn)接口，以滿足數(shù)據(jù)訪問(wèn)要求。數(shù)據(jù)源服務(wù)在系統(tǒng)中逡逑起到了數(shù)據(jù)源適配的作用。根據(jù)上述功能需求的描述，數(shù)據(jù)源服務(wù)需要提供測(cè)試逡逑數(shù)據(jù)源連接、獲取數(shù)據(jù)模型、創(chuàng)建數(shù)據(jù)產(chǎn)品、刪除數(shù)據(jù)產(chǎn)品、訂購(gòu)數(shù)據(jù)產(chǎn)品、退逡逑訂數(shù)據(jù)產(chǎn)品、下載憑證的能力。逡逑數(shù)據(jù)源服務(wù)逡逑＃?一．《包含〉〉一逡逑（＾＾￣刪除視圖逡逑—＼，二＝．＿一＜＾＂周期調(diào)度＾）逡逑數(shù)據(jù)產(chǎn)包邐＾邐邐＿＿’逡逑數(shù)據(jù)＾５＾－－－《包含時(shí)推送逡逑＼邋＼逡逑＼邐＼邐記錄憑證信息ｊ逡逑數(shù)據(jù)包卜逡逑＼邐￣、、、、〈包含》、、逡逑＼邐、一＇＞、、數(shù)據(jù)推送逡逑圖３．２數(shù)據(jù)源接入用例圖逡逑本節(jié)將主要對(duì)創(chuàng)建數(shù)據(jù)產(chǎn)品、刪除數(shù)據(jù)產(chǎn)品、訂購(gòu)數(shù)據(jù)產(chǎn)品和退訂數(shù)據(jù)產(chǎn)品逡逑進(jìn)行用例描述。創(chuàng)建數(shù)據(jù)產(chǎn)品需要根據(jù)發(fā)布模式對(duì)數(shù)據(jù)源進(jìn)行視圖操作或配置周逡逑１５逡逑

需要注冊(cè)不同的數(shù)據(jù)源服務(wù)以完成和不同數(shù)據(jù)源的對(duì)接。因此在數(shù)據(jù)市場(chǎng)中，需逡逑要對(duì)數(shù)據(jù)源服務(wù)進(jìn)行管理，提供數(shù)據(jù)源服務(wù)草稿管理、發(fā)布數(shù)據(jù)源服務(wù)和下架數(shù)逡逑據(jù)源服務(wù)等功能。圖３．３為數(shù)據(jù)源服務(wù)管理用例圖。逡逑數(shù)據(jù)源服務(wù)管理逡逑〈，含Ｊ）逡逑邐＜＾邋＜＜包含》逡逑草稿管理〈包白＞〉＇＾查詢逡逑ｎ邐包含》0逡逑Ｐ￣Ｙ＾邐〈＜，＞＞邐Ｌ邋｜逡逑ＵＪ＼＾＾邐測(cè)試連接，——數(shù)據(jù)源逡逑生產(chǎn)者服務(wù)逡逑＼邐數(shù)據(jù)市場(chǎng)逡逑廣￣＜邐管理員逡逑ｋ下架數(shù)據(jù)源服務(wù)邋＞）－－＜〈包含＞＞－＞ｑ下架審批＾逡逑圖３．３數(shù)據(jù)源服務(wù)管理用例圖逡逑數(shù)據(jù)市場(chǎng)中可創(chuàng)建數(shù)據(jù)源服務(wù)草稿，配置數(shù)據(jù)源服務(wù)的信息，并提供數(shù)據(jù)源逡逑服務(wù)草稿的添加、刪除、查詢、修改和測(cè)試連接能力，連接成功的數(shù)據(jù)源服務(wù)草逡逑稿可申請(qǐng)發(fā)布，數(shù)據(jù)源服務(wù)擁有者可對(duì)其發(fā)布的數(shù)據(jù)源服務(wù)進(jìn)行下架。通過(guò)在數(shù)逡逑據(jù)市場(chǎng)模塊中注冊(cè)數(shù)據(jù)源服務(wù)，系統(tǒng)可以靈活的對(duì)接數(shù)據(jù)源，且不需要關(guān)注數(shù)據(jù)逡逑源的具體細(xì)節(jié)。數(shù)據(jù)源服務(wù)草稿管理主要對(duì)數(shù)據(jù)源服務(wù)的訪問(wèn)ＵＲＬ、訪問(wèn)鑒權(quán)逡逑信息進(jìn)行管理。此處以添加數(shù)據(jù)源服務(wù)草稿以及發(fā)布數(shù)據(jù)源服務(wù)為例

【相似文獻(xiàn)】

相關(guān)期刊論文 前10條

1 黃恒君;陶然;傅德印;;單位名錄庫(kù)更新:互聯(lián)網(wǎng)大數(shù)據(jù)源及其數(shù)據(jù)質(zhì)量評(píng)估[J];統(tǒng)計(jì)研究;2017年01期

2 鄧松;萬(wàn)常選;劉喜平;廖國(guó)瓊;;基于用戶反饋的深網(wǎng)數(shù)據(jù)源選擇[J];小型微型計(jì)算機(jī)系統(tǒng);2012年11期

3 胡志明;王仲奇;吳建軍;;基于本體的單一產(chǎn)品數(shù)據(jù)源組織研究[J];中國(guó)制造業(yè)信息化;2011年01期

4 王靜君;;高職圖書(shū)館數(shù)字參考咨詢數(shù)據(jù)源建設(shè)研究[J];當(dāng)代圖書(shū)館;2011年01期

5 蔡璇;田忠和;;多數(shù)據(jù)源查詢的幾種優(yōu)化方法[J];計(jì)算機(jī)與數(shù)字工程;2006年07期

6 張?jiān)佬?姜艷,林田,姜繼春;基于C/S的FMS異構(gòu)多數(shù)據(jù)源集成方法[J];南京理工大學(xué)學(xué)報(bào)(自然科學(xué)版);2002年06期

7 萬(wàn)春,劉麗莉;數(shù)據(jù)源的自動(dòng)生成[J];計(jì)算機(jī)時(shí)代;2001年09期

8 潘雪軍;用Registerdatabase創(chuàng)建可訪問(wèn)ODBC的數(shù)據(jù)源[J];電腦學(xué)習(xí);2000年05期

9 卜梓琴;葉建位;龐戈;陸海琛;;數(shù)據(jù)源總線化布局解決方案[J];化工自動(dòng)化及儀表;2015年03期

10 孫宏旭;邢薇;馬立和;;動(dòng)態(tài)多數(shù)據(jù)源的研究與實(shí)現(xiàn)[J];電腦學(xué)習(xí);2010年03期

相關(guān)會(huì)議論文 前10條

1 張春海;劉群;李華;;基于概率統(tǒng)計(jì)及查詢質(zhì)量的數(shù)據(jù)源選擇策略[A];第二十一屆中國(guó)數(shù)據(jù)庫(kù)學(xué)術(shù)會(huì)議論文集（技術(shù)報(bào)告篇）[C];2004年

2 陶然;;基于互聯(lián)網(wǎng)數(shù)據(jù)源的名錄庫(kù)更新維護(hù)問(wèn)題研究[A];第十屆海峽兩岸統(tǒng)計(jì)與概率研討會(huì)摘要集[C];2016年

3 黃維篁;李國(guó)良;馮建華;;高效的數(shù)據(jù)源選擇方式[A];NDBC2010第27屆中國(guó)數(shù)據(jù)庫(kù)學(xué)術(shù)會(huì)議論文集A輯二[C];2010年

4 李國(guó)棟;顧強(qiáng);郭浩;王汝英;;基于C／S和B／S結(jié)構(gòu)的多數(shù)據(jù)源電能質(zhì)量數(shù)字化管理平臺(tái)[A];2006電力系統(tǒng)自動(dòng)化學(xué)術(shù)交流研討大會(huì)論文集[C];2006年

5 蔡t

本文編號(hào)：2798691