關(guān)系型數(shù)據(jù)庫系統(tǒng)具有大量用于I/O優(yōu)化、并行計(jì)算、查詢計(jì)劃、內(nèi)存分配、日志等方面的配置參數(shù)。普通用戶甚至數(shù)據(jù)庫專家都很難將其進(jìn)行調(diào)優(yōu)以獲得良好的性能。雖然有很多可用于數(shù)據(jù)庫調(diào)優(yōu)的操作指南,但指南不可以一直為數(shù)據(jù)庫提供優(yōu)越的性能。盡管可以憑借指南來在特定數(shù)據(jù)庫使用場景下發(fā)揮出不錯(cuò)的性能表現(xiàn),但它們并非適用于所有場景。很多機(jī)構(gòu)不得不雇傭昂貴的人力來對數(shù)據(jù)庫系統(tǒng)進(jìn)行調(diào)優(yōu)。同時(shí)隨著信息技術(shù)的高速發(fā)展,后臺系統(tǒng)中多系統(tǒng)相互依賴和影響的情況越來越突出。以往針對性能、可用性和可靠性的研究主要面向單一系統(tǒng),單節(jié)點(diǎn)或多節(jié)點(diǎn),相對忽視了多系統(tǒng)情況的整體優(yōu)化目標(biāo)。本研究的目的是在單一系統(tǒng)調(diào)優(yōu)的基礎(chǔ)上,提出能有效擴(kuò)展到多系統(tǒng)的調(diào)優(yōu)方法,并開發(fā)一套調(diào)優(yōu)工具。本文貢獻(xiàn)分為如下三個(gè)方面:首先構(gòu)建調(diào)優(yōu)模型,將基于關(guān)系型數(shù)據(jù)庫PostgreSQL和分布式計(jì)算框架Spark共同構(gòu)建一個(gè)存儲與計(jì)算相分離并且資源彈性配置的數(shù)據(jù)倉庫DuoSQL納入調(diào)優(yōu)模型并將其設(shè)置為本文的調(diào)優(yōu)對象�；贒uoSQL中PostgreSQL、Spark工作中相互影響的事實(shí),將二者參數(shù)統(tǒng)一納入面向多系統(tǒng)的調(diào)優(yōu)模型,整體考慮系統(tǒng)參數(shù)對面向多系統(tǒng)數(shù)據(jù)庫...

【文章頁數(shù)】：63 頁

【學(xué)位級別】：碩士

【文章目錄】：
摘要
abstract
第1章 引言
    1.1 研究背景與意義
    1.2 國內(nèi)外研究現(xiàn)狀
        1.2.1 參數(shù)配置調(diào)優(yōu)
        1.2.2 其他維度調(diào)優(yōu)
    1.3 研究內(nèi)容及主要貢獻(xiàn)
    1.4 論文的組織結(jié)構(gòu)
第2章 參數(shù)調(diào)優(yōu)相關(guān)背景與工作
    2.1 數(shù)據(jù)庫參數(shù)調(diào)優(yōu)
    2.2 Spark參數(shù)調(diào)優(yōu)
    2.3 技術(shù)算法概述
        2.3.1 相似度計(jì)算
        2.3.2 回歸分析
    2.4 本章小結(jié)
第3章 調(diào)優(yōu)對象與模型
    3.1 DuoSQL概述
        3.1.1 DuoSQL系統(tǒng)架構(gòu)設(shè)計(jì)
        3.1.2 分布式存儲模塊
        3.1.3 中間層通訊模塊
        3.1.4 分布式計(jì)算模塊
        3.1.5 DuoSQL執(zhí)行流程
    3.2 調(diào)優(yōu)性能模型
    3.3 調(diào)優(yōu)模型所面臨的挑戰(zhàn)
    3.4 本章小結(jié)
第4章 調(diào)優(yōu)工具與性能評價(jià)
    4.1 DuoTune概述
        4.1.1 DuoTune架構(gòu)設(shè)計(jì)與實(shí)現(xiàn)
        4.1.2 DuoTune執(zhí)行流程
    4.2 機(jī)器學(xué)習(xí)調(diào)優(yōu)方法
        4.2.1 數(shù)據(jù)預(yù)處理
        4.2.2 自動(dòng)調(diào)優(yōu)
        4.2.3 協(xié)同參數(shù)調(diào)優(yōu)
    4.3 實(shí)驗(yàn)設(shè)計(jì)與結(jié)果分析
        4.3.1 實(shí)驗(yàn)環(huán)境介紹
        4.3.2 實(shí)驗(yàn)數(shù)據(jù)介紹
        4.3.3 實(shí)驗(yàn)結(jié)果分析
    4.4 本章小結(jié)
第5章 總結(jié)與展望
    5.1 本文總結(jié)
    5.2 本文展望
參考文獻(xiàn)
致謝
作者簡介及攻讀學(xué)位期間發(fā)表的學(xué)術(shù)論文與研究成果



本文編號：3754033