本文關鍵詞：DSP廣告審核業(yè)務系統(tǒng)的設計與實現(xiàn)

  更多相關文章： 廣告數(shù)據審核 Lucene全文索引 DDB分布式數(shù)據庫 性能優(yōu)化 XSS防御 J2EE

【摘要】：DSP (Demand-Side Platform,需求方平臺)是互聯(lián)網廣告中一套新興的體系,在這個體系中,各個參與者會經常涉及到流量和物料的交互,其中廣告數(shù)據質量的保證是整個業(yè)務中非常重要的一環(huán)。審核系統(tǒng)的實現(xiàn)提供了廣告數(shù)據屬性的標注入口,并通過自動審核和人工審核相結合的方式,在保證廣告數(shù)據質量的同時大大節(jié)省了人力成本。除此之外,系統(tǒng)通過提供多維度的查詢接口,讓公司內部人員能夠實時的查看所有的業(yè)務數(shù)據。 公司內部已經存在一版審核系統(tǒng),專為傳統(tǒng)的聯(lián)盟廣告設計,可以支持的數(shù)據量有限。所以新的審核系統(tǒng)需要提供DSP業(yè)務特有的功能和更大的數(shù)據吞吐量。本文根據現(xiàn)有的業(yè)務狀況對系統(tǒng)進行了詳細的需求分析,包括功能點的劃分和非功能性需求分析；在此基礎上,從系統(tǒng)架構,系統(tǒng)拓撲和系統(tǒng)構建三個角度進行了概要設計,詳細說明了系統(tǒng)本身的三層架構和對其他服務的依賴情況以及線上的服務器部署情況。然后針對各個功能模塊進行詳細設計,對其中重要的模塊做了流程說明和類設計,并明確了各個功能點在實現(xiàn)中方法的調用關系�？紤]到DSP業(yè)務引入造成了巨大的數(shù)據增長,針對這塊業(yè)務,系統(tǒng)從MVC三個層次的性能優(yōu)化,以及對于常見的XSS(又叫CSS攻擊,Cross Site Script)網絡攻擊的防御措施。為了提供更好的靈活性和可維護性,采用了商業(yè)系統(tǒng)傳統(tǒng)的B/S架構,使用J2EE開發(fā)。數(shù)據庫使用了基于MySQL的DDB分布式數(shù)據庫,前端使用了Velocity模板減少了前端的開發(fā)量。為了提高查詢效率,系統(tǒng)大量的使用了游標,緩存和集合等方式做性能優(yōu)化,對于一些大數(shù)據功能使用Lucene全文索引。最終完成了整個審核系統(tǒng)的開發(fā),為后續(xù)的投放等系統(tǒng)提供了重要的數(shù)據支持。本人在項目中完成了從需求分析到設計開發(fā)再到部署上線的全過程,其中主要工作包括審核任務分配、任務查詢,廣告信息查詢,人工審核、自動審核,審核情況統(tǒng)計和審核系統(tǒng)管理各個模塊的功能設計、開發(fā),以及性能優(yōu)化和安全防御的部分。 從DSP業(yè)務引進至今,審核系統(tǒng)采用敏捷開發(fā)的方式,已經開發(fā)并上線了八個版本,審核系統(tǒng)的所有功能及優(yōu)化策略均已經上線。在這八個版本中除了功能的增加,性能方面也逐步的提高,最新版本目前已經穩(wěn)定運行了近兩個月。從數(shù)據角度來看,通過審核系統(tǒng)這個入口,DSP廣告數(shù)據已經全部標注了品類和風險類型等屬性,從根本上解決了高仿、虛假廣告數(shù)據可能會帶來的問題。
【關鍵詞】：廣告數(shù)據審核 Lucene全文索引 DDB分布式數(shù)據庫 性能優(yōu)化 XSS防御 J2EE
【學位授予單位】：北京交通大學
【學位級別】：碩士
【學位授予年份】：2014
【分類號】：TP311.52
【目錄】：

• 致謝5-6
• 摘要6-7
• ABSTRACT7-9
• 序言9-12
• 1 引言12-18
• 1.1 項目背景12-14
• 1.2 項目來源14-15
• 1.3 研究目標和內容15-16
• 1.4 論文組織結構16-18
• 2 關鍵技術介紹18-24
• 2.1 MVC18
• 2.2 Spring框架18-19
• 2.3 Lucene全文索引19-21
• 2.4 DDB分布式數(shù)據庫21-23
• 2.5 本章小結23-24
• 3 審核系統(tǒng)需求分析24-42
• 3.1 系統(tǒng)背景業(yè)務的總體分析24-25
• 3.2 系統(tǒng)用例分析25-26
• 3.3 審核系統(tǒng)功能需求26-38
• 3.3.1 我的審核工作模塊28-30
• 3.3.2 廣告信息查詢模塊30-33
• 3.3.3 廣告信息審核模塊33-35
• 3.3.4 自動任務模塊35-37
• 3.3.5 審核情況統(tǒng)計模塊37-38
• 3.3.6 審核系統(tǒng)管理模塊38
• 3.4 審核系統(tǒng)非功能需求38-39
• 3.5 可行性分析39-40
• 3.6 本章小結40-42
• 4 審核系統(tǒng)設計及實現(xiàn)42-78
• 4.1 審核系統(tǒng)概要設計42-45
• 4.2 審核系統(tǒng)詳細設計和實現(xiàn)45-68
• 4.2.1 我的審核工作模塊45-47
• 4.2.2 自動任務模塊47-53
• 4.2.3 廣告信息審核模塊53-60
• 4.2.4 廣告信息查詢模塊60-64
• 4.2.5 審核統(tǒng)計模塊64-65
• 4.2.6 審核系統(tǒng)管理模塊65-68
• 4.3 審核系統(tǒng)數(shù)據庫設計68-72
• 4.3.1 廣告業(yè)務庫相關表68-70
• 4.3.2 審核庫相關表70-71
• 4.3.3 行業(yè)庫相關表71-72
• 4.4 審核系統(tǒng)性能優(yōu)化設計72-76
• 4.4.1 前端優(yōu)化72-73
• 4.4.2 系統(tǒng)中間邏輯層優(yōu)化73-75
• 4.4.3 數(shù)據存儲層優(yōu)化75-76
• 4.5 審核系統(tǒng)Web安全設計76-77
• 4.6 本章小結77-78
• 5 審核系統(tǒng)質量保證78-82
• 5.1 代碼版本控制78-79
• 5.2 代碼評審79-80
• 5.3 功能和性能測試80-81
• 5.4 本章小結81-82
• 6 結論82-84
• 參考文獻84-86
• 附錄A86-92
• 附錄B92-96
• 作者簡歷及攻讀碩士學位期間取得的研究成果96-98
• 學位論文數(shù)據集98

【參考文獻】

中國期刊全文數(shù)據庫 前6條

1 唐文忠;許曉曼;;J2EE信息系統(tǒng)數(shù)據訪問層性能監(jiān)測與優(yōu)化設計[J];北京航空航天大學學報;2007年10期

2 康長安;陳玉紅;;基于前端的Web性能優(yōu)化[J];電腦知識與技術;2011年16期

3 陸榮幸,郁洲,阮永良,王志強;J2EE平臺上MVC設計模式的研究與實現(xiàn)[J];計算機應用研究;2003年03期

4 曹強;;基于Lucene的Web站點站內全文檢索系統(tǒng)的設計與實現(xiàn)[J];圖書情報工作;2007年09期

5 張大衛(wèi);解永剛;楊亞彪;何紅玲;;XSS攻擊分析與防御機制研究[J];數(shù)字技術與應用;2012年12期

6 江浩然;;易傳媒DAS 通往精準目標受眾營銷之門的鑰匙[J];市場觀察;2011年08期

，

本文編號：1047704