廣告主數(shù)量多,訂單量大,訂單平均預(yù)算較小,并且訂單設(shè)置會(huì)頻繁變化。
系統(tǒng)架構(gòu)
愛(ài)奇藝效果廣告于 2016 年正式上線(xiàn)。起步伊始,業(yè)務(wù)邏輯簡(jiǎn)單,廣告和訂單數(shù)量較少,整體架構(gòu)相對(duì)比較簡(jiǎn)單。為了快速完成系統(tǒng)的搭建和上線(xiàn)應(yīng)用,復(fù)用了品牌廣告投放平臺(tái)的架構(gòu),并做了剪裁,系統(tǒng)架構(gòu)圖如下:
愛(ài)奇藝廣告平臺(tái)的架構(gòu)設(shè)計(jì)與演進(jìn)之路
接入層 包括 QLB(iQiYi Load Balance)、Nginx 前端機(jī),主要做流量的反向代理和整體的限流與降級(jí)功能。
流量分發(fā)層:包括策略服務(wù)和流量平臺(tái)服務(wù);策略服務(wù)支持公司層面的策略控制和日常的運(yùn)營(yíng)需求;流量平臺(tái)服務(wù)主要控制流量在各投放平臺(tái)上的分配和請(qǐng)求邏輯,投放平臺(tái)包括品牌廣告投放平臺(tái),效果廣告投放平臺(tái)和外部 DSP。
投放服務(wù):前文介紹的業(yè)務(wù)邏輯都包含在這里,由單一的模塊來(lái)實(shí)現(xiàn)。
日志收集:接收曝光點(diǎn)擊等日志,主要完成計(jì)費(fèi)、頻控和去重等業(yè)務(wù)邏輯,也是由單一的模塊來(lái)實(shí)現(xiàn)。
計(jì)費(fèi)系統(tǒng):利用 Redis 主從同步機(jī)制把訂單的實(shí)時(shí)消耗數(shù)據(jù)同步到投放服務(wù)。
頻次系統(tǒng):使用 Couchbase 機(jī)群來(lái)做用戶(hù)數(shù)據(jù)存儲(chǔ)。
數(shù)據(jù)同步層:這一層涉及的數(shù)據(jù)種類(lèi)很多,其中相對(duì)較重要的有兩種:業(yè)務(wù)數(shù)據(jù)和日志數(shù)據(jù),業(yè)務(wù)數(shù)據(jù)主要包括廣告的定向、排期和預(yù)算等內(nèi)容。
我們利用業(yè)務(wù)數(shù)據(jù)做了兩方面的優(yōu)化工作:
通過(guò)業(yè)務(wù)數(shù)據(jù)分發(fā)一些對(duì)時(shí)效性要求不高的數(shù)據(jù)給到投放服務(wù),避免了一些網(wǎng)絡(luò) IO;
在業(yè)務(wù)數(shù)據(jù)中進(jìn)行空間換時(shí)間的優(yōu)化,包括生成索引及一些投放服務(wù)所需要的數(shù)據(jù)的預(yù)計(jì)算,譬如提前計(jì)算計(jì)費(fèi)系統(tǒng)中的 key 值。
隨著業(yè)務(wù)增長(zhǎng),架構(gòu)也遇到了一些挑戰(zhàn)。
流量增長(zhǎng):系統(tǒng)上線(xiàn)之后很好地滿(mǎn)足了廣告主對(duì)轉(zhuǎn)化效果的要求,這個(gè)正向的效果激發(fā)了廣告主對(duì)流量的需求,為此產(chǎn)品和運(yùn)營(yíng)團(tuán)隊(duì)不斷地開(kāi)辟新的廣告位,同時(shí)愛(ài)奇藝的用戶(hù)數(shù)和流量也在持續(xù)增長(zhǎng),這些原因共同為效果廣告平臺(tái)帶來(lái)了巨大的流量。
廣告主數(shù)量和訂單數(shù)量增長(zhǎng):這個(gè)增長(zhǎng)包括兩方面,一方面與流量增長(zhǎng)相輔相成,相互促進(jìn);愛(ài)奇藝的優(yōu)質(zhì)流量和良好的轉(zhuǎn)化效果吸引了更多的廣告主;另一方面,由于商務(wù)政策上的原因,廣告主和訂單量在季度末會(huì)有階段性的增長(zhǎng)。
性能問(wèn)題:流量和訂單量的增長(zhǎng)使得系統(tǒng)的負(fù)載快速增加,因?yàn)橛唵问侨空倩氐,?dāng)訂單量增長(zhǎng)到一定數(shù)量之后,會(huì)使得長(zhǎng)尾請(qǐng)求增多,影響整體服務(wù)性能,無(wú)法通過(guò)水平擴(kuò)容解決。
超投問(wèn)題:由于曝光和點(diǎn)擊的延遲,以及投放計(jì)費(fèi)環(huán)路的延遲,不可避免的存在超投問(wèn)題,這也是廣告系統(tǒng)的固有問(wèn)題;品牌廣告是先簽訂合同,投放量達(dá)到即可按照合同收款,超出部分不會(huì)對(duì)廣告主收費(fèi),品牌廣告預(yù)定量都很大,超投比率較。缓推放茝V告不同,效果廣告實(shí)時(shí)扣費(fèi),如果沿用品牌思路的話(huà),超投部分會(huì)造成多余的扣費(fèi),而中小廣告主對(duì)此非常敏感,也會(huì)增加技術(shù)團(tuán)隊(duì)問(wèn)題分析排查工作,同時(shí)因?yàn)樾Ч麖V告的預(yù)算少,預(yù)算調(diào)整變化很快,使得超投比率要比品牌廣告大;針對(duì)效果廣告的超投問(wèn)題,技術(shù)團(tuán)隊(duì)要做的事情分成兩個(gè)層面,一是保證超投的部分不會(huì)計(jì)費(fèi),不給廣告主帶來(lái)?yè)p失,二是從根本上減少超投,即減少我們自己的收入損失;分別稱(chēng)為 超投不計(jì)費(fèi) 和 減少超投;
上篇:
下篇: