基于站點(diǎn)配額的均衡調(diào)度系統(tǒng)及方法技術(shù)方案

本發(fā)明專利技術(shù)公開(kāi)了一種基于站點(diǎn)配額的均衡調(diào)度系統(tǒng)，涉及互聯(lián)網(wǎng)技術(shù)領(lǐng)域，該系統(tǒng)包括：調(diào)度任務(wù)獲取模塊，適于獲取站點(diǎn)的域名隊(duì)列中的調(diào)度任務(wù)；調(diào)度模塊，適于對(duì)所述調(diào)度任務(wù)所指定的服務(wù)器按照預(yù)配置的一次可調(diào)度頁(yè)面數(shù)從所述服務(wù)器中下載相應(yīng)數(shù)量的頁(yè)面；其中，所述調(diào)度任務(wù)獲取模塊適于按預(yù)定的任務(wù)優(yōu)先級(jí)獲取站點(diǎn)的域名隊(duì)列中的調(diào)度任務(wù)。本發(fā)明專利技術(shù)還公開(kāi)了一種基于站點(diǎn)配額的均衡調(diào)度方法。根據(jù)本發(fā)明專利技術(shù)的基于站點(diǎn)配額的均衡調(diào)度系統(tǒng)將方法保證所有站點(diǎn)在任何情況下都能獲得一定的下載機(jī)會(huì)。同時(shí)，可以根據(jù)實(shí)際情況設(shè)置不同的配額限制，以兼顧效率與時(shí)效性，滿足不同搜索產(chǎn)品的需求。這也為全網(wǎng)搜索能與垂直搜索統(tǒng)一處理奠定了基礎(chǔ)。

【技術(shù)實(shí)現(xiàn)步驟摘要】

【技術(shù)保護(hù)點(diǎn)】
一種基于站點(diǎn)配額的均衡調(diào)度系統(tǒng)，包括：調(diào)度任務(wù)獲取模塊，適于獲取站點(diǎn)的域名隊(duì)列中的調(diào)度任務(wù)；調(diào)度模塊，適于對(duì)所述調(diào)度任務(wù)所指定的服務(wù)器按照預(yù)配置的一次可調(diào)度頁(yè)面數(shù)從所述服務(wù)器中下載相應(yīng)數(shù)量的頁(yè)面;其中，所述調(diào)度任務(wù)獲取模塊適于按預(yù)定的任務(wù)優(yōu)先級(jí)獲取站點(diǎn)的域名隊(duì)列中的調(diào)度任務(wù)。

【技術(shù)特征摘要】

【專利技術(shù)屬性】
技術(shù)研發(fā)人員：盧宏林，
申請(qǐng)(專利權(quán))人：北京奇虎科技有限公司，奇智軟件北京有限公司，
類型：發(fā)明
國(guó)別省市：