資料介紹
針對(duì)并行爬蟲(chóng)系統(tǒng)在多任務(wù)并發(fā)執(zhí)行時(shí)所遇到的模塊間負(fù)載平衡問(wèn)題,提出流水線負(fù)載平衡模型(PLB),將不同的任務(wù)抽象為獨(dú)立模塊而達(dá)到各模塊的處理速度相等,采用多線程的方式實(shí)現(xiàn)基于PLB的并行爬蟲(chóng),根據(jù)線程的休眠和緩沖區(qū)的變化對(duì)線程數(shù)量進(jìn)行動(dòng)態(tài)調(diào)整以實(shí)現(xiàn)PLB。實(shí)驗(yàn)結(jié)果表明該方法具有良好的運(yùn)行效率和穩(wěn)定性。
關(guān)鍵詞:爬蟲(chóng);并行;流水線;負(fù)載平衡
關(guān)鍵詞:爬蟲(chóng);并行;流水線;負(fù)載平衡
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 負(fù)載平衡監(jiān)控系統(tǒng)設(shè)計(jì)源碼分享 3次下載
- 嵌入式_流水線
- 12bit200MSPS時(shí)間交織流水線ADC研究與設(shè)計(jì)
- EE-383:基于MDMA的雙SHARC+并行流水線音頻直通
- 使用FPGA設(shè)計(jì)流水線的資料和程序詳細(xì)概述 3次下載
- 移植到全新的PIC24F流水線ADC和Σ-ΔADC免費(fèi)下載.pdf
- 負(fù)載平衡云存儲(chǔ)算法 0次下載
- 電能計(jì)量設(shè)備自動(dòng)檢定流水線調(diào)度優(yōu)化研究_方彥軍 1次下載
- 裝配流水線控制系統(tǒng)設(shè)計(jì) 14次下載
- 電鍍流水線的PLC控制 36次下載
- 流水線ADC的行為級(jí)仿真 21次下載
- 基于流水線結(jié)構(gòu)的多級(jí)數(shù)字混沌編碼方案 32次下載
- 基于流水線的并行FIR濾波器設(shè)計(jì) 63次下載
- 周期精確的流水線仿真模型
- MPI并行程序設(shè)計(jì)的負(fù)載平衡實(shí)現(xiàn)方法
- 新版本Jenkins推薦使用聲明式流水線 604次閱讀
- Google GPipe為代表的流水線并行范式 891次閱讀
- 以Gpipe作為流水線并行的范例進(jìn)行介紹 932次閱讀
- 如何通過(guò)Vivado Synthesis中的URAM矩陣自動(dòng)流水線化來(lái)實(shí)現(xiàn)最佳時(shí)序性能 1436次閱讀
- 一個(gè)典型的流水線設(shè)計(jì) 1095次閱讀
- 報(bào)文解析規(guī)則定義 流水線劃分提取方案 811次閱讀
- CPU流水線優(yōu)缺點(diǎn) 3912次閱讀
- 一文詳細(xì)了解流水線設(shè)計(jì) 4610次閱讀
- FPGA中流水線的原因和方式 5710次閱讀
- 通過(guò)并行流水線結(jié)構(gòu)實(shí)現(xiàn)直接型FIR濾波器的系統(tǒng)設(shè)計(jì)方案 3321次閱讀
- 流水線設(shè)計(jì)的思想介紹與設(shè)計(jì)實(shí)例 7896次閱讀
- OYES 200系列PLC在瓶裝流水線中的應(yīng)用 1215次閱讀
- 淺談GPU的渲染流水線實(shí)現(xiàn) 3759次閱讀
- 一文讀懂處理器流水線 2.2w次閱讀
- 新型流水線實(shí)現(xiàn)高速低功耗ADC的原理及方法 4427次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費(fèi)下載
- 0.00 MB | 1490次下載 | 免費(fèi)
- 2單片機(jī)典型實(shí)例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實(shí)例詳細(xì)資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識(shí)別和講解說(shuō)明
- 4.28 MB | 18次下載 | 4 積分
- 5開(kāi)關(guān)電源原理及各功能電路詳解
- 0.38 MB | 11次下載 | 免費(fèi)
- 6100W短波放大電路圖
- 0.05 MB | 4次下載 | 3 積分
- 7基于AT89C2051/4051單片機(jī)編程器的實(shí)驗(yàn)
- 0.11 MB | 4次下載 | 免費(fèi)
- 8基于單片機(jī)的紅外風(fēng)扇遙控
- 0.23 MB | 3次下載 | 免費(fèi)
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費(fèi)
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費(fèi)
- 4LabView 8.0 專業(yè)版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費(fèi)
- 5555集成電路應(yīng)用800例(新編版)
- 0.00 MB | 33562次下載 | 免費(fèi)
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費(fèi)
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費(fèi)
- 8開(kāi)關(guān)電源設(shè)計(jì)實(shí)例指南
- 未知 | 21539次下載 | 免費(fèi)
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費(fèi)
- 2protel99se軟件下載(可英文版轉(zhuǎn)中文版)
- 78.1 MB | 537791次下載 | 免費(fèi)
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費(fèi)
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費(fèi)
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費(fèi)
- 6電路仿真軟件multisim 10.0免費(fèi)下載
- 340992 | 191183次下載 | 免費(fèi)
- 7十天學(xué)會(huì)AVR單片機(jī)與C語(yǔ)言視頻教程 下載
- 158M | 183277次下載 | 免費(fèi)
- 8proe5.0野火版下載(中文版免費(fèi)下載)
- 未知 | 138039次下載 | 免費(fèi)
評(píng)論
查看更多