中文会议： 华中科技大学学报(自然科学版)第31卷增刊

会议日期： 2003-10-27

会议地点： 郑州

主办单位： 中国教育和科研计算机网管理委员会

出版日期： 2003-10-01

出版地： 武汉

作　　者： ; ; ;

机构地区： 华南理工大学

出　　处： 《CERNET第十届学术年会》

摘　　要： 介绍了搜索引擎数据采集器的并行技术,分析了并行数据采集器的任务分配模式及其工作原理,讨论了任务粒度对动态分配效果的影响,并提出了动态分配模式下的任务分配策略,最后介绍了SunONEGridEngine的任务调度机制,并利用SunONEGridEngine对所提出的动态任务分配策略进行了实现.

关 键 词： 搜索引擎 数据采集器 并行技术 任务分配策略

分 类 号： [TP393.092]

领　　域： [自动化与计算机技术] [自动化与计算机技术]