首页> 中文会议>第五届中国计算机支持的协同工作学术会议（C=CSCW2006）与第三届全国智能信息网络学术会议（IIN2006） >一种并行Crawler系统中的URL分配算法设计

一种并行Crawler系统中的URL分配算法设计

页面导航

摘要
著录项
相似文献
相关主题

摘要

本文研究了分布式体系结构下的并行Crawler采集模型,分析了各组件的功能及备Crawler在并行搜索时,为保证系统的负载均衡而应遵循的基本规则,并提出了一种基于散列(hash)的URL的调度算法.

著录项

来源
《第五届中国计算机支持的协同工作学术会议（C=CSCW2006）与第三届全国智能信息网络学术会议（IIN2006）》|2006年|117-119|共3页
会议地点福州
作者
万源; 万方; 王大震;
展开▼
作者单位

中国计算机学会;

中国电子学会;

中国通信学会;

福州大学;

展开▼
会议组织
正文语种
原文格式 PDF
中图分类算法理论;
关键词
并行计算; 分布式Crawler; 散列算法; URL分配;

相似文献

中文文献
外文文献
专利

1. 一种并行Crawler系统中的URL分配算法设计 [J] . 万源 ,万方 ,王大震 . 计算机工程与应用 . 2006,第A01期
2. 一种基于多核并行计算的目标分配算法设计 [J] . 丁晓刚 ,鲍广宇 ,胥秀峰 . 指挥控制与仿真 . 2014,第005期
3. 一种应用于Web服务器集群系统的URL分配算法 [J] . 杨兴良 ,华蓓 ,高鹰 . 系统仿真学报 . 2007,第6期
4. 一种集群计算系统中并行I/O文件存储分配策略 [J] . 曾碧卿 ,陈志刚 ,刘安丰 . 小型微型计算机系统 . 2005,第005期
5. 一种提高生产效率的单向双功能系统级封装系统——提高生产效率60以上的并行分配与键合系统 [J] . Manfred Glantschnig . 电子工业专用设备 . 2007,第003期
6. 一种求解H(curl)型椭圆问题的高效并行预条件子及并行实现 [C] . 冯春生 ,王俊仙 ,舒适 . 2011年全国高性能计算学术年会(HPC china2011) . 2011
7. 一种神经动力学优化系统的并行算法设计 [A] . 朱晓丹 . 2015

获取原文

客服邮箱：kefu@zhangqiaokeyan.com

京公网安备：11010802029741号 ICP备案号：京ICP备15016152号-6 六维联合信息科技 (北京) 有限公司©版权所有

客服微信
服务号