网页搜集系统的动态可配置性的研究与实现

• 作者: 刘玉莲 周春楠 张强
• 来源期刊: 信息技术
• 学科: 工学
• 关键词: 万维网 搜索引擎 可扩展Web信息搜集 动态可配置性 负载平衡
• 年，卷（期）: 2004,（7）
• 所属期刊栏目: 研究与探讨
• 页码范围: 73-75
• 页数: 3页
• 分类号: TP393.03
• 字数: 2772字
• 语种: 中文
• DOI: 10.3969/j.issn.1009-2552.2004.07.027

摘要

Web是动态海量信息的载体,研究的主要目标是要得到一种高性能、高可靠,支持海量网页信息搜集、分析与处理的系统结构.本文主要针对并行网页搜集系统的节点可能出现临时故障的问题,提出了一种系统动态可配置方案.该方案的基础是一种从网页URL到搜集节点的两阶段映射关系,它保证了当配置(节点数)变化时系统能经过一个短暂、安全的过渡过程达到一个新的稳态,从而保证了系统的动态可配置性.