摘要：首先给出了主题网络爬虫的定叉和研究目标；然后系统分析了近年来国内外主题爬虫的研究方法和技术，包括基于文字内容的方法、基于超链分析的方法、基于分类器预测的方法以及其他主题爬行方法，并比较了各种方法优缺点；通过比较分析发现Best-First算法虽然有它的不足，但是它在几种算法中表现的性能最优。故以Best-First算法为基础，提出了BFO算法。对BFO算法进行性能评价，发现应用此算法搜索不但“召回率”和“收获率”有所提高，还能在一定程度上找到全局围内的最优解。最后对未来的研究方向进行了展望。