Smart and Simple Web Crawler Web爬虫框架

授权协议：未知操作系统：跨平台开发语言：Java

Smart and Simple Web Crawler是一个Web爬虫框架。集成Lucene支持。该爬虫可以从单个链接或一个链接数组开始，提供两种遍历模式：最大迭代和最大深度。可以设置过滤器...