文件名称:webspider
介绍说明--下载内容均来自于网络,请自行研究使用
用java写的一个网络蜘蛛,他可以从指定的URL开始解析抓取网页上的URL,对于抓取到的URL自动分成站内外URL,并可以设置抓取的深度。-Using java to write a Web Spider, he can from the specified URL to start crawling on the page to resolve URL, the URL for the crawler to automatically divided into stations inside and outside the URL, and can set the crawling depth.
(系统自动生成,下载前可以参看下载内容)
下载文件列表
webspider
.........\源文件
.........\......\WebCrawler.java
.........\源文件
.........\......\WebCrawler.java