文件名称:l-weiwei-spiderman-master
介绍说明--下载内容均来自于网络,请自行研究使用
Spiderman 是一个基于微内核+插件式架构的网络蜘蛛,它的目标是通过简单的方法就能将复杂的目标网页信息抓取并解析为自己所需要的业务数据-Spiderman is based on a microkernel architecture+ plug-web spider, its goal is to be able to target the complex web of information to crawl and parse through a simple method for their business data needed
(系统自动生成,下载前可以参看下载内容)
下载文件列表
spiderman
.........\.gitignore
.........\README.md
.........\pom.xml
.........\spiderman-core
.........\..............\.djunitplugin
.........\..............\.gitignore
.........\..............\pom.xml
.........\..............\src
.........\..............\...\main
.........\..............\...\....\java
.........\..............\...\....\....\org
.........\..............\...\....\....\...\eweb4j
.........\..............\...\....\....\...\......\spiderman
.........\..............\...\....\....\...\......\.........\fetcher
.........\..............\...\....\....\...\......\.........\.......\FetchRequest.java
.........\..............\...\....\....\...\......\.........\.......\FetchResult.java
.........\..............\...\....\....\...\......\.........\.......\Page.java
.........\..............\...\....\....\...\......\.........\.......\PageFetcher.java
.........\..............\...\....\....\...\......\.........\.......\SpiderConfig.java
.........\..............\...\....\....\...\......\.........\.......\Status.java
.........\..............\...\....\....\...\......\.........\infra
.........\..............\...\....\....\...\......\.........\.....\DefaultLinkFinder.java
.........\..............\...\....\....\...\......\.........\.....\FrameLinkFinder.java
.........\..............\...\....\....\...\......\.........\.....\IframeLinkFinder.java
.........\..............\...\....\....\...\......\.........\.....\LinksFinder.java
.........\..............\...\....\....\...\......\.........\.....\SpiderIOC.java
.........\..............\...\....\....\...\......\.........\.....\SpiderIOCImpl.java
.........\..............\...\....\....\...\......\.........\.....\SpiderIOCs.java
.........\..............\...\....\....\...\......\.........\plugin
.........\..............\...\....\....\...\......\.........\......\BeginPoint.java
.........\..............\...\....\....\...\......\.........\......\DigPoint.java
.........\..............\...\....\....\...\......\.........\......\DoneException.java
.........\..............\...\....\....\...\......\.........\......\DupRemovalPoint.java
.........\..............\...\....\....\...\......\.........\......\EndPoint.java
.........\..............\...\....\....\...\......\.........\......\ExtensionPoint.java
.........\..............\...\....\....\...\......\.........\......\ExtensionPoints.java
.........\..............\...\....\....\...\......\.........\......\FetchPoint.java
.........\..............\...\....\....\...\......\.........\......\ParsePoint.java
.........\..............\...\....\....\...\......\.........\......\PluginManager.java
.........\..............\...\....\....\...\......\.........\......\Point.java
.........\..............\...\....\....\...\......\.........\......\PojoPoint.java
.........\..............\...\....\....\...\......\.........\......\TargetPoint.java
.........\..............\...\....\....\...\......\.........\......\TaskPollPoint.java
.........\..............\...\....\....\...\......\.........\......\TaskPushPoint.java
.........\..............\...\....\....\...\......\.........\......\TaskSortPoint.java
.........\..............\...\....\....\...\......\.........\spider
.........\..............\...\....\....\...\......\.........\......\Counter.java
.........\..............\...\....\....\...\......\.........\......\Settings.java
.........\..............\...\....\....\...\......\.........\......\Spider.java
.........\..............\...\....\....\...\......\.........\......\SpiderListener.java
.........\..............\...\....\....\...\......\.........\......\SpiderListenerAdaptor.java
.........\..............\...\....\....\...\......\.........\......\Spiderman.java
.........\..............\...\....\....\...\......\.........\task
.........\..............\...\....\....\...\......\.........\....\Task.java
.........\..............\...\....\....\...\......\.........\....\TaskDbServer.java
.........\..............\...\....\....\...\......\.........\....\TaskQueue.java
.........\..............\...\....\....\...\......\.........\url
.........\..............\...\....\....\...\......\....