文件名称:spider
- 所属分类：
- Internet/网络编程
- 资源属性：
- [C/C++] [源码]
- 上传时间：
- 2014-10-14
- 文件大小：
- 27kb
- 下载次数：
- 0次
- 提 供 者：
- mai****
- 相关连接：
- 无
- 下载说明：
- 别用迅雷下载，失败请重下，重下不扣分！
介绍说明－－下载内容均来自于网络，请自行研究使用
网络爬虫项目，实现网络爬虫爬虫子系统基于Linux平台，分为主控模块、下载模块、URL提取模块和持久化模块，其中用到了Linux多路复用技术（Epoll模型），socket，多线程、正则表达式、守护进程、Linux动态库等Linux系统开发技术。-Web crawler project, network subsystem is based on the Linux platform reptile reptiles, divided into the main control module, download the module, URL extraction module and persistence module, which uses the Linux multiplexing technology (Epoll model), socket, multi-threaded, regular expressions, daemon, Linux and other Linux systems dynamic library development technology.
(系统自动生成,下载前可以参看下载内容)
下载文件列表
spider项目代码\Makefile
..............\modules\domainlimit.cpp
..............\.......\headerfilter.cpp
..............\.......\Makefile
..............\.......\maxdepth.cpp
..............\.......\savehtml.cpp
..............\.......\saveimage.cpp
..............\spider.conf
..............\.rc\bloomfilter.cpp
..............\...\bloomfilter.h
..............\...\confparser.cpp
..............\...\confparser.h
..............\...\crc32.cpp
..............\...\crc32.h
..............\...\dso.cpp
..............\...\dso.h
..............\...\hashs.cpp
..............\...\hashs.h
..............\...\Makefile
..............\...\md5.cpp
..............\...\md5.h
..............\...\qstring.cpp
..............\...\qstring.h
..............\...\sha1.cpp
..............\...\sha1.h
..............\...\socket.cpp
..............\...\socket.h
..............\...\spider.cpp
..............\...\spider.h
..............\...\threads.cpp
..............\...\threads.h
..............\...\url.cpp
..............\...\url.h
..............\modules
..............\src
spider项目代码