软件介绍：NwebCrawler是用C#写的一款多线程网络爬虫程序，它的实现原理是先输入一个或多个种子URL到队列中，然后从队列中提取URL（先进先出原则），分析此网页寻找相应标签并获得其href属性值，爬取有用的链接网页并存入网页库中，其中用爬取历史来记录爬过的网页，这样避免了重复爬取。提取URL存入队列中，进行下一轮爬取。所以NwebCrawler的搜索策略为广度优先搜索。采用广度优先策略有利于多个线程并行爬取而且抓取的封闭性很强。
功能介绍：可配置：线程数，等待时间，连接超时，允许MIME类型和优先级，下载文件夹。
统计信息：URL数量，总下载文件，总下载字节数，CPU利用率和可用内存。
Preferential crawler：用户可以设置优先级的MIME类型。
Robust: 10+ URL normalization rules, crawler trap avoiding rules.
- 兴华旅行社管理系统(旅游管理系统) V7.6 免费中文安装版
- 企业信息查询软件(企业信息搜索下载工具) v3.6.6.17 官方免费安装版
- 兴华客户管理系统 V7.6 官方免费安装版
- 兴华图书管理系统 V6.9 官方免费安装版
- 宏达手机售后计件管理系统 v1.0 官方免费安装版
- 宏达搅拌站运输开单管理系统 v1.0 官方免费安装版
- 宏达施工日志管理系统 v1.0 官方免费安装版
- Loaris Trojan Remover(清除特洛伊木马工具) v3.2.48.1813 官方多语言安装版
- Loaris Trojan Remover(清除特洛伊木马工具) v3.1.22 官方多语言绿色免费版
- 彩虹格式助手(万能文件格式转换器) v1.0 中文绿色版
- 奕盛汽车轮胎进销存管理系统 v1.1 官方安装版
- 安信车队管理系统单机版(安信车辆管理系统) v10.0 安装特别版
- 财务王普及版(财务记账软件) v4.9 官方安装版
- 宏达房产证管理系统(房产证管理查询打印工具) v1.0 官方免费安装版
- 宏达经营证信息管理系统 v1.0 官方免费安装版
- 宏达重点青少年群体信息管理系统 v1.0 官方免费安装版
- 宏达公车采购审批管理系统 v1.0 官方免费安装版
- 完美汽车维修4S店管理系统 v12 免费安装版
- 图像编辑软件 E-Paint v7.0a Revision 3 官方安装版
- 快解析服务器端 体验版 for windows V7.0.3 官方安装版
- MaxTo(屏幕分割软件) 注册版 v17.07 安装版 (附注册码)
- 掌柜儿会员营销管理系统 V2.3.3 官方安装版
- 智信合同管理软件网络版 V2.72 免费安装版
- 文件管理精灵 v4.0a 官方免费安装版
- 文件管理精灵 多用户版 v4.0a 官方免费安装版
- 狮子王v6.1正式版 附攻略及隐藏密码 魔兽对抗地图
- 魔神传v1.0.6正式版 附攻略及隐藏密码 魔兽防守地图
- 捍卫斯巴达15.8正式版 附隐藏英雄密码及攻略 魔兽防守地图
- 次元全民防守1.1.0正式版 附攻略及隐藏密码 魔兽防守地图
- 绝地林之争v1.27正式版 附攻略及隐藏密码 魔兽对抗地图
- 圣斗士之守护雅典娜1.9.0正式版 附攻略及隐藏密码 魔兽防守地图
- 弹丸传说Ⅱ神起魔灭1.0.3正式版 附攻略及隐藏英雄密码 魔兽防守地图
- 欧月次元录1.0.4正式版 附游戏攻略及隐藏英雄密码 魔兽防守地图
- 剑阁传说三幻神0.9正式版 附隐藏英雄密码及攻略 魔兽防守地图
- 冥月之巅1.0.5正式版 附游戏攻略及隐藏英雄密码 魔兽防守地图
- baptist
- capture the flag
- captivation
- the capture
- recaptured
- rapturousness
- my captain
- captained
- captain general
- captaining
- Android例子源码listview顶部锁定效果
- Android例子源码NFC读卡信息小例子源码
- 词林词典简繁互转程序源码 php版 v1.0
- 中药养生产品古色古香系列网站源码 asp版 v1.0.0
- Android仿网易title新闻标题和内容滑动效果源码
- Android实现点击换肤例子整体背景更换源码
- Android项目源码基于Retrotfit2.1+Material Design+ijkplayer聚合
- 冰清玉洁QQ空间秒赞秒评服务网站源码 2016 最新版
- 一键采集天涯论坛的任何帖子Discuz版 v1.0
- 雷速问卷调查系统(疫情上报系统)asp.net版 v7.10