介绍 |
多多急速蜘蛛是一款多多软件出品的专业用于互联网文章及URL高效采集的产品。软件三大功能,网址域名采集、智能文章采集、网站文件探测。需要的朋友们可以下载试试吧!
它打破传统软件操作难、速度慢的局限,真正的做到一分钟上手、10分钟精通的地步,采用MongoDB数据库真正能实现分布式高速存储和提取。
主要特点: 分布式极速采集 任务分配至多个客户端,同时运行采集,效率倍增。 精准识别系统 精确采集站内站外链接和内容,不放过任何一条有效数据 敏锐的嗅探功能 可以探测指定的文件是否真实存在 全自动稳定运行 无需人工值守操作,自动挂机执行任务。 内容高度相关性 根据关键字导出相关的网址及文章 任意文件格式下载 探测的图片、压缩文件、视频等格式的文件均可下载。 智能提取引擎 全自动智能分析页面结构,傻瓜式操作,不写规则的准确度高达99%
|