网站首页  软件下载  游戏下载  源码下载  词典软件  教程攻略

请输入您要查询的源码:

 

源码 Gecco网络爬虫 v1.3.0
图标
分类 源码下载-软件开发-java源码-网络爬虫 java源码
语言 简体中文
大小 179KB
软件类型 国产软件
发布时间
用户评分 3
备案号
官方网址
软件授权 开源软件
操作系统 C
厂商
下载
介绍

 Gecco 是一款用 java 语言开发的轻量化的易用的网络爬虫。Gecco 整合了 jsoup、httpclient、fastjson、spring、htmlunit、redission 等优秀框架,让您只需要配置一些 jquery 风格的选择器就能很快的写出一个爬虫。Gecco 框架有优秀的可扩展性,框架基于开闭原则进行设计,对修改关闭、对扩展开放。同时 Gecco 基于十分开放的 MIT 开源协议,无论你是使用者还是希望共同完善 Gecco 的开发者,欢迎 pull request。

主要特征:

简单易用,使用 jquery 风格的选择器抽取元素

支持爬取规则的动态配置和加载

支持页面中的异步 ajax 请求

支持页面中的 javascript 变量抽取

利用 Redis 实现分布式抓取,参考gecco-redis

支持结合 Spring 开发业务逻辑,参考gecco-spring

支持 htmlunit 扩展,参考gecco-htmlunit

支持插件扩展机制

支持下载时 UserAgent 随机选取

支持下载代理服务器随机选取

截图
随便看

 

网盟提供免费网站源码下载(asp源码,php源码,.net源码),源码动态,使用教程和源码评测;为站长推介有价值的源码,为开发者宣传源码作品。

 

Copyright © 2002-2024 cnnbu.com All Rights Reserved
更新时间:2025/4/6 0:59:14