网站首页  软件下载  游戏下载  源码下载  词典软件  教程攻略

请输入您要查询的源码:

 

源码 WebMagic (Java爬虫框架) v0.7.5
图标
分类 源码下载-软件开发-java源码-WebMagic下载 java源码
语言 简体中文
大小 6.89MB
软件类型 国产软件
发布时间
用户评分 3
备案号
官方网址
软件授权 免费软件
操作系统 Java
厂商
下载
介绍

webmagic是一个开源的Java垂直爬虫框架,目标是简化爬虫的开发流程,让开发者专注于逻辑功能的开发。webmagic的核心非常简单,但是覆盖爬虫的整个流程,也是很好的学习爬虫开发的材料。

webmagic的主要特色:

1、完全模块化的设计,强大的可扩展性。

2、核心简单但是涵盖爬虫的全部流程,灵活而强大,也是学习爬虫入门的好材料。

3、提供丰富的抽取页面API。

4、无配置,但是可通过POJO+注解形式实现一个爬虫。

5、支持多线程。

6、支持分布式。

7、支持爬取js动态渲染的页面。

8、无框架依赖,可以灵活的嵌入到项目中去。

截图
随便看

 

网盟提供免费网站源码下载(asp源码,php源码,.net源码),源码动态,使用教程和源码评测;为站长推介有价值的源码,为开发者宣传源码作品。

 

Copyright © 2002-2024 cnnbu.com All Rights Reserved
更新时间:2025/4/5 22:38:39