Watch Star Fork

自风 / Spiderman2JavaApache-2.0

Sign up for free
Explore and code with more than 2 million developers,Free private repositories !:)
Sign up
二代蜘蛛侠,此版本完全重新开发,比上一代更加强大(性能,易用,架构,分布式,简洁,成熟)
Clone or download
README.md 454 Bytes

#Spiderman2

简单的说,这是一个网页爬虫工具,专门对网页内容进行抓取和解析
  • 性能
  • 架构简洁
  • 易用
  • 分布式
  • 插件
  • UI

要求:

  • Java8或以上

快速开始

dist目录下面有
- bootstrap.bat
- bootstrap.sh 

windows机器请执行bat, mac/linux机器请执行sh, 有任何问题留issue或评论

更多例子请参考

  • src/test/java/spiderman/*.java
  • src/main/resources/*-example.xml

Comments ( 142 )

You need to Sign in for post a comment

8_float_left_people 8_float_left_close