Distributed web crawler admin platform for spiders management regardless of languages and frameworks.

【辣鸡采集，采集世界上所有辣鸡数据 欢迎大家来采集】go全开源 最新算法采集 全智能采集 不用写规则 填url就可以 全自动化采集发布数据库 api 本地发布 导出 在线可视化操作界面

Grabant go语言爬虫框架，自定义javascript规则 Grabant是一个用go语言开发，用javascript语法书写规则的爬虫框架 规则开发和神箭手的爬虫规则类似，

曾经一度痴迷于看小说，小说给了我第二个世界，脱离于现实生活的世界。虽然因为看小说耽误了很多光阴，但是它也给我带来了很多的快乐，伴随主人公的开心而开心，伴随主人公的伤心而伤心。

Crawlab 是一个使用 Golang 开发的分布式爬虫管理平台，支持Python、NodeJS、Go、Java、PHP等多种编程语言以及多种爬虫框架

多平台聚合视频采集器，可根据自定义条件采集全网视频

surfer [high level concurrency downloader] 是一款Go语言编写的高并发爬虫下载器，拥有surf与phantom两种下载内核，支持固定UserAgent自动保存cookie与随机大量UserAgent禁用cookie两种模式，高度模拟浏览器行为，可实现模拟登录等功能。

妹图狩猎者是一款基于Golang开发的命令行爬虫工具，只需使用者有JQuery和JSON基础再根据example/*.json中的配置文件示例进行修改，即可精确对猎物进行捕获。

Go语言版本妹子图抓取爬虫，项目里用到很多go的语言特性。正所谓寄学习于娱乐，欣赏妹子的同时还可以学到东西，欢迎大家评鉴

A lightweight spider for Elasticsearch.

一款分布式爬虫平台，帮助你更好的管理和开发爬虫。 内置一套爬虫定义规则（模版），可使用模版快速定义爬虫，也可当作框架手动开发爬虫

使用golang实现，采集各种网站妹子图库和本地类似数据的程序，浏览器可访问采集器和相关数据，可部署到服务器或本地直接运行。

[爬虫框架 (golang)] An awesome Go concurrent Crawler(spider) framework. The crawler is flexible and modular. It can be expanded to a Individualized crawler easily or can only use the default crawl components.