1 Star 1 Fork 0

wuyue92tree / crwy

加入 Gitee
与超过 1200万 开发者一起发现、参与优秀开源项目,私有仓库也完全免费 :)
免费加入
克隆/下载
README.md 985 Bytes
一键复制 编辑 原始数据 按行查看 历史

Crwy

PyPI Version Download Status Build Status License Status

简介

Crwy是一个轻量级的爬虫抓取框架,参考Scrapy框架结构开发而来。该框架提供了实用的爬虫模板,旨在帮助大家快速实现爬虫任务,高效开发。并为scrapy使用者提供通用轮子^.^。新增了gevent,使爬虫异步执行,速度更快。

运行环境

  • Python3
  • Works on Linux, Mac OSX

安装

快速安装

pip install crwy

or 前往下载: https://pypi.python.org/pypi/Crwy/

TODO

  • 完善scrapy_plugs
  • 完善selenium_api
  • 兼容python3
Python
1
https://gitee.com/wuyue92tree/crwy.git
git@gitee.com:wuyue92tree/crwy.git
wuyue92tree
crwy
crwy
master

搜索帮助