一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )

x-crawl 是一个灵活的 Node.js AI 辅助爬虫库。使爬虫工作变得更加高效、智能和便捷。

基于Java实现的轻依赖、简单的爬虫和IP代理池。

1. 51job网站爬取所有上海的python工作岗位信息，保存为csv文件。

（已跑路）百度贴吧吧务管理工具，自动扫描帖子并处理违规帖

1. 51job网站爬取所有上海指定关键字(如python，或java等)工作岗位信息。 2. 淘宝网美食信息收集。将获得所有美食的信息（包括的美食页面）存储在在MongoDB中，保存信息的样式： 美食图片url，价格， 成交量， 商品名称，店铺名称， 店铺所在位置。

Crawler for UIC News Calender

练习NLP，分析淘宝评论的项目

实验室整理药品的小程序

golang 爬虫集合

zy-crawler是一个基于Node.js的简单易用的爬虫工具，可以方便地获取指定网页的内容并进行自定义格式化处理

一个自动爬取天气的爬虫