Fetch the repository succeeded.
抓取微信公众号全部文章，采用AnyProxy+JS+Java实现
// 克隆项目到本地
git clone https://gitee.com/poet/WechatSpider.git
// 修改`WechatSpider/src/main/resources/application.properties`对的数据库地址
vim ~/WechatSpider/src/main/resources/application.properties
// 修改完成后打包
cd ~/WechatSpider && mvn clean install -Dmaven.test.skip=true
// 安装`AnyProxy`
npm install -g anyproxy
// 安装npm插件
cd ~/WechatSpider/src/main/resources && npm install
// 运行`AnyProxy`
anyproxy --intercept --silent true --rule ~/WechatSpider/src/main/resources/spider.js
// 运行项目
cd ~/WechatSpider
java -jar target/WechatSplider-1.0-SNAPSHOT.jar
查看历史信息自动下拉翻滚抓取所有文章列表数据
查看历史消息 数据全部自动下拉滚动抓取文章内容、点赞量，阅读量，评论数及内容 等 已能抓取到，已实现自动跳到下一个文章抓取
// 抓取js
vim ~/WechatSpider/src/main/resources/splider.js
// 规则配置
var config = {
host: 'http://127.0.0.1:8080', // 服务器地址配置
crawlHistory: true, // 是否采集列表历史数据
crawlArticle: true, // 是否采集文章数据
crawlComment: true, // 是否采集评论数据
crawlLikeReadNum: true, // 是否采集文章的阅读量及点赞量
autoNextScroll: true, // 是否自动下拉采取数据
autoNextPage: true, // 是否自动文章翻页
autoPostData: true, // 是否提交数据到服务器
m: 3000, // 自动下拉的时间间隔 m ~ n 秒之间
n: 5000,
jumpInterval: 10, // 文章页跳转的时间间隔
saveContentType: 'html',// 微信文章保存内容的形式: html/text
localImg: true // 公众号的图片返回本地图片
}
此处可能存在不合适展示的内容，页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容，可点击提交进行申诉，我们将尽快为您处理。