代码拉取完成,页面将自动刷新
这是个基于request和async模块的简单爬虫,参数和request参数相同
软件架构说明
paramList是一个request的请求参数的数组
参数 | 是否必须 | 示例 | 备注 |
---|---|---|---|
paramList | 是 | ['http://www.baidu.com'] | 请求参数的数组或url数组 |
limit | 否 | 1 | 设置最大线程默认是1 |
timer | 否 | 1000 | 设置每个请求间隔的时间默认是0 |
dealcallback | 是 | dealcallback(err,body,data,callback) | 单个数据的处理函数 |
callback | 是 | callback(result) | 处理最后的结果数组 |
此处可能存在不合适展示的内容,页面不予展示。您可通过相关编辑功能自查并修改。
如您确认内容无涉及 不当用语 / 纯广告导流 / 暴力 / 低俗色情 / 侵权 / 盗版 / 虚假 / 无价值内容或违法国家有关法律法规的内容,可点击提交进行申诉,我们将尽快为您处理。
1. 开源生态
2. 协作、人、软件
3. 评估模型