nodeJs抓取网页
运行下面代码
var fs = require('fs'); var jquery = require('jquery'); var url = require('url'); var data = { 0 : 'http://www.baidu.com/s?wd=nodeJS%20doc&pn=', 1 : '&tn=myie2&ie=utf-8&ch=3' //baidu_search_on_page1 }; var page = 10; do{ page--; jquery.get(data[0]+page+data[1],function(html){ (function(){ success(html,page) })(); }); }while(page); function bind(fn,context){ return function(){ fn.call(context) }; }; function success(html,page){ //fs.appendFile() //console.log(html,page) fs.appendFile(page+'.html',html,function(err){ if(err)throw err; console.log('done') }) }
天道酬勤
本文作者:方方和圆圆
本文链接:https://www.cnblogs.com/diligenceday/p/3483848.html
版权声明:本作品采用知识共享署名-非商业性使用-禁止演绎 2.5 中国大陆许可协议进行许可。
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步