浅谈Node.js爬虫之网页请求模块-创新互联

本文介绍了Node.js爬虫之网页请求模块,分享给大家,具体如下:

创新互联是一家专业提供阿合奇企业网站建设,专注与成都做网站、成都网站建设、H5响应式网站、小程序制作等业务。10年已为阿合奇众多企业、政府机构等服务。创新互联专业网络公司优惠进行中。

注:如您下载最新的nodegrass版本,由于部分方法已经更新,本文的例子已经不再适应,详细请查看开源地址中的例子。

一、为什么我要写这样一个模块?

源于笔者想使用Node.js写一个爬虫,虽然Node.js官方API提供的请求远程资源的方法已经非常简便,具体参考

http://nodejs.org/api/http.html 其中对于Http的请求提供了,http.get(options, callback)和http.request(options, callback)两个方法,

看方法便知,get方法用于get方式的请求,而request方法提供更多的参数,例如其它请求方式,请求主机的端口等等。对于Https的请求于Http类似。一个最简单的例子:

var https = require('https');
https.get('https://encrypted.google.com/', function(res) {
 console.log("statusCode: ", res.statusCode);
 console.log("headers: ", res.headers);

 res.on('data', function(d) {
  process.stdout.write(d);
 });

}).on('error', function(e) {
 console.error(e);
});

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


文章标题:浅谈Node.js爬虫之网页请求模块-创新互联
转载源于:http://bzwzjz.com/article/ccesci.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 成都网站建设 品牌网站建设 成都网站制作 成都网站制作 网站建设 成都营销网站建设 网站建设方案 企业网站建设 商城网站建设 网站设计公司 成都网站建设流程 成都网站建设 营销型网站建设 成都网站设计 网站制作公司 成都网站建设 成都网站制作 成都网站设计 高端品牌网站建设 成都响应式网站建设公司 手机网站制作 高端网站设计推广