Node.js学习之路22——用cheerio做一个简单的网络爬虫

使用cheerio做一个简单的网络爬虫1.目标是完成网站标题信息的获取，并将获取到的信息输出到一个新文件中工具：cheerio，使用npm下载npminstallcheeriocheerioAPI使用方法基本相同asjQuery如果你熟练使用jQuery，cheerio会很快上手2.代码部分介绍：获取段错误页面的列表标题，对获取的标题列表进行编号，最后输出到pageTitle.txt文件中consthttps=require('https');constfs=require('fs');constcheerio=require('cheerio');consturl='https://segmentfault.com/';https.get(url,(res)=>{lethtml='';res.on('data',(data)=>{html+=data;});res.on('end',()=>{getPageTitle(html);});}).on('error',()=>{console.log('获取页面信息时出错');});functiongetPageTitle(html){const$=cheerio.load(html);让章节=$('.news__item-title');让数据=[];让索引=0；letfileName='pageTitle.txt';for(leti=0;i{if(err){console.log('fs文件系统创建新文件失败',err);}console.log(`获取的标题已成功放入新文件${fileName}`)})}