用Node.js爬虫下载音乐

作者：SamAgnew消费资讯。但是，如果数据不是以专用RESTAPI的形式存在，那么通常很难以编程方式访问这些数据。使用jsdom等Node.js工具，您可以直接从网络上抓取和解析这些数据，并将其用于您自己的项目和应用程序。让我们以使用MIDI音乐数据训练神经网络来生成经典的任天堂音乐为例。我们需要一组旧任天堂游戏的MIDI音乐。可以使用jsdom从视频游戏音乐档案中抓取此数据。入门和依赖设置在继续之前，您需要确保您拥有最新版本的Node.js和npm。切换到您希望此代码所在的目录，并在终端中运行以下命令来创建项目的包：npminit--yes--yes该参数可以忽略任何您必须填写或跳过的提示。现在我们的程序有一个package.json以便通过发出HTTP请求从网页中获取数据，我们将使用Got库，对于HTML解析，我们将使用Cheerio。在终端中运行以下命令来安装这些库：npminstallgot@10.4.0jsdom@16.2.2jsdom是大量web标准的纯JavaScript实现，是许多JavaScript开发人员熟悉的工具。让我们深入了解如何使用它。检索数据以与jsdom一起使用首先让我们编写一些代码以从网页中获取HTML，然后看看如何开始解析。以下代码将向我们想要的网页发送GET请求，并使用该网页的HTML创建一个jsdom对象，我们将其命名为dom：constfs=require('fs');constgot=require('got');constjsdom=require("jsdom");const{JSDOM}=jsdom;constvgmUrl='https://www.vgmusic.com/music/console/nintendo/nes';got(vgmUrl).then(response=>{constdom=newJSDOM(response.body);console.log(dom.window.document.querySelector('title').textContent);}).catch(err=>{console.log(err);});将字符串传递给构造函数JSDOM时，将返回一个JSDOM对象，您可以从中访问许多可用的属性，例如window。正如这段代码所示，您可以使用查询选择器。例如querySelector('title').textContent将获取页面上