node 爬取资源放在返回的数据中-音乐

比眉伴天荒 2021-07-24 14:47 238阅读 0赞

[爬取的音乐网站][Link 1]

页面源代码无数据,数据在返回的资源中
    
    在返回数据中,找到所要资源,在Headers中找到请求的地址
    
    爬取音乐步骤:
    获取音乐src等信息->按流的方式请求src地址,再流写入文件

代码示例:

const axios=require('axios')
    const fs=require('fs')
    const path=require('path')
    
    //获取单个页面数据
    async function getPage(num){ 
    	let httpUrl='http://www.app-echo.com/api/recommend/sound-day?page='+num;
    	let res= await axios.get(httpUrl)
    	//循环音乐列表,获取音乐数据
    	res.data.list.forEach(function(item,index){ 
    		let title=item.sound.name;
    		let mp3Url=item.sound.source;
    		let filename=path.parse(mp3Url).name;
    
    		let info=`${ title},${ mp3Url},${ filename}`
    		fs.writeFile('C:/Users/10853/Desktop/爬虫music.txt',info,{ flag:'a'},function(err){ 
    			console.log('ok');
    		})
    		console.log('歌名:'+filename);
    		console.log('歌曲:'+mp3Url);
    		download(mp3Url,filename);
    	})
    }
    
    //下载音乐资源,流的形式
    async function download(url,filename){ 
    	let res=await axios.get(url,{ responseType:'stream'})
    	let extname=path.extname(url);
    	let ws=fs.createWriteStream('C:/Users/10853/Desktop/爬虫music/'+filename+'.mp3');
    	res.data.pipe(ws)
    	res.data.on('close',function(){ 
    		ws.end();
    	})
    }
    
    getPage(2);

[Link 1]: http://www.app-echo.com/#/

发表评论取消回复

表情：

评论列表（有 0 条评论，238人围观）

还没有评论，来说两句吧...

相关阅读

相关 Python爬取QQ音乐的代码

以下是一个简单的 Python 爬取 QQ 音乐的代码示例： import requests from bs4 import BeautifulSoup

港控/mmm°/ 2024年03月25日 13:17/ 0 赞/ 109 阅读

相关 selenium-java 实现QQ音乐自动登录获取cookie数据，爬取qq音乐会员资源和网易云音乐会员资源。实现任意网站的会员资源爬取

java+selenium-java 实现qq自动登录功能并获取cookie -------------------- 下面是网易云音乐的qq自动功能演示，cooki

青旅半醒/ 2023年01月07日 01:22/ 0 赞/ 271 阅读

相关 Python 爬取百度音乐

-------------------- Python：3.5 欢迎加入学习交流QQ群：657341423 -------------------- 获取歌曲信息

曾经终败给现在/ 2022年06月08日 00:18/ 0 赞/ 330 阅读

相关 QQ音乐爬取（python实现）

简述在网页版上听音乐，然后，捕捉到了网络上的包。分析了一下，做了这个东西。下面的爬虫，会爬取到汪峰的《当我想你的时候》这首歌爬虫练练手哈哈命名的格

布满荆棘的人生/ 2022年05月20日 03:46/ 0 赞/ 386 阅读

相关爬虫爬取抖音热门音乐

![70][] 爬取抖音的热门音乐 ![70 1][] 详细代码在下面响应体内容工作流默认情况下，当你进行网络请求后，响应体会立即被下载。你可以通过 `

川长思鸟来/ 2022年05月08日 03:50/ 0 赞/ 410 阅读

相关酷狗音乐全站爬取

更新时间：2019年6月26日效果图歌手表 ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_s

秒速五厘米/ 2022年03月16日 13:50/ 0 赞/ 452 阅读

相关网易云音乐评论爬取

前言我是个很喜欢听歌的人，手机里面下了几百首歌，而且还会每个月还会增加几首，因为我觉得听歌能让我活得更有趣。平常的我，喜欢听一些流行歌曲或者被翻唱突然又火起来的老歌、无

短命女/ 2022年03月16日 13:50/ 0 赞/ 453 阅读

相关 scrapy爬取网页数据是返回[ ],或者说爬取不到数据的排查方法

可能的原因： 1，ip封锁爬取 2，xpath路径不对 3，xpath路径出现font,tbody标签 4，xpath路径不够明确 5，robot协议

亦凉/ 2021年12月12日 23:13/ 2 赞/ 2156 阅读

相关 node puppeteer爬虫，爬取微博热搜数据

> 确保自己熟练使用async与await以及分析dom结构 `npm i puppeteer` 在node引用 const puppeteer = requ

刺骨的言语ヽ痛彻心扉/ 2021年10月01日 11:20/ 0 赞/ 460 阅读

相关 node 爬取资源放在返回的数据中-音乐

[爬取的音乐网站][Link 1] 页面源代码无数据,数据在返回的资源中在返回数据中,找到所要资源,在Headers中找到请求的地址

比眉伴天荒/ 2021年07月24日 14:47/ 0 赞/ 239 阅读