【python爬虫】酷狗音乐爬取

石小疯  论坛元老 | 2025-3-9 12:01:35 | 显示全部楼层 | 阅读模式
打印 上一主题 下一主题
楼主

主题 1024|帖子 1024|积分 3072

本次爬取的音乐仅有1分钟试听，完整音乐需要下载客户端
  一、 初步分析

登陆酷狗音乐后随机选取一首歌，在哀求里发现一段mp3文件，复制网址，确实是我们需要的url。

复制音频的名字，搜索找到发起哀求的网址，发现是在songinfo里

查看参数和哀求头，刷新一次，查看是否有哪些参数是变化的。可以发现图中两次哀求的这些参数都差别，接下来就寻找这些参数的天生方式，参数clienttime为时间戳，那么就只需要找到signature的天生方式就可以了：

二、分析参数signature

1. 分析过程

搜索参数signature，并在可能天生的位置打上断点，然后刷新网页

网页断在了此处，可以望见参数signature跟函数d与数组s有关。
   补充：如果s的长度不为13，需要放行一下，点击这个按钮

  

查看函数d的定义

发现函数内部没有wordsToBytes函数和函数i的相关定义，那么打下断点，查看具体函数的位置

得到wordsToBytes函数的具体定义

得到i函数的具体定义

i函数里没有r.stringToBytes(t)的相关定义，继续打下断点

找到r.stringToBytes(t)的相关定义

接着查看s的内容：在console里查看s的内容，发现s的值跟之前哀求的参数类似。而且下标为0和下标为12的值跟u的值雷同

往上查找u的定义，发现u的值是固定的

2. 代码实现

那么就开始实现天生signature的代码（以下为JavaScript代码）
  1. function bytesToWords(t) {
  2.     for (var n = [], r = 0, e = 0; r < t.length; r++,
  3.         e += 8)
  4.         n[e >>> 5] |= t[r] << 24 - e % 32;
  5.     return n
  6. }
  8. function rotl(t, n) {
  9.     return t << n | t >>> 32 - n
  10. }
  12. function endian(t) {
  13.     if (t.constructor == Number)
  14.         return 16711935 & rotl(t, 8) | 4278255360 & rotl(t, 24);
  15.     for (var n = 0; n < t.length; n++)
  16.         t[n] = endian(t[n]);
  17.     return t
  18. }
  20. function i(t, c) {
  21.     var l = {
  22.         utf8: {
  23.             stringToBytes: function (t) {
  24.                 return l.bin.stringToBytes(unescape(encodeURIComponent(t)))
  25.             },
  26.             bytesToString: function (t) {
  27.                 return decodeURIComponent(escape(l.bin.bytesToString(t)))
  28.             }
  29.         },
  30.         bin: {
  31.             stringToBytes: function (t) {
  32.                 for (var n = [], r = 0; r < t.length; r++)
  33.                     n.push(255 & t.charCodeAt(r));
  34.                 return n
  35.             },
  36.             bytesToString: function (t) {
  37.                 for (var n = [], r = 0; r < t.length; r++)
  38.                     n.push(String.fromCharCode(t[r]));
  39.                 return n.join("")
  40.             }
  41.         }
  42.     };
  43.     i._ff = function (t, n, r, e, o, i, c) {
  44.         var s = t + (n & r | ~n & e) + (o >>> 0) + c;
  45.         return (s << i | s >>> 32 - i) + n
  46.     },
  47.         i._gg = function (t, n, r, e, o, i, c) {
  48.             var s = t + (n & e | r & ~e) + (o >>> 0) + c;
  49.             return (s << i | s >>> 32 - i) + n
  50.         },
  51.         i._hh = function (t, n, r, e, o, i, c) {
  52.             var s = t + (n ^ r ^ e) + (o >>> 0) + c;
  53.             return (s << i | s >>> 32 - i) + n
  54.         },
  55.         i._ii = function (t, n, r, e, o, i, c) {
  56.             var s = t + (r ^ (n | ~e)) + (o >>> 0) + c;
  57.             return (s << i | s >>> 32 - i) + n
  58.         };
  59.     t.constructor == String ? t = c && "binary" === c.encoding ? o.stringToBytes(t) : l.utf8.stringToBytes(t) : e(t) ? t = Array.prototype.slice.call(t, 0) : Array.isArray(t) || (t = t.toString());
  60.     for (var s = bytesToWords(t), a = 8 * t.length, l = 1732584193, u = -271733879, f = -1732584194, d = 271733878, g = 0; g < s.length; g++)
  61.         s[g] = 16711935 & (s[g] << 8 | s[g] >>> 24) | 4278255360 & (s[g] << 24 | s[g] >>> 8);
  62.     s[a >>> 5] |= 128 << a % 32,
  63.         s[14 + (a + 64 >>> 9 << 4)] = a;
  64.     for (var b = i._ff, p = i._gg, h = i._hh, m = i._ii, g = 0; g < s.length; g += 16) {
  65.         var y = l
  66.             , j = u
  67.             , S = f
  68.             , v = d;
  69.         u = m(u = m(u = m(u = m(u = h(u = h(u = h(u = h(u = p(u = p(u = p(u = p(u = b(u = b(u = b(u = b(u, f = b(f, d = b(d, l = b(l, u, f, d, s[g + 0], 7, -680876936), u, f, s[g + 1], 12, -389564586), l, u, s[g + 2], 17, 606105819), d, l, s[g + 3], 22, -1044525330), f = b(f, d = b(d, l = b(l, u, f, d, s[g + 4], 7, -176418897), u, f, s[g + 5], 12, 1200080426), l, u, s[g + 6], 17, -1473231341), d, l, s[g + 7], 22, -45705983), f = b(f, d = b(d, l = b(l, u, f, d, s[g + 8], 7, 1770035416), u, f, s[g + 9], 12, -1958414417), l, u, s[g + 10], 17, -42063), d, l, s[g + 11], 22, -1990404162), f = b(f, d = b(d, l = b(l, u, f, d, s[g + 12], 7, 1804603682), u, f, s[g + 13], 12, -40341101), l, u, s[g + 14], 17, -1502002290), d, l, s[g + 15], 22, 1236535329), f = p(f, d = p(d, l = p(l, u, f, d, s[g + 1], 5, -165796510), u, f, s[g + 6], 9, -1069501632), l, u, s[g + 11], 14, 643717713), d, l, s[g + 0], 20, -373897302), f = p(f, d = p(d, l = p(l, u, f, d, s[g + 5], 5, -701558691), u, f, s[g + 10], 9, 38016083), l, u, s[g + 15], 14, -660478335), d, l, s[g + 4], 20, -405537848), f = p(f, d = p(d, l = p(l, u, f, d, s[g + 9], 5, 568446438), u, f, s[g + 14], 9, -1019803690), l, u, s[g + 3], 14, -187363961), d, l, s[g + 8], 20, 1163531501), f = p(f, d = p(d, l = p(l, u, f, d, s[g + 13], 5, -1444681467), u, f, s[g + 2], 9, -51403784), l, u, s[g + 7], 14, 1735328473), d, l, s[g + 12], 20, -1926607734), f = h(f, d = h(d, l = h(l, u, f, d, s[g + 5], 4, -378558), u, f, s[g + 8], 11, -2022574463), l, u, s[g + 11], 16, 1839030562), d, l, s[g + 14], 23, -35309556), f = h(f, d = h(d, l = h(l, u, f, d, s[g + 1], 4, -1530992060), u, f, s[g + 4], 11, 1272893353), l, u, s[g + 7], 16, -155497632), d, l, s[g + 10], 23, -1094730640), f = h(f, d = h(d, l = h(l, u, f, d, s[g + 13], 4, 681279174), u, f, s[g + 0], 11, -358537222), l, u, s[g + 3], 16, -722521979), d, l, s[g + 6], 23, 76029189), f = h(f, d = h(d, l = h(l, u, f, d, s[g + 9], 4, -640364487), u, f, s[g + 12], 11, -421815835), l, u, s[g + 15], 16, 530742520), d, l, s[g + 2], 23, -995338651), f = m(f, d = m(d, l = m(l, u, f, d, s[g + 0], 6, -198630844), u, f, s[g + 7], 10, 1126891415), l, u, s[g + 14], 15, -1416354905), d, l, s[g + 5], 21, -57434055), f = m(f, d = m(d, l = m(l, u, f, d, s[g + 12], 6, 1700485571), u, f, s[g + 3], 10, -1894986606), l, u, s[g + 10], 15, -1051523), d, l, s[g + 1], 21, -2054922799), f = m(f, d = m(d, l = m(l, u, f, d, s[g + 8], 6, 1873313359), u, f, s[g + 15], 10, -30611744), l, u, s[g + 6], 15, -1560198380), d, l, s[g + 13], 21, 1309151649), f = m(f, d = m(d, l = m(l, u, f, d, s[g + 4], 6, -145523070), u, f, s[g + 11], 10, -1120210379), l, u, s[g + 2], 15, 718787259), d, l, s[g + 9], 21, -343485551),
  70.             l = l + y >>> 0,
  71.             u = u + j >>> 0,
  72.             f = f + S >>> 0,
  73.             d = d + v >>> 0
  74.     }
  75.     return endian([l, u, f, d])
  76. }
  78. function wordsToBytes(t) {
  79.     for (var n = [], r = 0; r < 32 * t.length; r += 8)
  80.         n.push(t[r >>> 5] >>> 24 - r % 32 & 255);
  81.     return n
  82. }
  84. function bytesToHex(t) {
  85.     for (var n = [], r = 0; r < t.length; r++)
  86.         n.push((t[r] >>> 4).toString(16)),
  87.             n.push((15 & t[r]).toString(16));
  88.     return n.join("")
  89. }
  91. function d(t, r) {
  92.     if (void 0 === t || null === t)
  93.         throw new Error("Illegal argument " + t);
  94.     var e = wordsToBytes(i(t, r));
  95.     return r && r.asBytes ? e : r && r.asString ? o.bytesToString(e) : bytesToHex(e)
  96. }
  98. function getsianature() {
  99.     var s = [
  100.         "NVPh5oo715z5DIWAeQlhMDsWXXQV4hwt",
  101.         "appid=1014",
  102.         "clienttime=1741411989613",
  103.         "clientver=20000",
  104.         "dfid=3Mm61k0WDxvm033Epz2worRG",
  105.         "encode_album_audio_id=j410q60",
  106.         "mid=70789bebe63fb74c52e4a911853f5450",
  107.         "platid=4",
  108.         "srcappid=2919",
  109.         "token=cbfe2e174e4b97fd6aca35682cdba3d2b431c4ed95e2dbd1779e37a7975b672c",
  110.         "userid=2307902397",
  111.         "uuid=70789bebe63fb74c52e4a911853f5450",
  112.         "NVPh5oo715z5DIWAeQlhMDsWXXQV4hwt"
  113.     ];
  114.     return d(s.join(""))
  115. }
  117. console.log(getsianature());
复制代码
经过一系列调试，可以发现天生的结果与欣赏器天生的值一样，那么天生signature的代码就没问题了。

将一些会变的值改为变量，可以看到参数s的值里只有clienttime的值是会变的，因此修改上述代码中getsianature函数，将参数s的值放在python代码中，getsianature函数改完如下图所示：
  1. function getsianature(s) {
  2.     return d(s.join(""))
  3. }
复制代码
三、获取多首歌

1. 分析过程

点击差别的歌，可以发现每首歌的参数encode_album_audio_id都差别，因此需要获取encode_album_audio_id

搜索歌名，找到歌曲的id

接着查看哀求参数，同样有一个signature参数，刷新多次网页发现signature参数会变化，那么重复之前分析signature的步骤

打下断点，查看停止的位置，参数s有所变化

打印s，查看s的内容，除此之外没有变化，那么就相沿先前的代码

2. 代码实现

完整代码如下，留意这里调用了JavaScript代码，需要安装PyExecJS模块：pip install PyExecJS -i https://pypi.tuna.tsinghua.edu.cn/simple。
本代码中JavaScript文件名为kugou.js，JavaScript代码在参数signature的分析中有写到，以下为python代码：
  1. import json
  2. import re
  3. import time
  4. import requests
  5. import execjs
  8. class kugou_music:
  9.     def __init__(self):
  10.         self.headers = {
  11.             'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/133.0.0.0 Safari/537.36',
  12.             'Referer': 'https://www.kugou.com/',
  13.         }
  15.     def get_signature(self, s):
  16.         with open("kugou.js", "r", encoding="utf-8") as f:
  17.             js = f.read()
  18.         ctx = execjs.compile(js)
  19.         signature = ctx.call("getsianature", s)
  20.         return signature
  22.     def get_one_song_url(self, audio_id):
  23.         timestamp = str(int(time.time() * 1000))
  24.         s = [
  25.             "NVPh5oo715z5DIWAeQlhMDsWXXQV4hwt",
  26.             "appid=1014",
  27.             f"clienttime={timestamp}",
  28.             "clientver=20000",
  29.             "dfid=3Mm61k0WDxvm033Epz2worRG",
  30.             f"encode_album_audio_id={audio_id}",
  31.             "mid=70789bebe63fb74c52e4a911853f5450",
  32.             "platid=4",
  33.             "srcappid=2919",
  34.             "token=cbfe2e174e4b97fd6aca35682cdba3d2b431c4ed95e2dbd1779e37a7975b672c",
  35.             "userid=2307902397",
  36.             "uuid=70789bebe63fb74c52e4a911853f5450",
  37.             "NVPh5oo715z5DIWAeQlhMDsWXXQV4hwt"
  38.         ]
  39.         signature = self.get_signature(s)
  40.         params = {
  41.             'srcappid': '2919',
  42.             'clientver': '20000',
  43.             'clienttime': timestamp,
  44.             'mid': '70789bebe63fb74c52e4a911853f5450',
  45.             'uuid': '70789bebe63fb74c52e4a911853f5450',
  46.             'dfid': '3Mm61k0WDxvm033Epz2worRG',
  47.             'appid': '1014',
  48.             'platid': '4',
  49.             'encode_album_audio_id': audio_id,
  50.             'token': 'cbfe2e174e4b97fd6aca35682cdba3d2b431c4ed95e2dbd1779e37a7975b672c',
  51.             'userid': '2307902397',
  52.             'signature': signature
  53.         }
  54.         one_song_url = 'https://wwwapi.kugou.com/play/songinfo'
  55.         response = requests.get(one_song_url, headers=self.headers, params=params)
  57.         song_url = response.json()['data']['play_url']
  58.         return song_url
  60.     def get_signal_music(self, audio_id, audio_name):
  61.         song_url = self.get_one_song_url(audio_id)
  62.         response = requests.get(song_url, headers=self.headers)
  63.         with open(f'{audio_name}.mp3', 'wb') as f:
  64.             f.write(response.content)
  65.             print(f'{audio_name}.mp3下载完成')
  67.     def get_song_id(self,keyword):
  68.         timestamp = str(int(time.time() * 1000))
  69.         s = [
  70.             "NVPh5oo715z5DIWAeQlhMDsWXXQV4hwt",
  71.             "appid=1014",
  72.             "bitrate=0",
  73.             "callback=callback123",
  74.             f"clienttime={timestamp}",
  75.             "clientver=1000",
  76.             "dfid=3Mm61k0WDxvm033Epz2worRG",
  77.             "filter=10",
  78.             "inputtype=0",
  79.             "iscorrection=1",
  80.             "isfuzzy=0",
  81.             f"keyword={keyword}",
  82.             "mid=70789bebe63fb74c52e4a911853f5450",
  83.             "page=1",
  84.             "pagesize=30",
  85.             "platform=WebFilter",
  86.             "privilege_filter=0",
  87.             "srcappid=2919",
  88.             "token=cbfe2e174e4b97fd6aca35682cdba3d2b431c4ed95e2dbd1779e37a7975b672c",
  89.             "userid=2307902397",
  90.             "uuid=70789bebe63fb74c52e4a911853f5450",
  91.             "NVPh5oo715z5DIWAeQlhMDsWXXQV4hwt"
  92.         ]
  93.         signature = self.get_signature(s)
  94.         params = {
  95.             'callback': 'callback123',
  96.             'srcappid': '2919',
  97.             'clientver': '1000',
  98.             'clienttime': timestamp,
  99.             'mid': '70789bebe63fb74c52e4a911853f5450',
  100.             'uuid': '70789bebe63fb74c52e4a911853f5450',
  101.             'dfid': '3Mm61k0WDxvm033Epz2worRG',
  102.             'keyword': keyword,
  103.             'page': '1',
  104.             'pagesize': '30',
  105.             'bitrate': '0',
  106.             'isfuzzy': '0',
  107.             'inputtype': '0',
  108.             'platform': 'WebFilter',
  109.             'userid': '2307902397',
  110.             'iscorrection': '1',
  111.             'privilege_filter': '0',
  112.             'filter': '10',
  113.             'token': 'cbfe2e174e4b97fd6aca35682cdba3d2b431c4ed95e2dbd1779e37a7975b672c',
  114.             'appid': '1014',
  115.             'signature': signature
  116.         }
  117.         song_id_url = 'https://complexsearchretry.kugou.com/v2/search/song'
  118.         response = requests.get(song_id_url, headers=self.headers, params=params, verify=False)
  119.         temp = re.findall(r'callback123(.*)', response.text)[0][1:-1]
  120.         temp = json.loads(temp)
  121.         song = temp['data']['lists']
  122.         return song
  124.     def get_all_song(self,keyword):
  125.         song = self.get_song_id(keyword)
  126.         for i in song:
  127.             song_id = i.get('EMixSongID')
  128.             song_name = i.get('FileName')
  129.             # print(song_name, song_id)
  130.             try:
  131.                 self.get_signal_music(song_id, song_name)
  132.             except Exception as e:
  133.                 print(f'{song_name}下载失败:', e)
  136. if __name__ == '__main__':
  137.     kugou = kugou_music()
  138.     # kugou.get_signal_music('j410q60')
  139.     keyword='周杰伦'
  140.     kugou.get_all_song(keyword)
复制代码
免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看，没有账号？立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览
返回列表

快速回复

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

石小疯

论坛元老
这个人很懒什么都没写!

楼主热帖

标签云

AI 运维 CIO 存储 服务器
微信订阅号
微信服务号
微信客服
小程序
H5
关于我们 商务合作 网站地图
©Copyright 2022-2024 杭州祥升科技有限公司 版权所有 浙ICP备20004199号
快速回复 返回顶部 返回列表