python爬虫获取网易云音乐评论歌词以及歌曲地址

news2024/11/22 21:35:15

python爬虫获取网易云音乐评论歌词以及歌曲地址

  • 一.寻找数据接口
  • 二.对负载分析
  • 三.寻找参数加密过程
    • 1.首先找到评论的请求包并找到发起程序
    • 2.寻找js加密的代码
  • 四.扣取js的加密源码
    • 1.加密函数参数分析
      • ①.JSON.stringify(i0x)
      • ②bse6Y(["流泪", "强"])
      • ③bse6Y(Qu1x.md)
      • ④.bse6Y(["爱心", "女孩", "惊恐", "大笑"])
    • 1.加密函数分析
  • 五.在本地环境使用此函数
    • 1.直接将js代码复制并用js环境运行
    • 2.将js代码翻译为python代码
  • 六.python代码

一.寻找数据接口

评论
url:https://music.163.com/weapi/comment/resource/comments/get
在这里插入图片描述

在这里插入图片描述
歌词
url:https://music.163.com/weapi/song/lyric
在这里插入图片描述

在这里插入图片描述

歌曲地址
url:https://music.163.com/weapi/song/enhance/player/url/v1
在这里插入图片描述

二.对负载分析

从三个接口的负载我们可以得出

data={
params:加密数据
encSecKey:加密数据
}

所以我们只需要找出这个两个参数的加密过程就能模拟请求并得到我们想要的数据

三.寻找参数加密过程

因为这三个接口的加密是一样的这里我们用评论的接口来讲解

1.首先找到评论的请求包并找到发起程序

在这里插入图片描述
f12打开调试并且点击网络然后找到对应的包https://music.163.com/weapi/comment/resource/comments/get
点击发起程序

2.寻找js加密的代码

我们先点击发起程序的第一个进入到js文件中找到请求发出的地方也就是
send()函数
先加个断点然后刷新页面(下图)
在这里插入图片描述

在这里插入图片描述

刷新后我们就可以看到调用栈然后从第一个往下点一直找到send()(上图)

在这里插入图片描述
找到send()后我们取消掉前面的断点并给send（）打上断点然后再次刷新网页（上图）
在这里插入图片描述

这个url代表的是此次请求发送的url我们评论的url为https://music.163.com/weapi/comment/resource/comments/get所以我们点击上面的小三角放过此次请求直至抓取到我们所需的请求（上图）
在这里插入图片描述
在这里插入图片描述
我们现在就抓取到了评论请求的data数据等信息我们可以看到此时的信息还是加密的所以我们要继续向前找寻找到它未加密的地方(上图)
在这里插入图片描述
data的加密数据在t0x这个调用栈前面是没有的所以我们就能确定数据是在这个调用栈中被加密然后我们ctrl+ F 直接搜索params就定位到了加密的函数

四.扣取js的加密源码

var bVi6c = window.asrsea(JSON.stringify(i0x), bse6Y(["流泪", "强"]), bse6Y(Qu1x.md), bse6Y(["爱心", "女孩", "惊恐", "大笑"]));
            e0x.data = j0x.cr1x({
                params: bVi6c.encText,
                encSecKey: bVi6c.encSecKey
            })

根据上一步我们找到的源码我们可以看出
我们所需的两个加密数据 params，encSecKey都是由 bVi6c产生的
bVi6c是由 这个函数生成的所以只需要取出这个函数的加密过程就能模拟出我们的加密数据

window.asrsea(JSON.stringify(i0x), bse6Y(["流泪", "强"]), bse6Y(Qu1x.md), bse6Y(["爱心", "女孩", "惊恐", "大笑"]));

1.加密函数参数分析

我们先给函数打上断点然后刷新网页
在这里插入图片描述
和上面的步骤一样还是需要点击三角知道找到我们所需的接口

①.JSON.stringify(i0x)

JSON.stringify()
JSON.stringify 是 JavaScript 中的一个全局函数，用于将一个 JavaScript 值（如 JavaScript 对象或数组）转换为 JSON 格式的字符串。这对于将数据保存到文件、在网页之间传递数据、或发送到服务器（例如通过 AJAX 请求）非常有用，因为 JSON 是一种轻量级的数据交换格式，易于人阅读和编写，同时也易于机器解析和生成。
这个函数的作用就是将i0x转换为json格式
我们点击控制台然后输入i0x就可以得到i0x的值

{
    "rid": "R_SO_4_28188263",
    "threadId": "R_SO_4_28188263",
    "pageNo": "1",
    "pageSize": "20",
    "cursor": "-1",
    "offset": "0",
    "orderType": "1",
    "csrf_token": "71bfd80a0c48b6dbdef22c1499cd480c"
}

rid与threadId就是歌的id
csrf_token是用户的登录状态
剩下的就是关于评论的参数
使用JSON.stringify()函数将i0x转换后我们就得到了第一个参数

②bse6Y([“流泪”, “强”])

第二个参数我们可以看出他是一个函数的返回值他的参数是[“流泪”, “强”]所以我们认为他的值是固定的
我们只需要在控制台输入bse6Y([“流泪”, “强”])就可以得到第二个参数的值
在这里插入图片描述
bse6Y([“流泪”, “强”])=‘010001’

③bse6Y(Qu1x.md)

首先我们要获取Qu1x.md的值我们直接控制台输入Qu1x.md
在这里插入图片描述

['色', '流感', '这边', '弱', '嘴唇', '亲', '开心', '呲牙', '憨笑', '猫', '皱眉', '幽灵', '蛋糕', '发怒', '大哭', '兔子', '星星', '钟情', '牵手', '公鸡', '爱意', '禁止', '狗', '亲亲', '叉', '礼物', '晕', '呆', '生病', '钻石', '拜', '怒', '示爱', '汗', '小鸡', '痛苦', '撇嘴', '惶恐', '口罩', '吐舌', '心碎', '生气', '可爱', '鬼脸', '跳舞', '男孩', '奸笑', '猪', '圈', '便便', '外星', '圣诞']

所以bse6Y(Qu1x.md)值也是固定的
在这里插入图片描述
在这里插入图片描述

bse6Y(Qu1x.md)=‘00e0b509f6259df8642dbc35662901477df22677ec152b5ff68ace615bb7b725152b3ab17a876aea8a5aa76d2e417629ec4ee341f56135fccf695280104e0312ecbda92557c93870114af6c9d05c4f7f0c3685b7a46bee255932575cce10b424d813cfe4875d3e82047b97ddef52741d546b8e289dc6935b3ece0462db0a22b8e7’

④.bse6Y([“爱心”, “女孩”, “惊恐”, “大笑”])

和参数二一样他也是一个固定值直接控制台输出

bse6Y(["爱心", "女孩", "惊恐", "大笑"])='0CoJUm6Qyw8W8jud'

1.加密函数分析

window.asrsea(JSON.stringify(i0x), bse6Y(["流泪", "强"]), bse6Y(Qu1x.md), bse6Y(["爱心", "女孩", "惊恐", "大笑"]))

我们已经得到了window.asrsea()的参数现在只有找到此函数的源码就可以模拟加密了
我们直接ctrl+F搜索window.asrsea
在这里插入图片描述
我们直接把这个函数复制下来

!function() {
    function a(a) {
        var d, e, b = "abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ0123456789", c = "";
        for (d = 0; a > d; d += 1)
            e = Math.random() * b.length,
            e = Math.floor(e),
            c += b.charAt(e);
        return c
    }
    function b(a, b) {
        var c = CryptoJS.enc.Utf8.parse(b)
          , d = CryptoJS.enc.Utf8.parse("0102030405060708")
          , e = CryptoJS.enc.Utf8.parse(a)
          , f = CryptoJS.AES.encrypt(e, c, {
            iv: d,
            mode: CryptoJS.mode.CBC
        });
        return f.toString()
    }
    function c(a, b, c) {
        var d, e;
        return setMaxDigits(131),
        d = new RSAKeyPair(b,"",c),
        e = encryptedString(d, a)
    }
    function d(d, e, f, g) {
        var h = {}
          , i = a(16);
        return h.encText = b(d, g),
        h.encText = b(h.encText, i),
        h.encSecKey = c(i, e, f),
        h
    }
    function e(a, b, d, e) {
        var f = {};
        return f.encText = c(a + e, b, d),
        f
    }
    window.asrsea = d,
}();

这就是加密函数

五.在本地环境使用此函数

1.直接将js代码复制并用js环境运行

python如何执行js代码: https://blog.csdn.net/python_9k/article/details/138562809
Node.js安装与配置（详细步骤）: https://blog.csdn.net/qq_42006801/article/details/124830995

2.将js代码翻译为python代码

如果读不懂js代码直接复制给ai来使用

这段JavaScript代码定义了一系列函数，用于生成随机字符串、使用AES加密、使用RSA加密，以及组合这些加密步骤来形成最终的加密数据。下面是对这些函数及其作用的详细解释：
1. a(a)
•  功能：生成一个长度为a的随机字符串，字符串由字母（大小写）和数字组成。
•  实现：使用Math.random和Math.floor生成随机索引，从字符集b中选取字符，最终拼接成一个随机字符串。
2. b(a, b)
•  功能：使用AES算法加密字符串a，密钥是b。
•  实现：使用CryptoJS库中的AES加密方法，采用CBC模式，IV（初始化向量）固定为0102030405060708，加密后返回加密字符串的Base64编码。
3. c(a, b, c)
•  功能：使用RSA算法加密字符串a，公钥由b和c组成（b是公钥的指数，c是模数）。
•  实现：使用RSAKeyPair创建一个RSA公钥，然后使用encryptedString方法加密字符串a。
4. d(d, e, f, g)
•  功能：组合AES和RSA加密，首先使用AES加密d，然后对加密后的AES密钥再进行一次AES加密，并使用RSA加密生成的随机字符串i。
•  实现： 
•  生成16位随机字符串i。
•  使用g作为AES密钥加密d。
•  使用i作为新的AES密钥再次加密前一步的输出。
•  使用RSA公钥（e和f）加密i。
•  返回一个对象，包含encText（两次AES加密后的结果）和encSecKey（RSA加密后的结果）。
5. e(a, b, d, e)
•  功能：使用RSA算法加密字符串a加上e，公钥由b和d组成。
•  实现：与c函数相似，但是将a + e作为要加密的字符串。
6. window.asrsea = d
•  功能：将d函数绑定到window对象的asrsea属性上，使其在全局范围内可用。
加密步骤总结
•  首先，生成一个随机字符串i。
•  使用g作为AES密钥加密原始数据d。
•  再次使用i作为AES密钥加密上一步的结果。
•  最后，使用RSA公钥加密i，生成encSecKey。
•  返回一个包含encText（两次AES加密的结果）和encSecKey（RSA加密的结果）的对象。
这种加密策略通常用于网络请求中，尤其是音乐流媒体服务或API接口，以保护数据在传输过程中的安全。

六.python代码

main.py


from Crypto.Cipher import AES
import base64
from Crypto.Util.Padding import pad
import requests
from jiami import Aj

import re
def gdata(decrypt_str):
    key_str = '0CoJUm6Qyw8W8jud'
    iv_str = "0102030405060708"
    a = "ouPO61mhRSoLJEwz"
    encrypt_str = aes_cbc_encrypt_text(decrypt_str, key_str, iv_str)
    encrypt_str = aes_cbc_encrypt_text(encrypt_str, a, iv_str)
    return encrypt_str



def idh():
    name = input('请输入歌名: ')
    i1x = {
        'csrf_token': "",
        'limit': "8",
        's': name
    }
    data = i1x
    aj = Aj(data)
    url = 'https://music.163.com/weapi/search/suggest/web'
    res = requests.post(url, data={'params': aj.getparams(data), 'encSecKey': aj.getenseckey()})
    return str(res.json()["result"]["songs"][0]["id"])



def aes_cbc_encrypt_text(decrypt_text: str, key: str, iv: str) -> str:
    """
    加密AES_CBC的明文
    :param decrypt_text: 明文
    :param key: 密钥
    :param iv: 密钥偏移量
    :return: 密文
    """
    aes2 = AES.new(key.encode('utf-8'), AES.MODE_CBC, iv.encode('utf-8'))
    encrypt_text = aes2.encrypt(pad(decrypt_text.encode('utf-8'), AES.block_size, style='pkcs7'))
    encrypt_text = str(base64.encodebytes(encrypt_text), encoding='utf-8').replace("\n", "")
    return encrypt_text



idd=idh()
rid='R_SO_4_'+idd

# AES_CBC加密模式
decrypt_str = "{\"ids\":\"["+str(idd)+"]\",\"level\":\"standard\",\"encodeType\":\"aac\"}"
decrypt_str2='{\"rid\": \"%s\",\"threadId\": \"%s\",\"pageNo\": \"1\",\"pageSize\": \"20\",\"cursor\": \"-1\",\"offset\": \"0\",\"orderType\": \"1\"}'%(rid,rid)
decrypt_str3='{\"id\":\"%s\",\"lv\": \"-1\",\"tv\":\"-1\"}'%idd

params=gdata(decrypt_str)
params2=gdata(decrypt_str2)
params3=gdata(decrypt_str3)
encSecKey="c13dc213bd5889986ef8a7af39406c640bf77c6a5a34fe86324b648708b3af49919368a2d555771ea5453a605be7bfeaca0860696a9a9889e24a925bfeb56455f7275e534e733eaa5f94392d7b75da0701b8f38a3006bd6cd10cce66d64daa39f6dd12f970421d79b91abc8116012ee4f2dc8c7648c527abc22158b0338a9171"
url='https://music.163.com/weapi/song/enhance/player/url/v1?'
url2='https://music.163.com/weapi/comment/resource/comments/get?'
url3='https://music.163.com/weapi/song/lyric'
data={

'params': params,
'encSecKey': encSecKey
}
data2={
'params': params2,
'encSecKey': encSecKey
}
data3={
'params': params3,
'encSecKey': encSecKey
}
res=requests.post(url,data=data)
res2=requests.post(url2,data=data2)
res3=requests.post(url3,data=data3)
print("评论：")
for i in res2.json()["data"]["comments"]:
    print(i["content"])
#print(res.text)
print('___________________________________________________________________')
print("歌曲url:")
print(res.json()['data'][0]['url'])
print('___________________________________________________________________')
print("歌词：")
txt=res3.json()["lrc"]
list=re.findall(r'\[(.*?)\](.*?)\\n',str(txt),re.S)
for i in list:
    print(i[1])

jiami.py

from Crypto.Cipher import AES
from base64 import b64encode
import json

class Aj:
    g='0CoJUm6Qyw8W8jud'
    i="7HCEonr7xwebMhJV"
    def __init__(self,data):
        self.data=data
    def getenseckey(self):
        return "774c6922c77e2d39c9ec18d91210752d86517dee1ab731b3f8a41306ef5b92bc5809105f6cd679375d557dbf59746e1ace6b5a8a313efd70d3c645d198e3e509dbb61776926032eaccfa92c6f5921c8672baf3a2fd5d6d08c1a6869200fbb5e3191902026144060d6e58afcd9ef95f8be592fa80a25791c5b51a1264905026cf"

    def jiamiAES(self,data, key):
        # data=data.encode("utf-8")
        iv = '0102030405060708'
        aes = AES.new(key=key.encode("utf-8"), IV=iv.encode("utf-8"), mode=AES.MODE_CBC)
        bs = aes.encrypt(data.encode("utf-8"))
        return str(b64encode(bs), "utf-8")

    def getparams(self,data):
        data = json.dumps(data)
        data = self.to_16(data)
        t1 = self.jiamiAES(data,self.g)
        t2 = self.jiamiAES(self.to_16(t1),self.i)
        return t2

    def to_16(self,data):
        pad = 16 - len(data) % 16
        data += chr(pad) * pad
        return data

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1936568.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

Linux--Socket套接字编程

Linux--Socket套接字编程

Socket编程 Socket编程是一种在网络中不同计算机之间实现数据交换的编程方式。它允许程序创建网络连接，并通过这些连接来发送和接收数据。Socket编程是网络编程的基础，广泛应用于客户端-服务器（C/S）架构中。 要实现双方通信&…
阅读更多...
【扩散模型（六）】Stable Diffusion 3 diffusers 源码详解1-推理代码-文本处理部分

【扩散模型（六）】Stable Diffusion 3 diffusers 源码详解1-推理代码-文本处理部分

系列文章目录 【扩散模型（一）】中介绍了 Stable Diffusion 可以被理解为重建分支（reconstruction branch）和条件分支（condition branch）【扩散模型（二）】IP-Adapter 从条件分支的视…
阅读更多...
基于python的去除图像内部填充

基于python的去除图像内部填充

1 代码功能 该代码实现了一个图像处理的功能，具体来说是去除图像内部填充（或更准确地说，是提取并显示图像中轮廓的外围区域，而忽略内部填充）。以下是该功能的详细步骤： 读取图像：使用cv2.imread…
阅读更多...
Hadoop-38 Redis 高并发下的分布式缓存 Redis简介 缓存场景 读写模式 旁路模式 穿透模式 缓存模式 基本概念等

Hadoop-38 Redis 高并发下的分布式缓存 Redis简介 缓存场景 读写模式 旁路模式 穿透模式 缓存模式 基本概念等

点一下关注吧！！！非常感谢！！持续更新！！！ 目前已经更新到了： HadoopHDFSMapReduceHiveFlumeSqoopZookeeperHBaseRedis 章节内容 上一节我们完成了： HBase …
阅读更多...
机器学习-18-统计学与机器学习中回归的区别以及统计学基础知识

机器学习-18-统计学与机器学习中回归的区别以及统计学基础知识

参考通透！一万字的统计学知识大梳理 参考3万字长文！手把手教你学会用Python实现统计学 参考统计学的回归和机器学习中的回归有什么差别？ 1 研究对象 一维：就是当前摆在我们面前的“一组”，“一批数据。这里我们会用到统计学的知识去研究这类对象。 二维：就是研究某个“事…
阅读更多...
【系统架构设计】数据库系统（三）

【系统架构设计】数据库系统（三）

数据库系统（三） 数据库模式与范式数据库设计备份与恢复分布式数据库系统分布式数据库的概念特点分类目标 分布式数据库的架构分布式数据库系统与并行数据库系统 数据仓库数据挖掘NoSQL大数据 数据库模式与范式 数据库设计 备份与恢复 分布式数据库系统…
阅读更多...
生活中生智慧

生活中生智慧

【 圣人多过 小人无过 】 觉得自己做得不够才能做得更好，互相成全；反求诸己是致良知的第一步；有苦难才能超越自己，开胸怀和智慧；不浪费任何一次困苦，危机中寻找智慧，成长自己。 把困苦当作当下…
阅读更多...
自动驾驶三维车道线检测系列—LATR: 3D Lane Detection from Monocular Images with Transformer

自动驾驶三维车道线检测系列—LATR: 3D Lane Detection from Monocular Images with Transformer

文章目录 1. 概述2. 背景介绍3. 方法3.1 整体结构3.2 车道感知查询生成器3.3 动态3D地面位置嵌入3.4 预测头和损失 4. 实验评测4.1 数据集和评估指标4.2 实验设置4.3 主要结果 5. 讨论和总结 1. 概述 3D 车道线检测是自动驾驶中的一个基础但具有挑战性的任务。最近的进展主要依…
阅读更多...
【NetTopologySuite类库】GeometryFixer几何自动修复，解决几何自相交等问题

【NetTopologySuite类库】GeometryFixer几何自动修复，解决几何自相交等问题

介绍 NetTopologySuite 2.x 提供了GeometryFixer类，该类能够将几何体修复为有效几何体，同时尽可能保留输入的形状和位置。几何的IsValid属性，反映了几何是否是有效的。 输入的几何图形始终会被处理，因此即使是有效的输入也可能会…
阅读更多...
特征工程方法总结

特征工程方法总结

方法有以下这些 首先看数据有没有重复值、缺失值情况 离散：独热 连续变量：离散化（也成为分箱） 作用：1.消除异常值影响 2.引入非线性因素，提升模型表现能力 3.缺点是会损失一些信息 怎么分：…
阅读更多...
pdf太大了怎么变小 pdf太大了如何变小一点

pdf太大了怎么变小 pdf太大了如何变小一点

在数字化时代，pdf文件已成为工作与学习的重要工具。然而，有时我们可能会遇到pdf文件过大的问题，这会导致传输困难或者存储不便。别担心，下面我将为你介绍一些实用的技巧和工具，帮助你轻松减小pdf文件的大小。 方法一、…
阅读更多...
docker的学习（一）：docker的基本概念和命令

docker的学习（一）：docker的基本概念和命令

简介 docker的学习，基本概念，以及镜像命令和容器命令的使用 docker docker的基本概念 一次镜像，处处运行。 在部署程序的过程中，往往是很繁琐的，要保证运行的环境，软件的版本，配置文件&…
阅读更多...
SQLite数据库在Android中的使用

SQLite数据库在Android中的使用

目录 一，SQLite简介 二，SQLIte在Android中的使用 1，打开或者创建数据库 2，创建表 3，插入数据 4，删除数据 5，修改数据 6，查询数据 三，SQLiteOpenHelper类 四&…
阅读更多...
信弘智能与图为科技共探科技合作新蓝图

信弘智能与图为科技共探科技合作新蓝图

本期导读 近日，图为信息科技（深圳）有限公司迎来上海信弘智能科技有限公司代表的到访，双方共同探讨英伟达生态系统在人工智能领域的发展。 在科技日新月异的今天，跨界合作与技术交流成为了推动行业发展的重要驱动。7月…
阅读更多...
使用JWT双令牌机制进行接口请求鉴权

使用JWT双令牌机制进行接口请求鉴权

在前后端分离的开发过程中，前端发起请求，调用后端接口，后端在接收请求时，首先需要对收到的请求鉴权，在这种情况先我们可以采用JWT机制来鉴权。 JWT有两种机制，单令牌机制和双令牌机制。 单令牌机制服务端…
阅读更多...
JAVA 异步编程（线程安全）二

JAVA 异步编程（线程安全）二

1、线程安全 线程安全是指你的代码所在的进程中有多个线程同时运行，而这些线程可能会同时运行这段代码，如果每次运行的代码结果和单线程运行的结果是一样的，且其他变量的值和预期的也是一样的，那么就是线程安全的。 一个类或者程序…
阅读更多...
Linux驱动开发-06蜂鸣器和多组GPIO控制

Linux驱动开发-06蜂鸣器和多组GPIO控制

一、控制蜂鸣器 1.1 控制原理 我们可以看到SNVS_TAMPER1是这个端口在控制着蜂鸣器，同时这是一个PNP型的三极管，在端口输出为低电平时，蜂鸣器响，在高电平时，蜂鸣器不响 1.2 在Linux中端口号的控制 gpiochipX：当前SoC所包含的GPIO控制器，我们知道I.MX6UL/I.MX6ULL一共包…
阅读更多...
整顿职场？安全体系建设

整顿职场？安全体系建设

本文由 ChatMoney团队出品 00后整顿职场，职场到底怎么了？无压力、无忧虑的00后可以直接开整，那绝大部分打工人寒窗苦读、闯过高考，艰辛毕业，几轮面试杀入职场，结婚买房、上有老下有小，就活该再被…
阅读更多...
怎么剪辑音频文件？4款适合新的音频剪辑软件

怎么剪辑音频文件？4款适合新的音频剪辑软件

是谁还不会音频剪辑？无论是个人音乐爱好者，还是专业音频工作者，我们都希望能找到一款操作简便、功能强大且稳定可靠的音频剪辑工具。今天，我就要为大家带来四款热门音频剪辑软件的体验感分享。 一、福昕音频剪辑 福昕音频剪辑是…
阅读更多...
JUnit 单元测试

JUnit 单元测试

JUnit 测试是程序员测试，就是白盒测试，可以让程序员知道被测试的软件如何 （How）完成功能和完成什么样（What）的功能。 下载junit-4.12和hamcrest-core-1.3依赖包 相关链接 junit-4.12：Central …
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023