python带你获取小破站喜爱UP得所用内容

news2024/11/22 10:15:31

前言

嗨喽，大家好呀~这里是爱看美女的茜茜呐

环境使用:

Python 3.8
Pycharm 2022.3版本
ffmpeg <需要设置环境变量> 软件的使用合成视频和音频

模块使用:

第三方模块，需要安装

import requests >>> pip install requests

内置模块你安装好python环境就可以了

import re
import json
import subprocess

第三方模块安装：

win + R 输入 cmd 点击确定, 输入安装命令 pip install 模块名 (pip install requests) 回车
在pycharm中点击Terminal(终端) 输入安装命令

如果出现爆红，可能是因为网络连接超时，可切换国内镜像源，命令如下：

pip install -i https://pypi.doubanio.com/simple/ requests

python资料、源码、教程\福利皆: 点击此处跳转文末名片获取

数据来源分析

–> 确定就是请求链接地址

明确需求:
- 采集网站以及数据是什么?
  
  某个Up主内容 <播放链接地址>
通过开发者工具进行抓包分析
- 搜索 ctrl + F
  
  在网页源代码中搜索 playinfo 这个字段第一个后面花括号包裹就是我们需要的内弱那个
  视频加密 —> AES加密 m3u8加密 --> key iv偏移量

代码展示

# 导入数据请求模块
import requests
# 导入正则表达式模块
import re
# 导入json
import json
# 导入格式化输出模块
from pprint import pprint
# 导入子进程
import subprocess
# 导入文件操作模块
import os
# 导入时间模块
import time
"""
1. 发送请求, 模拟浏览器对url地址发送请求
    - 模拟浏览器 --> 防止被反爬
"""
link = 'https://api.***.com/x/space/wbi/arc/search'
完整源码、解答、教程皆+VX：pytho8987获取，验证备注“777”
data = {
    'mid': '1305006386',
    'ps': '30',
    'tid': '0',
    'pn': '2',
    'keyword': '',
    'order': 'pubdate',
    'platform': 'web',
    'web_location': '1550101',
    'order_avoided': 'true',
    'w_rid': 'e54aebc238909958c27171906cb66290',
    'wts': '1685971898',
}
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.0.0 Safari/537.36'
}
link_data = requests.get(url=link, params=data, headers=headers).json()
for index in link_data['data']['list']['vlist']:
    video_id = index['bvid']
    print(video_id)
    time.sleep(1)
    # 请求链接  --> 代码注释, 备注代码意思
    url = f'https://www.****.com/video/{video_id}/'
    # 模拟浏览器 <请求头>
    headers = {

        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/114.0.0.0 Safari/537.36'
    }
    # 发送请求 请求方式选择 --> 根据浏览器来的
    response = requests.get(url=url, headers=headers)
    # <Response [200]> 响应对象 200状态码表示请求成功
    print(response)
    """
    2. 获取数据, 获取服务器返回响应数据 <网页源代码>
        response.text 获取响应文本数据 --> 获取网页源代码, 返回字符串数据    
    3. 解析数据, 提取视频信息 <标题, 视频内容>
       完整源码、解答、教程皆+VX：pytho8987获取，验证备注“777”
    """
    # 提取视频标题
    title = re.findall('"title":"(.*?)",', response.text)[0].replace(' ', '')
    # 提取视频内容
    html_data = re.findall('<script>window.__playinfo__=(.*?)</script', response.text)[0]
    # 转换数据类型
    json_data = json.loads(html_data)
    pprint(json_data)
    # 字典, 根据键值对取值 --> 根据冒号左边的内容, 提取冒号右边的内容
    audio_url = json_data['data']['dash']['audio'][0]['baseUrl']
    video_url = json_data['data']['dash']['video'][0]['baseUrl']
    print(title)
    print(audio_url)
    print(video_url)
    # <Response [403]> 没有访问权限  获取音频的二进制数据
    audio_content = requests.get(url=audio_url, headers=headers).content
    # 获取视频的二进制数据
    video_content = requests.get(url=video_url, headers=headers).content
    """
    保存数据
    """
    with open('video\\' + title + '.mp3', mode='wb') as audio:
        audio.write(audio_content)

    with open('video\\' + title + '.mp4', mode='wb') as video:
        video.write(video_content)

    exe = f"ffmpeg -i video\\{title}.mp4 -i video\\{title}.mp3 -c:v copy -c:a aac -strict experimental video\\{title}output.mp4"
    subprocess.run(exe)
    os.remove(f'video\\{title}.mp4')
    os.remove(f'video\\{title}.mp3')