python爬取YouTube视频 |
您所在的位置:网站首页 › 搞笑链接代码 › python爬取YouTube视频 |
最近喜欢看看视频,于是到处逛啊逛的,终于还是来到了这个世界上最大的视频平台,不愧是它,质量杠杠的!
心动不如行动 ,咱们直接用python开整,好看的视频都给它下载下来,完事了喊上表弟一起看~ 表弟:
不多哔哔,咱们开始吧~ 环境模块开发环境 这里咱们安装Python3 ,推荐3.6-3.8,编辑器还是pycharm,但是可以下载pycharm 2021 ,新版本自带汉化插件,直接安装就可以汉化了。 对于不会英语的兄弟们来说简直是福音呐! 模块 这里本次用到的两个第三方模块需要pip安装一下 requests # 数据请求模块 tqdm #进度条配置 # Python学习交流群:815624229
没有软件,不会安装软件,不会安装模块、报错了等等,或者Python相关学习资料、代码、视频、解答等等,都在上面的裙了。 浅浅的给大家展示一下爬完的一个视频 表弟:呸,就一个?就这就这?能不能多放点!
实现步骤 pa虫的步骤讲了这么多遍,不知道各位记住了没有~ 首先咱咱们先打开目标网页然后去搜索自己喜欢的视频 至于怎么进这个网站,且听我慢慢道来~
声明一下,我只说怎么去下载,至于怎么进这个网站,这个不是我能教的,大家自行百度,我有点慌~
我们还是不说这个了,说回搜索咱们喜欢的视频,比如
然后我们以这个视频为例,咱们还是素一点。
咱们点开视频,然后按 F12 打开开发者工具,然后刷新网页,去找到我们的数据包内容。
刷新之后它会慢慢的加载数据包,咱们可以在里面找到很多内容,我就不详细写了,大家可以看我这个视频,详细的步骤都录下来了。 视频地址:【Python爬取YouTube视频】 为啥不写了呢,主要是写太多了,大家也不喜欢看,只喜欢看代码,害~
代码展示 导入模块 这是所有需要用到的模块,前面没讲需要安装的都是内置模块,不需要安装。 import requests # 数据请求模块 import re # 正则表达式模块 import json # 数据类型处理模块 from tqdm import tqdm #进度条配置 import os # 处理文件和目录
发送请求获取数据 headers = { 'cookie': 'VISITOR_INFO1_LIVE=9qZVrzB27uI; PREF=f4=4000000&tz=Asia.Shanghai; _ga=GA1.2.621834420.1648121145; _gcl_au=1.1.1853038046.1648121145; NID=511=Zc1APdmEbCD-iqVNVgI_vD_0S3LVI3XSfl-wUZEvvMU2MLePFKsQCaKUlUtchHSg-kWEVMGOhWUbxpQMwHeIuLjhxaslwniMh1OsjVfmOeTfhpwcRYpMgqpZtNQ7qQApY21xEObCvIez6DCMbjRhRQ5P7siOD3X87QX0CFyUxmY; OTZ=6430350_24_24__24_; GPS=1; YSC=0E115KqM_-I; GOOGLE_ABUSE_EXEMPTION=ID=d02004902c3d0f4d:TM=1648620854:C=r:IP=47.57.243.77-:S=YmZXPW7dxbu83bDuauEpXpE; CONSISTENCY=AGDxDeNysJ2boEmzRP4v6cwgg4NsdN4-FYQKHCGhA0AeW1QjFIU1Ejq1j8l6lwAc6c-pYTJiSaQItZ1M6QeI1pQ3wictnWXTOZ6_y8EKlt0Y_JdakwW6srR39-NLuPgSgXrXwtS0XTUGXpdnt4k3JjQ', 'referer': 'https://www.youtube.com/results?search_query=jk%E7%BE%8E%E5%A5%B3', 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/99.0.4844.84 Safari/537.36' } url = 'https://www.youtube.com/watch?v=ImoXcSpR_io' response = requests.get(url=url, headers=headers) print(response.text)
匹配json数据 json_str = re.findall('var ytInitialPlayerResponse = (.*?);var', response.text)[0]
json字符串转变为字典 json_data = json.loads(json_str)
提取视频链接 video_url = json_data['streamingData']['adaptiveFormats'][0]['url']
提取音频链接 audio_url = json_data['streamingData']['adaptiveFormats'][-2]['url']
提取标题 title = json_data['videoDetails']['title']
替换掉标题当中的空格 title = title.replace(' ', '')
替换掉标题当中的不合法字符 title = re.sub(r'[\/:|?*"]', '', title) print(video_url) print(audio_url) print(title)
向视频链接发送请求 video = requests.get(video_url, stream=True)
获取视频大小 file_size = int(video.headers.get('Content-Length'))
初始化进度条大小 video_pbar = tqdm(total=file_size)
开始保存视频 with open(f'{title}.mp4', mode='wb') as f: # 把视频分成 1024 * 1024 * 2 为等分的大小 进行遍历 for video_chunk in video.iter_content(1024*1024*2): # 写入数据 f.write(video_chunk) # 更新进度条 video_pbar.set_description(f'正在下载{title}视频中......') # 更新进度条长度 video_pbar.update(1024*1024*2) # 下载完毕 video_pbar.set_description('下载完成!') # 关闭进度条 video_pbar.close()
音频同理 audio = requests.get(audio_url, stream=True) file_size = int(audio.headers.get('Content-Length')) audio_pbar = tqdm(total=file_size) with open(f'{title}.mp3', mode='wb') as f: for audio_chunk in audio.iter_content(1024*1024*2): f.write(audio_chunk) audio_pbar.set_description(f'正在下载{title}音频中......') audio_pbar.update(1024*1024*2) audio_pbar.set_description('下载完成!') audio_pbar.close()
使用FFmpeg进行合并 def merge(title): ffmpeg = r'D:\Download\ffmpeg\bin\ffmpeg.exe -i ' + title + '.mp4 -i ' + title + '.mp3 -acodec copy -vcodec copy ' + title + '-out.mp4' os.popen(ffmpeg) merge(title)
兄弟们赶紧试试吧! 记得点赞收藏评论,爱你哟! |
CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3 |