python爬虫爬取网站视频

每个视频网站视频格式都不一样

今天主要说的是爬取.ts结尾的视频

1 打开视频网址 按F12 先不要播放

2 点击播放 查找Type是video的

可见v.f230.m3u8就是我们需要的视频ts包

接下来下载这个m3u8

数据是这样的

里面的v.f230开头的就是我们所需要的

点击每个段就会发现 请求地址 只有标记的 1 处 不同
所有的请求数据都在我们下载的m3u8文件里

接下来 上代码！

import requests
import re
file_object = open('D:/360极速浏览器下载/v.f230.m3u8','r', encoding='UTF-8')
f =[]
for line in file_object:
    g = re.search("v.*", line)  #匹配m3u8里面所有v开头的
    if g:
        #print(g.group())
        f.append(line.replace('v.f230.ts?','').replace('type=mpegts','')) #切分成我们需要的装进集合里
for i in f:
    print(i)
    print(type(i))
    # 复制请求地址    str(i) 就是把地址从集合里循环取出来
   fuzurl='http://1251150518.vod2.myqcloud.com/4149f144vodtransgzp1251150518/754a44525285890796732662620/v.f230.ts?'+str(i)+'type=mpegts'
    print('开始下载')
    i=str(i).split('&')[0].split('=')[1]
    r=requests.get(url,stream=True)
    with open('D:/360极速浏览器下载/新建文件夹2/'+str(i)+'.ts','wb') as mp4:
        for chunk in r.iter_content(chunk_size=1024 * 1024) :
            if chunk:
                mp4.write(chunk)
print('下载结束')	

下载完了发现并不如意！

视频分成了200多个ts小文件! 太头疼了

建议方案 1 下载格式工厂或者腾讯影音播放器 把视频按顺序合并一下 未免太费时费力！

建议方案 2 博主找了好久的资料 用代码把ts文件合并！（报错！未解决。有能力的可以自行测试尝试解决！）

print('开始拼接')
L=[]
for root, dirs, files in os.walk('D:/360极速浏览器下载/新建文件夹2/'):
    # 按文件名排序
    files = natsorted(files)
    # 遍历所有文件
    for file in files:
        # 如果后缀名为 .mp4
        if os.path.splitext(file)[1] == '.ts':
            # 拼接成完整路径
            filePath = os.path.join(root, file)
            # print(root)
            # print(file)
            #print(filePath)
            # 载入视频
            video = VideoFileClip(filePath)
            # print(video)
            # 添加到数组
            L.append(video)
 
# 拼接视频
final_clip = concatenate_videoclips(L)
 
# 生成目标视频文件
final_clip.to_videofile("D:/360极速浏览器下载2/target.mp4", fps=24, remove_temp=False)
print('合并完毕')

此方法也多有弊端 报错！ 暂未解决

建议方案 3 （此法也不行）

打开cmd，切进目录，执行copy /b *.ts video.ts合并速度超快。
发现合并后的文件 也不如意！ 循序杂乱，时常也不是所有小ts文件加起来的时常

视频大小对，但是播放时长不对！

有好的办法及时评论，联系我！