怎样使用python网络爬虫抓取视频-创新互联-成都创新互联网站建设

关于创新互联

多方位宣传企业产品与服务 突出企业形象

公司简介 公司的服务 荣誉资质 新闻动态 联系我们

怎样使用python网络爬虫抓取视频-创新互联

小编给大家分享一下怎样使用python网络爬虫抓取视频,希望大家阅读完这篇文章后大所收获,下面让我们一起去探讨吧!

创新互联公司是专业的阜康网站建设公司,阜康接单;提供成都网站制作、网站设计,网页设计,网站设计,建网站,PHP网站建设等专业做网站服务;采用PHP框架,可快速的进行阜康网站开发网页制作和功能扩展;专业做搜索引擎喜爱的网站,专业的做网站团队,希望更多企业前来合作!

准备工作:

l Chrome 浏览器、

l Vim

l Python3 开发环境

l Kali Linux

API 寻找 && 提取

1、我们通过 F12 打开开发者模式。

怎样使用python网络爬虫抓取视频

2、再查看一下 Headers 属性

3、再看下看到Request URL这个属性值

代码实现

写好脚本,利用爬虫下载片断

##导入的两个模块,其中requests模块需要自行下载
from multiprocessing import Pool
import requests
##定义一个涵数
def demo(i):
    ##定义了一个url,后面%3d就是截取后面三位给他加0,以防止i的参数是1的时候参数对不上号,所以是1的时候就变成了001
    url="https://vip.okokbo.com/20180114/ArVcZXQd/1000kb/hls/phJ51837151%03d.ts"%i
    ##定义了请求头信息
    headers={"user-agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.221 Safari/537.36"}
    ##构建自定义请求对象
    req=requests.get(url,headers=headers)
    ##将文件保存在当前目录的mp4文件中,名字以url后十位数起名
    with open('./mp4/ {}'.format(url[-10:]), 'wb') as f:
        f.write(req.content)
 
##程序代码的入口
if __name__=='__main__':
    ##定义一个进程池,可以同时执行二十个任务,不然一个一个下载太慢
    pool = Pool(20)
    ##执行任务的代码
    for i in range(100):
        pool.apply_async(demo, (i,))
 
    
    pool.close()
pool.join()

复制电影存放的路径

怎样使用python网络爬虫抓取视频

用进入windows命令行模式,粘贴地址

怎样使用python网络爬虫抓取视频

复制该目录下所有以*.ts结尾的文件,复制成一个文件

怎样使用python网络爬虫抓取视频

进行合并

怎样使用python网络爬虫抓取视频

进行验证

怎样使用python网络爬虫抓取视频

看完了这篇文章,相信你对怎样使用python网络爬虫抓取视频有了一定的了解,想了解更多相关知识,欢迎关注创新互联行业资讯频道,感谢各位的阅读!


本文名称:怎样使用python网络爬虫抓取视频-创新互联
分享链接:http://kswsj.cn/article/cdpojp.html

其他资讯