怎樣使用python網絡爬蟲抓取視頻-創新互聯

小編給大家分享一下怎樣使用python網絡爬蟲抓取視頻，希望大家閱讀完這篇文章后大所收獲，下面讓我們一起去探討吧！

創新互聯公司是專業的阜康網站建設公司，阜康接單;提供成都網站制作、網站設計,網頁設計,網站設計,建網站,PHP網站建設等專業做網站服務;采用PHP框架,可快速的進行阜康網站開發網頁制作和功能擴展;專業做搜索引擎喜愛的網站,專業的做網站團隊,希望更多企業前來合作!

準備工作：

l Chrome 瀏覽器、

l Vim

l Python3 開發環境

l Kali Linux

API 尋找 && 提取

1、我們通過 F12 打開開發者模式。

怎樣使用python網絡爬蟲抓取視頻

2、再查看一下 Headers 屬性

3、再看下看到Request URL這個屬性值

代碼實現

寫好腳本，利用爬蟲下載片斷

##導入的兩個模塊，其中requests模塊需要自行下載
from multiprocessing import Pool
import requests
##定義一個涵數
def demo(i):
    ##定義了一個url,后面%3d就是截取后面三位給他加0，以防止i的參數是1的時候參數對不上號，所以是1的時候就變成了001
    url="https://vip.okokbo.com/20180114/ArVcZXQd/1000kb/hls/phJ51837151%03d.ts"%i
    ##定義了請求頭信息
    headers={"user-agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.221 Safari/537.36"}
    ##構建自定義請求對象
    req=requests.get(url,headers=headers)
    ##將文件保存在當前目錄的mp4文件中，名字以url后十位數起名
    with open('./mp4/ {}'.format(url[-10:]), 'wb') as f:
        f.write(req.content)
 
##程序代碼的入口
if __name__=='__main__':
    ##定義一個進程池，可以同時執行二十個任務，不然一個一個下載太慢
    pool = Pool(20)
    ##執行任務的代碼
    for i in range(100):
        pool.apply_async(demo, (i,))
 
    
    pool.close()
pool.join()

復制電影存放的路徑

怎樣使用python網絡爬蟲抓取視頻