Python怎么實現抓取騰訊視頻所有電影

這篇文章主要介紹“Python怎么實現抓取騰訊視頻所有電影”，在日常操作中，相信很多人在Python怎么實現抓取騰訊視頻所有電影問題上存在疑惑，小編查閱了各式資料，整理出簡單好用的操作方法，希望對大家解答”Python怎么實現抓取騰訊視頻所有電影”的疑惑有所幫助！接下來，請跟著小編一起來學習吧！

運行環境

• IDE丨pycharm

• 版本丨Python3.6

• 系統丨Windows

實現目的與思路

目的

實現對騰訊視頻目標url的解析與下載，由于第三方vip解析，只提供在線觀看，隱藏想實現對目標視頻的下載

思路

首先拿到想要看的騰訊電影url,通過第三方vip視頻解析網站進行解析，通過抓包，模擬瀏覽器發送正常請求，通過拿到緩存ts文件，下載視頻ts文件，最后通過轉換為mp4文件，即可實現正常播放

完整代碼

import re
import os,shutil
import requests,threading
from urllib.request import urlretrieve
from pyquery import PyQuery as pq
from multiprocessing import Pool
'''
'''
class video_down():
    def __init__(self,url):
        # 拼接全民解析url
        self.api='https://jx.618g.com'
        self.get_url = 'https://jx.618g.com/?url=' + url
        #設置UA模擬瀏覽器訪問
        self.head = {'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'}
        #設置多線程數量
        self.thread_num=32
        #當前已經下載的文件數目
        self.i = 0
        # 調用網頁獲取
        html = self.get_page(self.get_url)
        if html:
            # 解析網頁
            self.parse_page(html)
    def get_page(self,get_url):
        try:
            print('正在請求目標網頁....',get_url)
            response=requests.get(get_url,headers=self.head)
            if response.status_code==200:
                #print(response.text)
                print('請求目標網頁完成....\n 準備解析....')
                self.head['referer'] = get_url
                return response.text
        except Exception:
            print('請求目標網頁失敗，請檢查錯誤重試')
            return None


    def parse_page(self,html):
        print('目標信息正在解析........')
        doc=pq(html)
        self.title=doc('head title').text()
        print(self.title)
        url = doc('#player').attr('src')[14:]
        html=self.get_m3u8_1(url).strip()
        #self.url = url + '800k/hls/index.m3u8'
        self.url = url[:-10] +html
        print(self.url)
        print('解析完成，獲取緩存ts文件.........')
        self.get_m3u8_2(self.url)
    def get_m3u8_1(self,url):
        try:
            response=requests.get(url,headers=self.head)
            html=response.text
            print('獲取ts文件成功，準備提取信息')
            return html[-20:]
        except Exception:
            print('緩存文件請求錯誤1，請檢查錯誤')


    def get_m3u8_2(self,url):
        try:
            response=requests.get(url,headers=self.head)
            html=response.text
            print('獲取ts文件成功，準備提取信息')
            self.parse_ts_2(html)
        except Exception:
            print('緩存文件請求錯誤2，請檢查錯誤')
    def parse_ts_2(self,html):
        pattern=re.compile('.*?(.*?).ts')
        self.ts_lists=re.findall(pattern,html)
        print('信息提取完成......\n準備下載...')
        self.pool()
    def pool(self):
        print('經計算需要下載%d個文件' % len(self.ts_lists))
        self.ts_url = self.url[:-10]
        if self.title not in os.listdir():
            os.makedirs(self.title)
        print('正在下載...所需時間較長，請耐心等待..')
        #開啟多進程下載
        pool=Pool(16)
        pool.map(self.save_ts,[ts_list for ts_list in self.ts_lists])
        pool.close()
        pool.join()
        print('下載完成')
        self.ts_to_mp4()
    def ts_to_mp4(self):
        print('ts文件正在進行轉錄mp4......')
        str='copy /b '+self.title+'\*.ts '+self.title+'.mp4'
        os.system(str)
        filename=self.title+'.mp4'
        if os.path.isfile(filename):
            print('轉換完成，祝你觀影愉快')
            shutil.rmtree(self.title)


    def save_ts(self,ts_list):
        try:
            ts_urls = self.ts_url + '{}.ts'.format(ts_list)
            self.i += 1
            print('當前進度%d/%d'%(self.i,len(self.ts_lists)))
            urlretrieve(url=ts_urls, filename=self.title + '/{}.ts'.format(ts_list))
        except Exception:
            print('保存文件出現錯誤')




if __name__ == '__main__':
    #電影目標url：狄仁杰之四大天王
    url='https://v.qq.com/x/cover/r6ri9qkcu66dna8.html'
    #電影碟中諜5：神秘國度
    url1='https://v.qq.com/x/cover/5c58griiqftvq00.html'
    #電視劇斗破蒼穹
    url2='https://v.qq.com/x/cover/lcpwn26degwm7t3/z0027injhcq.html'
    url3='https://v.qq.com/x/cover/33bfp8mmgakf0gi.html'
    video_down(url2)

視頻緩存ts文件

這里都是一些緩存視頻文件，每個只有幾秒鐘播放，最后需要合并成一個mp4格式的視頻，就可以正常播放，默認高清下載 

注意這里的進度因為使用多進程下載，進度僅供參考，沒有確切顯示進度，可以進文件夾查看正常進度，可以理解為顯示一次進度，下載一個ts文件

實現效果

到此，關于“Python怎么實現抓取騰訊視頻所有電影”的學習就結束了，希望能夠解決大家的疑惑。理論與實踐的搭配能更好的幫助大家學習，快去試試吧！若想繼續學習更多相關知識，請繼續關注億速云網站，小編會繼續努力為大家帶來更多實用的文章！