創(chuàng)新互聯(lián)www.cdcxhl.cn八線動(dòng)態(tài)BGP香港云服務(wù)器提供商,新人活動(dòng)買多久送多久,劃算不套路!
目前創(chuàng)新互聯(lián)公司已為1000多家的企業(yè)提供了網(wǎng)站建設(shè)、域名、網(wǎng)絡(luò)空間、網(wǎng)站托管運(yùn)營、企業(yè)網(wǎng)站設(shè)計(jì)、大城網(wǎng)站維護(hù)等服務(wù),公司將堅(jiān)持客戶導(dǎo)向、應(yīng)用為本的策略,正道將秉承"和諧、參與、激情"的文化,與客戶和合作伙伴齊心協(xié)力一起成長,共同發(fā)展。這篇文章將為大家詳細(xì)講解有關(guān)Python如何爬取視頻,小編覺得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。
1.完成這個(gè)程序代碼需要的Python模塊
需要的Python模塊有:requests模塊、bs4模塊、threading模塊、sys模塊、urllib模塊、os模塊
下面簡(jiǎn)要的介紹一下在這個(gè)程序中所使用的Python模塊的作用:
requests模塊:主要用于爬取網(wǎng)頁數(shù)據(jù);
bs4模塊:主要用于解析爬取得到的數(shù)據(jù)信息;
threading模塊:主要用于下載所有的.ts文件,提高下載速度;
sys模塊:如果程序中間出現(xiàn)錯(cuò)誤,終止整個(gè)程序代碼,使用sys.exit()方法;
urllib模塊:用于對(duì)用戶輸入的信息進(jìn)行編碼,主要使用urllib.parse.urlencode()方法;
os模塊:用于得到一個(gè)文件夾下面所有的文件(或者文件夾)(在這里是得到文件),使用os.listdir()方法。
首先,我們要來到這個(gè)網(wǎng)址下面:YM影視
在搜索欄上面輸入一部視頻的名稱:小編在這里輸入的是:斗羅大陸,點(diǎn)擊搜索按鈕,來到下面的畫面:
接下倆我們需要得到的內(nèi)容就是這些了,按電腦鍵盤的F12鍵,來到開發(fā)者工具,可以發(fā)現(xiàn),這些內(nèi)容和視頻的鏈接在這個(gè)標(biāo)簽下面;
實(shí)現(xiàn)代碼:兩個(gè)函數(shù)
def get_video_content(): # 得到匹配到的相關(guān)電影(或者電視?。┑拿Q、鏈接、簡(jiǎn)介的列表 video=input('請(qǐng)輸入你想看的電影或者電視劇名稱:') keyword=parse.urlencode({'k':video})[2:] # 對(duì)輸入的名稱進(jìn)行編碼 url='http://ymystv.com/seacher-%s.html'%(keyword) headers={'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.25 Safari/537.36 Core/1.70.3756.400 QQBrowser/10.5.4039.400'} response=requests.get(url=url,headers=headers) soup=BeautifulSoup(response.text,'lxml') list_1=soup.select('li.activeclearfix') # list_1列表里面有的內(nèi)容為 電影名稱(或者電視劇名稱)、鏈接、簡(jiǎn)介等 return list_1 def get_video_contents(list_1:list): # 進(jìn)一步處理得到的內(nèi)容(解析) list_url=[] # 視頻的鏈接 listName=[] # 視頻名稱 for i in range(len(list_1)): url=list_1[i].select('div.detail>h4>a')[0]['href'] url='http://ymystv.com/'+url[url.rfind('./')+2:] list_url.append(url) name=list_1[i].select('div.detail>h4>a')[0].text listName.append(name) print('【{}】-{}'.format(i+1,name)) # 電影或者電視劇的名稱 str1=list_1[i].select('div.detail>div.m-description')[0].text # 電影或者電視劇的簡(jiǎn)介 # 對(duì)簡(jiǎn)介進(jìn)行字符串處理,并按照每行最多50個(gè)字符輸出 str1='簡(jiǎn)介:'+str1[str1.find('簡(jiǎn) 介 :')+6:].strip() # 去空格 for j in range(len(str1)//50+1): print('{}'.format(str1[j*50:(j+1)*50])) # print('{}'.format(str1)) # 沒處理的輸出結(jié)果 print('*'+'--'*36) id=int(input('請(qǐng)輸入你想看的序號(hào):')) return list_url[id-1],listName[id-1]
運(yùn)行結(jié)果:
之后就是選擇我們想看的視頻了,我選擇的是 龍王傳說 也就是上面的序號(hào)6,雖然我沒有顯示出它,
點(diǎn)進(jìn)去之后,可以發(fā)現(xiàn),這里有許多集,現(xiàn)在需要的就是這些集數(shù)的鏈接了。
跟上面一樣,按電腦鍵盤F12鍵,來到開發(fā)者模式,可以發(fā)現(xiàn),集數(shù)在這個(gè)標(biāo)簽下面;
這樣我們就可以得到這些視頻的播放鏈接了,那怎樣下載呢?我們點(diǎn)擊NetWork下面的XHR刷新一下,可以發(fā)現(xiàn),在這里有一個(gè)視頻接口(你懂的),只要將這個(gè)接口和剛才我們得到的一個(gè)視頻鏈接組合起來,在瀏覽器上打開,就是一個(gè)json數(shù)據(jù),如下:
我們只需將這個(gè)鏈接得到,并且得到里面使用的.ts文件的下載鏈接即可。
4.下載所有的.ts文件或者給出.mp4文件的下載鏈接這里我運(yùn)用的多線程下載,不過并不是所有的.ts文件都能播放的,但是合并成.MP4之后,是可以的;如果得到是一個(gè).MP4文件的下載鏈接,我會(huì)將它直接輸出,因?yàn)橐粋€(gè).mp4文件比較大,運(yùn)用Python爬蟲下載花費(fèi)的時(shí)間比較多,所以這還不如直接運(yùn)用瀏覽器下載。
5.合并所有.ts文件import os path=input('請(qǐng)輸入需要合并的絕對(duì)路徑:') list_1=[path+'\{}.ts'.format(str(ij)) for ij in sorted([int(str_1[:str_1.find('.')]) for str_1 in os.listdir(path)])] for str_2 in list_1: with open(file=str_2,mode='rb') as f: content=f.read() with open(file='./龍王傳說_1.mp4',mode='ab') as fp: fp.write(content)
合并保存的那個(gè).MP4文件的名稱需要我們自己手動(dòng)修改一下,當(dāng)然讀者也可以改動(dòng)一個(gè)代碼,不過,我覺得我的這個(gè)合并還不算好,播放的MP4還是有一些問題的,讀者如果有什么更好的合并方法,可以在下方留言,謝謝!
6.運(yùn)行結(jié)果和最終代碼運(yùn)行結(jié)果:
運(yùn)用Python爬蟲下載視頻
網(wǎng)頁名稱:Python如何爬取視頻-創(chuàng)新互聯(lián)
本文鏈接:http://m.rwnh.cn/article20/ddsoco.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供用戶體驗(yàn)、網(wǎng)站設(shè)計(jì)、小程序開發(fā)、網(wǎng)站設(shè)計(jì)公司、品牌網(wǎng)站建設(shè)、微信小程序
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容