小編給大家分享一下Python怎么爬取某平臺短視頻,相信大部分人都還不怎么了解,因此分享這篇文章給大家參考一下,希望大家閱讀完這篇文章后大有收獲,下面讓我們一起去了解一下吧!
本文的文字及圖片來源于網(wǎng)絡,僅供學習、交流使用,不具有任何商業(yè)用途,如有問題請及時聯(lián)系我們以作處理。
基本開發(fā)環(huán)境
Python 3.6
Pycharm
相關模塊的使用
import os import requests
安裝Python并添加到環(huán)境變量,pip安裝需要的相關模塊即可。
爬取搞笑趣味欄目的視頻內(nèi)容。
首先需要明確一點,好看視頻網(wǎng)站加載方式是懶加載的方式,需要你下滑網(wǎng)頁才會加載出新的內(nèi)容
加載出來的內(nèi)容里面有音頻播放地址以及標題。
內(nèi)容比較簡單,看代碼就行
import os import requests url = 'https://haokan.baidu.com/videoui/api/videorec?tab=gaoxiao&act=pcFeed&pd=pc&num=20&shuaxin_id=1612592171486' headers = { 'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36' } response = requests.get(url=url, headers=headers) json_data = response.json() videos = json_data['data']['response']['videos'] for index in videos: title = index['title'] play_url = index['play_url'] video_content = requests.get(url=play_url, headers=headers).content path = 'video\\' if not os.path.exists(path): os.mkdir(path) with open(path + title + '.mp4', mode='wb') as f: f.write(video_content) print('正在保存:', title)
以上是“Python怎么爬取某平臺短視頻”這篇文章的所有內(nèi)容,感謝各位的閱讀!相信大家都有了一定的了解,希望分享的內(nèi)容對大家有所幫助,如果還想學習更多知識,歡迎關注創(chuàng)新互聯(lián)行業(yè)資訊頻道!
名稱欄目:Python怎么爬取某平臺短視頻-創(chuàng)新互聯(lián)
文章位置:http://www.sd-ha.com/article22/dojhcc.html
成都網(wǎng)站建設公司_創(chuàng)新互聯(lián),為您提供品牌網(wǎng)站建設、軟件開發(fā)、關鍵詞優(yōu)化、企業(yè)網(wǎng)站制作、手機網(wǎng)站建設、網(wǎng)站內(nèi)鏈
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)