這篇文章將為大家詳細(xì)講解有關(guān)Python爬蟲(chóng)怎么爬取KFC地址,小編覺(jué)得挺實(shí)用的,因此分享給大家做個(gè)參考,希望大家閱讀完這篇文章后可以有所收獲。
我們提供的服務(wù)有:網(wǎng)站設(shè)計(jì)、網(wǎng)站制作、微信公眾號(hào)開(kāi)發(fā)、網(wǎng)站優(yōu)化、網(wǎng)站認(rèn)證、山陰ssl等。為數(shù)千家企事業(yè)單位解決了網(wǎng)站和推廣的問(wèn)題。提供周到的售前咨詢和貼心的售后服務(wù),是有科學(xué)管理、有技術(shù)的山陰網(wǎng)站制作公司
1、云計(jì)算,典型應(yīng)用OpenStack。2、WEB前端開(kāi)發(fā),眾多大型網(wǎng)站均為Python開(kāi)發(fā)。3.人工智能應(yīng)用,基于大數(shù)據(jù)分析和深度學(xué)習(xí)而發(fā)展出來(lái)的人工智能本質(zhì)上已經(jīng)無(wú)法離開(kāi)python。4、系統(tǒng)運(yùn)維工程項(xiàng)目,自動(dòng)化運(yùn)維的標(biāo)配就是python+Django/flask。5、金融理財(cái)分析,量化交易,金融分析。6、大數(shù)據(jù)分析。
隨著人們生活水平的提高,肯德基這類的快餐消費(fèi)的十分火爆,成為小朋友和年輕人的最愛(ài),我們到一個(gè)地方想要找到肯德基店面,會(huì)根據(jù)導(dǎo)航獲取肯德基地址,那你知道我們也可以使用python爬蟲(chóng)獲取KFC地址嗎?我們可以使用python爬蟲(chóng)的requests模塊模擬瀏覽器發(fā)送請(qǐng)求對(duì)肯德基官網(wǎng)的數(shù)據(jù)進(jìn)行爬取。
爬蟲(chóng)目標(biāo):使用requests模塊對(duì)肯德基官網(wǎng)的數(shù)據(jù)進(jìn)行爬取。
requests模塊作用:requests模塊是python一款原生的基于網(wǎng)絡(luò)請(qǐng)求的模塊,我們用來(lái)模擬瀏覽器發(fā)送請(qǐng)求。
1、導(dǎo)入requests模塊
# 調(diào)用requests模塊 import requests if __name__ == '__main__':
2、獲取要請(qǐng)求的url并發(fā)起請(qǐng)求
requests模塊請(qǐng)求功能來(lái)代替我們用戶在網(wǎng)頁(yè)上的鼠標(biāo)點(diǎn)擊操作,即使不用瀏覽器也能完成訪問(wèn)。
# 獲取要請(qǐng)求的url post_url = 'http://www.kfc.com.cn/kfccda/ashx/GetStoreList.ashx?op=keyword' kw = input('請(qǐng)輸入城市名: ') data = { 'cname': '', 'pid': '', 'keyword': kw, 'pageIndex': '1', 'pageSize': '10' } # UA偽裝 headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.141 Safari/537.36' }
3、獲取響應(yīng)數(shù)據(jù)并儲(chǔ)存數(shù)據(jù)
發(fā)起了請(qǐng)求,服務(wù)器自然會(huì)給回應(yīng),從服務(wù)器返回的數(shù)據(jù)中可以篩選出我們所希望得到的數(shù)據(jù)。
# 獲得請(qǐng)求返回?cái)?shù)據(jù)并保存 dict_text = response.text #雖然返回的是txt格式,但是這里保存成json格式,就可以使用自動(dòng)調(diào)整格式了,更方便查看 filename = kw+'市kfc分布.json' fp = open(filename,'w',encoding='utf-8') fp.write(dict_text) print('爬取成功~')
關(guān)于“Python爬蟲(chóng)怎么爬取KFC地址”這篇文章就分享到這里了,希望以上內(nèi)容可以對(duì)大家有一定的幫助,使各位可以學(xué)到更多知識(shí),如果覺(jué)得文章不錯(cuò),請(qǐng)把它分享出去讓更多的人看到。
文章標(biāo)題:Python爬蟲(chóng)怎么爬取KFC地址
文章起源:http://m.rwnh.cn/article0/gspcio.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供微信小程序、ChatGPT、搜索引擎優(yōu)化、網(wǎng)站收錄、外貿(mào)網(wǎng)站建設(shè)、小程序開(kāi)發(fā)
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)