久久国产成人av_抖音国产毛片_a片网站免费观看_A片无码播放手机在线观看,色五月在线观看,亚洲精品m在线观看,女人自慰的免费网址,悠悠在线观看精品视频,一级日本片免费的,亚洲精品久,国产精品成人久久久久久久

分享

Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名、星級等

 xxcc140 2021-04-08

前言

國內(nèi)大學(xué)最新排名,,北大反超,,浙大僅第四,,中科大跌至第八

時(shí)隔五年,,“雙一流”大學(xué)即將迎來首次大考,,這也是繼改變高校評斷標(biāo)準(zhǔn)之后,,第一次即將以官方對外發(fā)布,,自然是引來了許多人的關(guān)注。最近,,有許多不同機(jī)構(gòu)發(fā)布的國內(nèi)高校排名,,但彼此之間的差異很大,網(wǎng)友之間的爭議也很大,。

私信小編01即可獲取大量Python學(xué)習(xí)資料

項(xiàng)目目標(biāo)

爬取高三網(wǎng)大學(xué)排名,,并保存

目標(biāo)網(wǎng)址

http://m.gaosan.com/gaokao/265440.html
Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名、星級等

基本環(huán)境配置

  • python 3.6 pycharm

爬蟲代碼

導(dǎo)入工具

import requestsimport parselimport csv

請求網(wǎng)頁數(shù)據(jù)

Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名,、星級等
Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名,、星級等

?

url = 'http://m.gaosan.com/gaokao/265440.html'headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'}response = requests.get(url=url, headers=headers)response.encoding = response.apparent_encoding

爬取數(shù)據(jù)

selector = parsel.Selector(response.text)trs = selector.css('#page tr')for tr in trs:    dit = {}    ranking = tr.css('td:nth-child(1)::text').get()    dit['名次'] = ranking    school = tr.css('td:nth-child(2)::text').get()    dit['學(xué)校名稱'] = school    score = tr.css('td:nth-child(3)::text').get()    dit['綜合得分'] = score    star = tr.css('td:nth-child(4)::text').get()    dit['星級排名'] = star    level = tr.css('td:nth-child(5)::text').get()    dit['辦學(xué)層次'] = level    csv_writer.writerow(dit)
Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名、星級等

?

保存數(shù)據(jù)

f = open('排名.csv', mode='a', encoding='utf-8', newline='')csv_writer = csv.DictWriter(f, fieldnames=['名次', '學(xué)校名稱', '綜合得分', '星級排名', '辦學(xué)層次'])f.close()

運(yùn)行代碼,,效果如下圖

Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名,、星級等

?

Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名、星級等

?

Python爬蟲練習(xí):爬取800多所大學(xué)學(xué)校排名,、星級等

?

    本站是提供個(gè)人知識管理的網(wǎng)絡(luò)存儲空間,,所有內(nèi)容均由用戶發(fā)布,不代表本站觀點(diǎn),。請注意甄別內(nèi)容中的聯(lián)系方式,、誘導(dǎo)購買等信息,謹(jǐn)防詐騙,。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,,請點(diǎn)擊一鍵舉報(bào)。
    轉(zhuǎn)藏 分享 獻(xiàn)花(0

    0條評論

    發(fā)表

    請遵守用戶 評論公約

    類似文章 更多