久久国产成人av_抖音国产毛片_a片网站免费观看_A片无码播放手机在线观看,色五月在线观看,亚洲精品m在线观看,女人自慰的免费网址,悠悠在线观看精品视频,一级日本片免费的,亚洲精品久,国产精品成人久久久久久久

分享

利用接口漏洞爬妹子圖 | JerryFu''s Blog

 谷源軒 2019-04-23

伸手黨請(qǐng)直接滑動(dòng)到文章末尾(:з」∠),。

2019.01.04 百度云地址已更新,,之前的被誰給舉報(bào)了,2333,。

2019.02.27 又被孤兒給舉報(bào)了,,這次直接被度娘直接封資源了,,發(fā)不粗來,文尾會(huì)附上新的下載攻略,,不用百度云

明明是很和諧友愛的資源,,又不是h的,憑什么把我的資源給封了,,哼,!

居然連我自己也無法下載!太過分了,!


前幾天玩游戲時(shí),,lol盒子右下角有條廣告,
廣告大概這個(gè)樣子

咦,,小姐姐,,還有cosplay,點(diǎn)進(jìn)去看看,。
哇,,發(fā)現(xiàn)一個(gè)好玩的網(wǎng)站,好多漂亮的妹子,,頁面打開很流暢,,點(diǎn)開后有的瀏覽頁面還有好聽的音樂,產(chǎn)品體驗(yàn)極佳,。

不過每組圖片只能看前幾張圖,,后面的圖只能看到縮略圖,如果想繼續(xù)看或者打包下載得花銀子,,通常要1-5rmb,。

ctrlC+ctrlV幾張后不樂意了,這么保存一來看不到全部圖片,,二來,,麻煩,太麻煩了,。
俗話說,,妹子是第一生產(chǎn)力,魯迅有云,,懶人創(chuàng)造美好世界,。
試試吧,看能不能發(fā)現(xiàn)點(diǎn)有趣的東東,。首先習(xí)慣性的看看html源碼,,blabla一堆,頭大,pass,。

從頁面源碼來看,,頁面應(yīng)該是前端渲染出來的,直接解析爬蟲爬的話會(huì)比較麻煩,。既然是前端渲染,,那再看看請(qǐng)求吧,首頁肯定是加載相冊(cè)列表,,沒啥大用處,,直接看加載具體某一相冊(cè)的請(qǐng)求結(jié)果,點(diǎn)開某一相冊(cè),,跳過圖片,,看看有沒有什么可用的接口,果然有,。

復(fù)制出來,瀏覽器走起,,請(qǐng)求后返回如下信息

很明顯是該相冊(cè)的詳細(xì)信息獲取接口,,可是怎么有些像是被編碼過的東西。既然被編碼了,,解碼出來瞧瞧,,postman走起。postman順利解析出結(jié)果

上下翻翻看,,發(fā)現(xiàn)了一個(gè)神奇的鏈接,,是個(gè)zip壓縮包,嗯,,有點(diǎn)意思,。

下載回來解壓,哈哈,,居然是該相冊(cè)的所有照片,。


看返回的結(jié)果,很明顯使用了jsonp,,于是接著試著減少參數(shù),,去除了返回結(jié)果中惱人的無用回掉前綴,最后簡化到僅剩一個(gè)參數(shù),,id,,這接口太呆萌了。

此外還發(fā)現(xiàn)了網(wǎng)頁上音樂的地址,。

至此該網(wǎng)站的“核心資產(chǎn)”已經(jīng)被扒的底褲都沒了,,2333,下面開始批量爬吧。
有兩種思路,,一種是利用主頁調(diào)用的獲取相冊(cè)列表參數(shù)接口來獲得相冊(cè)列表再通過列表爬壓縮包地址,,另外一種是直接從1開始依次嘗試到首頁最新的一個(gè)相冊(cè)對(duì)應(yīng)的id。最終決定采用第二種思路,,因?yàn)檫@樣即使首頁隱藏的相冊(cè)通過這種方式也能被發(fā)現(xiàn),。
開搞,建數(shù)據(jù)庫,,數(shù)據(jù)表,,為方便后續(xù)追加執(zhí)行,以及放在服務(wù)器上爬,,所以采用springboot配合異步調(diào)用來實(shí)現(xiàn),。一開始使用post方式進(jìn)行調(diào)用,結(jié)果嘗試抓取了一兩百條后到數(shù)據(jù)庫一看,,怎么這么多重復(fù)的啊,,而且怎么同一個(gè)id和我用postman直接調(diào)得到的結(jié)果不一致?很可能開反爬了,。

轉(zhuǎn)變思路,,postman采用的是get方式,所以程序試試也使用get方式進(jìn)行調(diào)用,,同時(shí)加入線程隨機(jī)睡眠時(shí)間和User-Agent請(qǐng)求頭,,以此模擬普通用戶的瀏覽器訪問行為。bingo,,順利的抓取到了正確的圖包名稱,、下載地址地址、音樂名稱,、音樂下載地址等信息,。

扔服務(wù)器上爬吧。等了大概十幾分鐘,,爬完后總共獲取到892條有效的圖包記錄,,202條有效的音樂記錄。

爬到地址后可不能算結(jié)束,,還得把真正的壓縮包都下載回來,,寫個(gè)批量下載的方法,服務(wù)器走起,,然后便開始吭哧吭哧的下載,,速度還行,能接近7MB/S,。

從上午11點(diǎn)開始到晚上9點(diǎn)下載完成,,總共耗時(shí)10個(gè)小時(shí),,從服務(wù)器上全部下載回來吧。

經(jīng)過漫長的等待后,,終于下載完,,寫了個(gè)腳本統(tǒng)計(jì)結(jié)果,最終:總共獲取到了46187張圖片,,大小36.5GB,。

又花了大半天的時(shí)間全部上傳到度盤,下面重點(diǎn)來了


度盤地址:

鏈接:https://pan.baidu.com/s/1IDgkG3dzfn5Zel6B2FskiQ
提取碼:5id9

其中包含每100個(gè)id為一個(gè)目錄進(jìn)行歸檔,,本想以下圖這樣的方式放出來,,方便查找和下載,卻因?yàn)槎饶飳?duì)外鏈關(guān)鍵詞過濾極其敏感,,只得作罷,。

為了便于各位預(yù)覽與對(duì)照查找,增加rar壓縮包,,內(nèi)含各個(gè)相冊(cè)的預(yù)覽圖,,每個(gè)相冊(cè)一張,此外還提供了對(duì)照excel文件,,可通過文件名查找到對(duì)應(yīng)的下載地址,,如果下載地址失效可以到上述度盤對(duì)應(yīng)的地址查找下載。

壓縮包的解壓密碼是:blog.hytcshare.com

自力更生下載法:

1,、序號(hào)為0-1285之間的資源

可直接使用url下載(工具可以用迅雷什么的,隨意),,下載地址包含在如下文件

tuwan0-1285資源對(duì)照表

想下載哪個(gè)直接戳哪個(gè)即可

2,、1286及以上的資源

該部分資源由于tuwan網(wǎng)接口更新,無法再獲取到壓縮包下載地址,,只能通過其他方式獲取到一張張大圖地址,。

大圖比較與前面的壓縮包的圖片質(zhì)量要差一些,好處的占空間小了,,有的看總比沒有強(qiáng)吧,,啊哈哈哈。

1)使用提供好的下載地址表

tuwan1286+資源對(duì)照表

下載的時(shí)候可以批量復(fù)制感興趣的相冊(cè)中圖片的下載地址,,然后到迅雷里新建批量下載,,記得勾選合并為一個(gè)任務(wù)組哦,下載體驗(yàn)接近于下載壓縮包,。

這種方式可能無法獲取最新的圖包,,因?yàn)槲也欢ㄆ诓艜?huì)更新一下,如需獲取最新的可以采用下面的方法

2)使用程序進(jìn)行下載

需要有一定的java web基礎(chǔ),,源碼都提供了,,隨便玩嘍

運(yùn)行及下載說明可以戳這里

    本站是提供個(gè)人知識(shí)管理的網(wǎng)絡(luò)存儲(chǔ)空間,所有內(nèi)容均由用戶發(fā)布,不代表本站觀點(diǎn),。請(qǐng)注意甄別內(nèi)容中的聯(lián)系方式,、誘導(dǎo)購買等信息,謹(jǐn)防詐騙,。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,,請(qǐng)點(diǎn)擊一鍵舉報(bào)。
    轉(zhuǎn)藏 分享 獻(xiàn)花(0

    0條評(píng)論

    發(fā)表

    請(qǐng)遵守用戶 評(píng)論公約

    類似文章 更多