目標：奪取山賊熊窩內所有的圖！
各位看倌、這是抓取論壇所需小顏美圖解說～
有人開了全球爆料發不會，SO……俺也不甘示弱、
俺要揭露PO圖集團是如何佔據硬碟空間，他們累積的美圖東東又是如何隱藏起來的，
俺要起他們的底，俺要爆他們的料！
首先、俺要爆的是紮營論壇山頭之山賊世家所累積的圖子圖孫們，俺要全面曝光他！！
哈、哈、看倌您知、上面的都是俺開玩笑啦～別認真俺喔
俺秉持著好吃道相報的人品，教一下大夥如何一次大量図を盗む方法！（中文不敢說啦～）
ㄚ呀呀～這說法太過嚴重了。
換個說法就是如何一次大量抓取or備份攝影作品集中所有的Thumbnails圖（一覽縮圖）
各位知道、俺已完全獲得山賊與老僧兩位前輩的厚愛，授權俺可以使用其所有美圖。
俺很感激他們……本想以身相許……但老僧嫌俺太幼齒，山賊背後的熊太后又太靠勢。
只好天天邊吃大餐邊在腦海中意淫感謝他們的犧牲！（嘿、嘿、嘿）
啥！？你說不知道俺、山賊與老僧三人泣鬼神、噁心瀝血的三角戀關係！？
該打你的小屁屁～給俺去這裡進修一下再回來。（7PuPu 中）
當您的美圖被上頭認可時，在個人資料內就有其專屬榮耀的攝影作品集。
老僧與山賊這兩位宇宙無敵強人當然都有其專屬的攝影作品集！
ps：Thumbnails圖（預覽縮圖）接下俺就一律以「覽圖」尊稱呦～（請勿淫邪的唸！）
於是～如何將這高人的攝影作品集內，所有的「覽圖」下載至自個圖庫夾內收藏？
這就是此帖教學的目的。
當然、看倌若有攝影作品集也可參考一下，
自個備份帶有論壇id圖號的圖檔。
▲可口但有時會灼傷眼睛～驚天駭地、大膽配色的山賊窩美圖集散地。
點擊進入攝影作品集，就可見到依最新時間序排列的作品「覽圖」了。
「覽圖」基本以橫 or 高上限為500像素72dpi的小圖為基準。
較常見的規格就是橫圖 500x281 或 直圖 281x500 這兩個尺寸大小。
在俺的改圖的過程中，其實只要這個尺寸也就足以挑片囉～
要將這些可口的小甜點收納，若是一一另存圖檔的方式那就傻逼了～
分析：摸清山賊熊窩所有的密道！
在此俺推薦一款強力、免費、Web 網路訊息偵測工具軟體：Fiddler
Fiddler 能監控與分析網頁上所發出與接收到的HTTP 與 HTTPS 封包及內容。
Fiddler的開發者Eric Lawrence原是在微軟公司擔任核心開發者時所搞的小玩意兒。
後來Fiddler逐漸搞出名號，國外科技高手想當然而，接著出師跳出微軟自立門戶。
強者他繼續把Fiddler的功能逐一加強，在2012年9月時這一款已被世人認定Web開發者必備的工具Fiddler被Telerik給相中收購，收購後的EricLaw把Fiddler的後續研發權交出由接任的Telerik開發團隊接手，EricLaw自此退居成為Fiddler開發的幕後指導角色。（應該爽拿一大筆，現住豪宅悠遊過生活…）
不過、俺很敬佩EricLaw這傢伙，在他與Telerik訂下交易協議時，協議內容中記載往後的Fiddler務必還是免費軟體。而這心歷旅程您可在他所寫Fiddler—A Segue文中可一窺究竟！（http://www.telerik.com/blogs/fiddler-a-segue）
俺從第一代開始就一直愛用到現今的第四代，在其中有期待Fiddler能加入的新功能或發覺到bug時俺也會去其論壇提出，哪怕俺那彆腳的英文，EricLaw 也必定會親切的回覆。如今已喪失Fiddler主導權的他，除解答問題外他也接受各種新建言並答允會轉交給開發團隊。
若要把它所有的功能與運用都介紹完，那俺也許足足可以寫滿一本厚書～
Fiddler 的安裝與操作方式，俺就不在此詳介了。（請自個估哥哥一下）
Fiddler - Free Web Debugging Proxy - Telerik
若覺得還要填東東才能下載麻煩，可到此FILEHIPPO網站
目前最新版本為：Fiddler4.6.20173.38786
支援瀏覽器：Edge、IE、FirFox、Chrome
▲開啟Fiddler，網頁瀏覽器進入論壇首頁～啪、一堆網頁幕後交易瞬間曝光！
在咱們進入到論壇首頁的portal.php 前掛了一堆google的social-static 、還有右側中央顯示response body is encoded.響應主體是被編碼的等等，這些附加或技術上的東東，俺就很負責的不解說。（哼、怎樣？不然您出資俺來寫個論壇駭客攻略ㄚ～）
這還是…僅只點入論壇首頁沒做任何事下，Fiddler就已Capturing捕捉到84個Processes 程序的動作。相信了吧、一個網頁要私底下在您未察覺下搞鬼是多麼容易做到的事啊～
沒防火牆等安全措施，沒事、您再亂點一些動作文藝片網站或私貨連結看看ㄚ～
▲網頁點入山賊熊攝影作品集內，Fiddler顯示出一堆「覽圖」的網址出來了。
=gallery_album&uid=446915&page=2&autoload
看到這一行訊息了吧！表示攝影作品集（gallery_album）的山賊熊使用者ID（uid=446915），目前網頁已滾滑至第二頁了現處自動載入模式。（很好理解不是嗎？）
俺的UID是426945，山賊熊是446915俺的後輩啦～以後要改口叫他熊弟啦！！
你瞧咱倆多有緣份呀！只有兩個數字不同中間數字都是69，疑？俺那邪惡的頭腦…又想歪去了～（堅決否認曖昧啦！）
六位數字的圖檔名稱，表示你這張圖的主key id 編號，由此可證（？）論壇至此圖已收錄了二十八萬多張以上的圖了。（也別認為很多啦～在大數據時代此數據根本無法跟估哥哥比）
俺也常搬移百萬以上的檔案數量，如你有Mac 主機去算算系統共有多少的檔案數看看。
疑？六位數字那論壇上限不就不能超過百萬張嗎？會不會跟千禧年一樣，是工程師在初始設定時始料未及的數量呢？（哎呀、俺操心過頭囉～）
其實～解決也蠻簡單的，寫個小程式將十進位數字全轉成十六進位數字，轉換取代圖檔更名一下，容量倍增近似無限～完事結案。
目前、俺已拉了兩頁量的「覽圖」，就讓咱們繼續往下拉！！
▲拉～挖到底了，可以去驗收數據啦～（花滿的蒼空就是熊兄的處女作？？）
嘻～熊兄取的好名ㄚ！俺比較邪惡…只記得一位讓許多人瘋狂的女子名叫蒼井空。
喂、蒼空姊姊旁邊的綠色東東是啥？還自誇是巨？？XD、看那噁心挺立狀這不令人想入非非還真難！！（熊兄呀、熊熊呀～你是抱持著何種居心PO圖的啦～）
▲最後一張的圖226374，從圖編號順序可得知此圖就是熊兄最剛開始PO上的圖。
226374的下一張PO圖一下就跳到230002，可見熊兄事隔許久才PO第二張，不然就是論壇有舉辦活動瞬間大夥拼命PO圖。有興趣的人可查一下這兩張圖的時間點，看是熊兄懶惰呢？還是論壇太活絡呢？（笑）
跟上圖比對一下，在左下角處已沒有Capturing這捕捉字串了，原因是俺已經把它捕捉動作給中斷了，免得持續進來一些無用的訊息。（只要滑鼠點擊那裡，就可開啟或關閉捕捉動作）
▲密密麻麻一堆，若想要把所有相關的圖檔給它明顯辨識的話……
工具列上有望眼鏡Find可按一下，跳出查詢小視窗在Find空欄處打上.jpg，螢光加亮Highlight就選黃色即可。
有沒有看到右側俺現有勾選Filters篩選功能，等到Fiddler您熟練後直接執行此處的設定，選定只要顯現圖檔Show only IMAGE/*（還可設捕捉圖檔大小的範圍與網址等等）就會只顯示你篩選的條件出來，會更加便利喔～
▲黃色螢光一加，立刻鮮明起來。（加螢光此動作也不是必需的啦～）
▲左邊下面黑底欄框處可輸入指令執行。（有許多QuickExec指令，不明時下help可參考）
這裡我們目的只要所有的圖檔而已，在此下select image 指令去選取。
▲select image 後所有圖的Sessions 都被反黑選取了。
▲這些被選取的圖檔路徑URL才是我們所要的。
在視窗內選取隨意處按滑鼠右鍵然後Copy -- Just Url 複製下所有圖檔路徑。
▲開啟此空白文字檔，再將複製下來的圖檔路徑貼回此處。
一道一道清純可口的小賊熊們就這樣赤裸裸地陳列著。（口水直滴！）
獵取：派出老鷹去抓小賊熊們！
接下、就是如何去下載叨回它們啦～
也許有人會說在俺拉圖頁時，小圖就已經Cache下載在暫存區了去那撈就好了，幹嘛還要重新去下載呢？
喔～俺是沒去瞧Cache但想必那裡不會是如上圖的乖乖附有正確的圖編號吧！？
以往俺慣常用自行開發的程式去下指令抓取，由於不想曝光俺的祕密搞怪東東，且加上那下載方式也較特異奔放無UI界面。（反正有一堆軟體都可做到）
就隨意用手上一款可支援Https又免費的下載軟體來做示範。
EagleGet v2.0.4.25
EagleGet Portable v2.0.4.27
免安裝版(Portable)：http://dl.eagleget.com/latest/EagleGetProtable_2.0.4.27.zip
俺一向討厭安裝版，故選免安裝版解壓縮執行EagleGet.exe就鷹姿展現囉～
▲多帥的鷹眼畫面。
▲依照上圖所示匯入剛才所建的文字檔。
▲呵、寫這時當下目前有487隻小熊仔，當然全選進入俺的口袋。
▲同時五道鷹爪進程下載，都是些10～40k的小檔瞬間就全部收納。
山賊熊的所有家當起底，おいしく頂きました！
先回到攝影作品集上去點擊魯夫的咆哮這張圖就可進入此圖的主帖內。
在網址列上可得出其上此圖的主帖路徑，關鍵 tid 數不就是圖檔編號！！
那～往後要進入哪張圖的主帖內，只要換哪張圖的編號就可了。
▲看看變成這樣～那一切可能就有太多的玩法了！（呵、呵、）
嘿、嘿、嘿、從此俺要選圖或大圖時就不用去攝影作品集那辛辛苦苦地捲頁撈圖了。
尤其像老僧那拼命三郎PO圖狂，往往要費時才能找到俺所要的！！
時時刻刻美圖入手、一切都是剛剛結束！
XD～太爽快了！！
ps1：此帖目的是教學如何下載自個攝影作品集內的所有縮圖。
ps2：圖是歸屬原作者若未獲得允許，請勿擅自取用喔～
ps3：感謝山賊熊兄的大度，容忍俺的撒野。（真心感謝！）
進階：接下細部完整徹底分析！
主帖內的小圖：
forum/201709/23/215054ynoec94bnb45bz4c.jpg.thumb.jpg
主帖內的大圖：
forum/201709/23/215054ynoec94bnb45bz4c.jpg
----- 待續 ----
沒有留言:
張貼留言