python應掌握的爬蟲所有技能
查看網頁源代碼和檢查元素
不要覺得很簡單,這兩招是爬蟲的根底。假如你熟習這兩招,簡單網站的爬蟲,你就學會了一半。
普通來說,檢查元素中看到的內容都會在網頁源代碼中呈現。今天我選取的這個例子,狀況特殊,檢查元素中看到的內容局部會在網頁源代碼中呈現。
下面是源代碼,我會有注釋的,跟著一起讀一讀
Talk is cheap. Show you the code
簡單點解釋就是檢查元素看到的樣子和Soup對象中元素的樣子差不多
爬多個城市的白天和夜間溫度
搜索不同的城市天氣,觀察網址的變化。
觀察網址的變化是爬蟲中最重要的本領之一
馬哥學習交流群