網頁爬蟲 - 關于python beautifullsoup解析網頁內容丟失的問題？

問題描述

待解析頁面的部分代碼如第一幅圖所示，我自己寫的代碼及運行結果如第二幅圖所示?？吹揭呀浻写鹬魈釂柦馕鲰撁鎭G失是因為用的是lxml的解析方式，我想說我一直用的是html.parser的方式。希望各位大神不吝賜教~

問題解答

你們從來都不考慮javascript動態加載的嗎？

題主，如果你用Chrome F12看的話，里面是會有動態加載的內容的，而這些內容你直接請求頁面的url是拿不到的。建議你點右鍵查看網頁源代碼，對照著F12里面的內容來看，源代碼里沒有的內容，就去查看Network里的其他請求，看有沒有你需要的數據。