如何用python爬取數據
1、find_all()的爬取
find_all():提取所有符合要求的數據,搜索當前tag的所有tag子節點,并判斷是否符合過濾器的條件。
2、用法
bs對象.find_all(標簽,屬性)
3、注意
bs對象、標簽和屬性使用都與find()一致。但是,從find_all()中提取的數據類型與find()是不同的。通過find()方法提取的數據類型通常是Tag,而通過find_all提取的數據類型通常是ResultSet。碰到了Tag類型的數據,我們可以通過Tag.text()來進一步提取純文本格式的內容,通過Tag['PropertyName']來提取特定屬性的值。當遇到了ResultSet類型的數據時,我就會想辦法通過遍歷進一步提取所有符合條件的數據。
4、實例
#最靈活的使用方式
li_quick=soup.find_all(attrs={'class':'item-1'})
forli_quickinli_quick:
print('最靈活的查找方法:',li_quick)
以上就是用python爬取數據的方法,在之前我們已經對find方法有所學習,那么本篇find_all()也是比較簡單和快速的爬取方法之一。更多Python學習教程請關注IT培訓機構:千鋒教育。