Python爬虫 BeautifulSoup解析网页 爬取内容为None

Python爬虫  BeautifulSoup解析网页 爬取内容为None

问题描述:

爬取1688网站,利用BeautifulSoup方法解析网页 解析内容打印是完整的:
img
在抓取标签时,.find()打印出内容即为None:
img
请教各位,是我方法不对,还是反爬虫了,那为什么可以解析到内容,不能抓取呢?

你抓的频率太快,IP被墙了

看下源代码里面,有没有next-loading-component,有的html是通过js生成的