当前位置:AIGC资讯 > 数据采集 > 正文

爬虫如何找准url

在爬取网站时,许多人会弄错url。url分为两类,一类是静态的(get),一类是动态的(post)。

那么如何区分动静态呢?方法很简单,在爬取的页面查看网页源代码,用ctrl+f随便查找一个要爬取的数据,如果源代码里面有该数据,那么该网站就是你要找的静态url,如果没有那么该网站就是动态的url。动态url需要按fn+f12,然后如图所示找到即可。

更新时间 2023-11-08