User-Agent 的值包含操作系统版本、浏览器版本等信息，如果爬虫发起请求的时候不携带User-Agent，那么就很难得到一个正确的response（响应）。 第一步： 打开一个浏览器，随便到一个网页，比如百度一下首页，空白处点击右键，然后点击检查，在点击Network（网络） 第二步： 刷新一下网页 ，然后Name下面随便点一个，然后找到Request Headers（请求标头） 最后 User-Agent的值 就获取到了 浏览器diy操作系统url