爬虫模拟抓取工具
当前已使用738230次数
按 Ctrl+D 收藏本页面
添加到常用
分享该工具
请选择要模拟的爬虫,默认使用当前浏览器发起请求

抓取结果:页面发生了跳转

当前浏览器
2021-03-02 20:07:49
HTTP/1.1, 302 Moved Temporarily

Cache-Control: max-age=86400, privae
Connection: Keep-Alive
Content-Length: 161
Content-Type: text/html
Date: Tue, 02 Mar 2021 12:07:49 GMT
Expires: Wed, 03 Mar 2021 12:07:49 GMT
Location: https://www.baidu.com/
Server: bfe/1.0.8.18

欲查看完整的URL跳转情况,请使用 HTTP状态检测 工具来查看。

最近使用:

工具说明
爬虫模拟抓取工具,可以模拟百度蜘蛛、Googlebot、搜狗蜘蛛、360蜘蛛、Bingbot等常见搜索引擎的网页抓取行为。利用该工具抓取指定的网页,可以查看网页的响应头信息以及源文件内容。

扫描关注公众号