7.Robots
打开是一个空白的(没错下面是一张空白图片)
查看源代码显示flag is not here,在后面加上robots.txt查看
robots协议也称爬虫协议、爬虫规则等,是指网站可建立一个robots.txt文件来告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取,而搜索引擎则通过读取robots.txt文件来识别这个页面是否允许被抓取,查看后发现禁止爬取的是flag_ls_h3re.php,再次访问这个页面
打开是一个空白的(没错下面是一张空白图片)
查看源代码显示flag is not here,在后面加上robots.txt查看
robots协议也称爬虫协议、爬虫规则等,是指网站可建立一个robots.txt文件来告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取,而搜索引擎则通过读取robots.txt文件来识别这个页面是否允许被抓取,查看后发现禁止爬取的是flag_ls_h3re.php,再次访问这个页面
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/545100.html
如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!