<p>一个网站robots抓取的是301,一个是404</p><p><br></p>
.txt/.PHP 这啥文件,我看着这么别扭呢
查一查这个蜘蛛IP,你确定是百度蜘蛛吗?一般来说,蜘蛛不会爬取PHP后台
让更多人参与回答