网站日志蜘蛛爬取最多的是/news/content/目录,但网站打开这个目录是404
/news/content/目录页面没有东西,但/news/content/255.html页面就是文章了。网站目录是也要求能打开的吗
6 人参与回答
这是为什么啊,不应该啊
那就多发些外链啊
屏蔽一下,过两天就不会抓了
大佬能帮忙看看吗@推推蛙
那你可以用这个目录做点其他的
/news/content/目录页面没有东西,但/news/content/255.html页面就是文章了。网站目录是也要求能打开的吗
这是为什么啊,不应该啊
那就多发些外链啊
屏蔽一下,过两天就不会抓了
大佬能帮忙看看吗@推推蛙
那你可以用这个目录做点其他的