404页面需要用robots屏蔽么???

比如一个开源cms网站,用robots文件需要屏蔽那些文件,比如后台、脚本外还有什么需要屏蔽的,404页面需要屏蔽吗,大家平时需要屏蔽那些才好好集中权重呢??
2026年09月26日 12:11
有3个网友回答
网友(1):

不需要屏蔽,404页面本身就是为了让蜘蛛进行某个页面消失之后的了解,如果屏蔽404页面,那么就是阻止蜘蛛显示你自己网站没有此页面的问题。谢谢哦,帮忙投个票吧

网友(2):

这个真心不需要 屏蔽了干嘛呢 做个404页面 出现这个的时候让他显示就出来就好

网友(3):

不需要,蜘蛛遇到了404页面知道这个是什么意思,知道分辨的