面向移动搜索的网站建设之：良好收录【合理的返回码】??????? spider在进行抓取和处理时，是根据http 协议规范来设置相应逻辑的，常用的几个返回码如下： ? 404，会认为网页已失效已删除，通常在索引中删除，短期内spider再次遇到也不会抓取。建议内容删除、网页失效等的情况下使用404返回码，告知spider该页面已失效。同时网站中尽量减少死链的累计。如果网站临时关闭或抓取
