我们目前发现的问题,主要来源于此,建议先分析一下spider的抓取日志,看看是否抓取了你不希望搜索引擎收录的形式,如果有,robots掉它们可以节省大量的资源。 #[22] #域名 #[103] #网站 #[46] #description #[71] #链接 #[28] #[24] #[25] #[30] #[23] #[59] #[37] #[29] #[31] #更新 #SEO #SEO优化 #[4] #[15] #[16] #[20] #[32] #[42] #[43] #[47] #[53] #[54] #[57] #[61] #[67] #[70]
评论
分享

