由于百度的PC搜索和移动搜索共用同一个爬虫,所以不要进行屏蔽。爬虫在抓取后,会对页面进行识别,判断是PC页还是mobile页,因此建议站长使用规范的html5/xhtml协议语言来建设移动站,做到与PC站明显区分。

© 版权声明
评论 抢沙发

请登录后发表评论

    暂无评论内容