爬虫每次爬完一个内容,会记录下IP,下次会直接去这个IP再访问,如果此时CDN节点已经撤了,则爬虫就无法拿到内容
不会影响收录! 但是频繁的切换域名和更换IP 是会影响收录的。如果担心,可以找 能支持蜘蛛抓取回源的CDN服务商。推荐下 加速中国 。 国内比较不错的CDN服务商 还有 蓝汛 网宿。欢迎分享,转载请注明来源:内存溢出
爬虫每次爬完一个内容,会记录下IP,下次会直接去这个IP再访问,如果此时CDN节点已经撤了,则爬虫就无法拿到内容
不会影响收录! 但是频繁的切换域名和更换IP 是会影响收录的。如果担心,可以找 能支持蜘蛛抓取回源的CDN服务商。推荐下 加速中国 。 国内比较不错的CDN服务商 还有 蓝汛 网宿。欢迎分享,转载请注明来源:内存溢出
评论列表(0条)