我刚刚在几个实例中使用 AWS 设置了一个负载均衡器,因为搜索引擎爬虫正在关闭该网站(它有数百万页)。该网站的某些部分允许您登录,因此我选择了:
启用应用程序生成的 Cookie 粘性
一切正常。
我现在想知道这将如何影响我的 SEO 和爬虫。当我选择粘性负载平衡时,这是否意味着爬虫将卡在一台服务器上,从而破坏负载平衡器中的点?
任何建议将不胜感激。
我刚刚在几个实例中使用 AWS 设置了一个负载均衡器,因为搜索引擎爬虫正在关闭该网站(它有数百万页)。该网站的某些部分允许您登录,因此我选择了:
启用应用程序生成的 Cookie 粘性
一切正常。
我现在想知道这将如何影响我的 SEO 和爬虫。当我选择粘性负载平衡时,这是否意味着爬虫将卡在一台服务器上,从而破坏负载平衡器中的点?
任何建议将不胜感激。
由于 ELB 使用面向 cookie 的粘性,爬虫不应该被困在单个实例上。然而,由于它显然是您在这里处理的垃圾爬虫(因为它正在对您的网站进行 DoSing),它可能会愚蠢到坚持它获取的 cookie,在这种情况下您将被清理。
就我个人而言,我建议摆脱会话关联并修复您的应用程序,这样它就不需要它了——有很多方法可以进行共享会话存储。
应用程序生成的 Cookie 粘性意味着您的应用程序必须删除负载均衡器寻找以分配亲和力的 cookie。如果没有 cookie,请求分配到的服务器将是随机的。
除非您已修改您的应用程序以删除亲和性 cookie,否则您可能需要选中“启用负载均衡器生成的 Cookie 粘性”。这样,ELB 本身会在您设置的持续时间值内丢弃一个 cookie,并将用户保持在同一台服务器上,直到 cookie 过期。