AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / server / 问题 / 1031504
Accepted
user3758232
user3758232
Asked: 2020-08-26 16:50:50 +0800 CST2020-08-26 16:50:50 +0800 CST 2020-08-26 16:50:50 +0800 CST

快速访问 Varnish 中的哈希集

  • 772

我正在开发一个 Varnish 管道,它为公共资源和受限资源提供服务。

由于对公共资源的访问占流量的绝大多数(> 99.9%),我想创建快捷方式来绕过身份验证令牌验证和其他此类非受限资源的事情 - 或者更好的是,只通过 authN/Z如果资源在某种黑名单中,则为路径。

此黑名单最多可包含大约 1M(在未来几年内)UUID4 条目。这样的纯文本文件在磁盘上占用大约 3.7Gb,因此具有良好 RAM 容量的机器应该能够将其全部保存在内存中。

我的问题是关于如何实现这个黑名单,所以查找速度非常快。我想到了一个“本机”哈希集,或者 Memcached,或者类似的方法。如果 Memcached 是分布式的,它很可能会减慢速度。有没有人实施过类似的方法?Varnish 有哪些工具可供我使用?

memcached varnish
  • 1 1 个回答
  • 79 Views

1 个回答

  • Voted
  1. Best Answer
    Thijs Feryn
    2020-08-27T00:32:06+08:002020-08-27T00:32:06+08:00

    在 Varnish 中,您无法直接访问对象的哈希值。

    但是,正如您所指出的,您可以将受限资源列表存储在键值存储中。

    Varnish Enterprise 中的 KVStore

    当我们谈论纯粹的执行速度时,Varnish Enterprise 有一个 KVStore 模块。此KVStore保存在本地内存中,并且可以在重新启动时从文件中重建。

    Varnish Enterprise 不是免费的,需要购买许可证密钥。如果您想降低企业版的入门门槛,可以在 AWS、Azure、GCP 和 OCI 上找到 Varnish Enterprise 的官方机器映像。适用于 Ubuntu 和 Red Hat。您无需支付预付费用,而是按小时收费。有关AWS 的示例,请参阅https://aws.amazon.com/marketplace/pp/B07L7HVVMF?ref_=srh_res_product_title

    Redis VMOD

    如果Varnish Enterprise不适合您,您也可以使用Carlos Abalde 的 Redis VMOD。它是免费的,它是开源的,并且做得很好。

    您甚至可以在 VCL 中运行LUA脚本,以在 Redis 中运行更复杂的逻辑。

    如果你担心 Redis 会拖慢你的速度,你可以限制连接数,甚至确保连接是共享的。

    • 1

相关问题

  • 应该使用哪个 PHP(操作码)缓存,为什么?

  • 使用多台服务器为网站提供服务的速度缺点是什么?

  • 快速查询大型数据集:MySQL MEMORY (HEAP) 引擎、MyISAM 或其他东西(例如 MemCached)

  • nginx 和 memcached 协同工作的效果如何?

  • “<service_name> 已死,但子系统已锁定”是什么意思?

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve