AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / user-359577

user3758232's questions

Martin Hope
user3758232
Asked: 2020-09-10 10:37:14 +0800 CST

Varnish:有条件地调用 vcl_pipe

  • 0

根据我的理解,通过查看Varnish 管道图,vcl_pipe只能调用 from vcl_recv。

我正在设置一个 VCL,以便根据某些条件(包括访问控制)从后端提供二进制资源。

到目前为止,我想到的设置方式是:检查我所有的检查,包括搬出vcl_recv;如果为流式传输资源设置了条件,则设置一个标志;重新开始交易;首先检查标志vcl_recv,如果设置,调用vcl_pipe。

唯一的主要问题是我不知道如何设置http.request一个请求标头无法伪造的标志(例如 in )。因此,了解我的 VCL 的调用者可以轻松设置管道标志并绕过所有检查。

另一种选择是保留所有检查,vcl_recv但这可能很笨重,甚至是不可能的。

建议将不胜感激。谢谢。

varnish
  • 1 个回答
  • 36 Views
Martin Hope
user3758232
Asked: 2020-08-26 16:50:50 +0800 CST

快速访问 Varnish 中的哈希集

  • 0

我正在开发一个 Varnish 管道,它为公共资源和受限资源提供服务。

由于对公共资源的访问占流量的绝大多数(> 99.9%),我想创建快捷方式来绕过身份验证令牌验证和其他此类非受限资源的事情 - 或者更好的是,只通过 authN/Z如果资源在某种黑名单中,则为路径。

此黑名单最多可包含大约 1M(在未来几年内)UUID4 条目。这样的纯文本文件在磁盘上占用大约 3.7Gb,因此具有良好 RAM 容量的机器应该能够将其全部保存在内存中。

我的问题是关于如何实现这个黑名单,所以查找速度非常快。我想到了一个“本机”哈希集,或者 Memcached,或者类似的方法。如果 Memcached 是分布式的,它很可能会减慢速度。有没有人实施过类似的方法?Varnish 有哪些工具可供我使用?

memcached varnish
  • 1 个回答
  • 79 Views
Martin Hope
user3758232
Asked: 2020-08-08 09:44:54 +0800 CST

Varnish 禁令的范围和效用

  • 0

我需要使与已删除/未发布或更新的资源相关的一组 URL 的缓存无效。例如,如果我的资源 UUID 是1234abcd我想在/resource/1234abcd/*.

我知道在 Varnish 中无法使用 来做到这一点purge,但可以通过禁令来做到这一点。但是我很难理解禁令是如何运作的。

例如,如果我更新资源1234abcd并禁止其所有衍生物,我假设下一个客户端请求/resource/1234abcd/derv1将是一个新的后端获取,并且新资源将被缓存。我会有两个版本的同一个衍生品,一个被禁止,一个没有(直到旧版本到期,最终它的禁令也到期)?如果我的资源有很长的到期日期,我可能会积累很多我宁愿立即清除的缓存资源禁令。

在软件设计级别上,留下无法访问的资源而不是实施基于正则表达式的清除有什么用处,这似乎更易于管理?

另外,我在我的开发环境中实施了禁令,我看到禁令只在被请求后一分钟左右生效。这是否与禁令潜伏者或其他一些时间设置有关?

谢谢。

varnish
  • 1 个回答
  • 668 Views
Martin Hope
user3758232
Asked: 2016-06-09 07:39:57 +0800 CST

Pip + virtualenv + Redhat SCL + proxy = 不工作

  • 0

我在 Redhat Enterprise 6 中设置了一个基于 Python 2.7 的 virtualenv(默认情况下附带 2.6.x)。

我安装了 Python 的 SCL 2.7 版本,然后创建了 virtualenv:

$ scl enable python27 bash
$ cd /my/project
$ virtualenv -v --clear --extra-search-dir=/opt/rh/python27/root/usr/bin/ --python=/opt/rh/python27/root/usr/bin/python virtualenv
$ source virtualenv/bin/acticvate

到目前为止,一切都很好。当我尝试在我机构的代理后面运行 pip 时,问题就开始了:

$ pip install Werkzeug --proxy proxy.example.org:3128                       
Downloading/unpacking Werkzeug                                                 
Cleaning up...                                                                 
Exception:                                                                     
Traceback (most recent call last):                                             
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/basecommand.py", line 134, in main
    status = self.run(options, args)                                           
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/commands/install.py", line 236, in run
    requirement_set.prepare_files(finder, force_root_egg_info=self.bundle, bundle=self.bundle)
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/req.py", line 1085, in prepare_files
    url = finder.find_requirement(req_to_install, upgrade=self.upgrade)        
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/index.py", line 201, in find_requirement
    page = self._get_page(main_index_url, req)                                 
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/index.py", line 554, in _get_page
    return HTMLPage.get_page(link, req, cache=self.cache)                      
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/index.py", line 671, in get_page
    resp = urlopen(url)                                                        
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/download.py", line 176, in __call__
    response = self.get_opener(scheme=scheme).open(url)                        
  File "/opt/rh/python27/root/usr/lib64/python2.7/urllib2.py", line 404, in open
    response = self._open(req, data)                                           
  File "/opt/rh/python27/root/usr/lib64/python2.7/urllib2.py", line 422, in _open
    '_open', req)                                                              
  File "/opt/rh/python27/root/usr/lib64/python2.7/urllib2.py", line 382, in _call_chain
    result = func(*args)                                                       
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/download.py", line 155, in https_open
    return self.do_open(self.specialized_conn_class, req)                      
  File "/opt/rh/python27/root/usr/lib64/python2.7/urllib2.py", line 1183, in do_open
    h.request(req.get_method(), req.get_selector(), req.data, headers)         
  File "/opt/rh/python27/root/usr/lib64/python2.7/httplib.py", line 1001, in request
    self._send_request(method, url, body, headers)                             
  File "/opt/rh/python27/root/usr/lib64/python2.7/httplib.py", line 1035, in _send_request
    self.endheaders(body)                                                      
  File "/opt/rh/python27/root/usr/lib64/python2.7/httplib.py", line 997, in endheaders
    self._send_output(message_body)                                            
  File "/opt/rh/python27/root/usr/lib64/python2.7/httplib.py", line 850, in _send_output
    self.send(msg)                                                             
  File "/opt/rh/python27/root/usr/lib64/python2.7/httplib.py", line 812, in send
    self.connect()                                                             
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/download.py", line 139, in connect
    match_hostname(self.sock.getpeercert(), self.host)                         
  File "/my/project/virtualenv/lib/python2.7/site-packages/pip/backwardcompat/ssl_match_hostname.py", line 61, in match_hostname
    % (hostname, ', '.join(map(repr, dnsnames))))                              
CertificateError: hostname 'proxy.example.org' doesn't match either of 'www.python.org', 'python.org', 'pypi.python.org', 'docs.python.org', 'testpypi.python.org', 'bug>>>s.python.org', 'wiki.python.org', 'hg.python.org', 'mail.python.org', 'packaging.python.org', 'pythonhosted.org', 'www.pythonhosted.org', 'test.pythonhosted.org', 'us.py>>>con.org', 'id.python.org', 'pypi.io'

我在其他问题中看到了这个问题,但这些似乎都不适用于我的情况。

编辑:

例如,我尝试在https://stackoverflow.com/questions/21468550/pip-not-working-behind-firewall中设置环境变量。其他案例正在解决 Windows 问题。

值得一提的是,如果我不在 scl 环境中,这个 virtualenv 将无法工作,例如,如果我调用python启用 virtualenv 而不是 scl,它会抱怨找不到 libpython2.7.so.1.0。我不知道这是否是 bny 设计,但我希望 Python 2.7 依赖的所有库都在 virtualenv 中进行符号链接或复制。也许我在 virtualenv 安装中做错了什么?

proxy python pip scl virtualenv
  • 1 个回答
  • 2199 Views

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    新安装后 postgres 的默认超级用户用户名/密码是什么?

    • 5 个回答
  • Marko Smith

    SFTP 使用什么端口?

    • 6 个回答
  • Marko Smith

    命令行列出 Windows Active Directory 组中的用户?

    • 9 个回答
  • Marko Smith

    什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同?

    • 3 个回答
  • Marko Smith

    如何确定bash变量是否为空?

    • 15 个回答
  • Martin Hope
    Tom Feiner 如何按大小对 du -h 输出进行排序 2009-02-26 05:42:42 +0800 CST
  • Martin Hope
    Noah Goodrich 什么是 Pem 文件,它与其他 OpenSSL 生成的密钥文件格式有何不同? 2009-05-19 18:24:42 +0800 CST
  • Martin Hope
    Brent 如何确定bash变量是否为空? 2009-05-13 09:54:48 +0800 CST
  • Martin Hope
    cletus 您如何找到在 Windows 中打开文件的进程? 2009-05-01 16:47:16 +0800 CST

热门标签

linux nginx windows networking ubuntu domain-name-system amazon-web-services active-directory apache-2.4 ssh

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve