主页 / user-391161

merlin2011's questions

Martin Hope
merlin2011
Asked: 2024-10-18 00:41:09 +0800 CST
  • 10

在大型 monorepo（.git 目录 10GB）中，我观察到了以下行为。

# When outputing to a file, it is very fast:
time git  log   -2  > /tmp/X

real    0m0.076s
user    0m0.007s
sys     0m0.046s

# When outputting to the tty, it is more than 10x slower:
time git  log   -2
# ... Output omitted

real    0m0.830s
user    0m0.078s
sys     0m0.586s

以下是我的所有与日志相关的配置：

$ git config -l | grep log

log.mailmap=true
core.logallrefupdates=true

是什么导致了性能的差异，以及当 git log 输出到 tty 时如何获得相同的性能？

更多观察：

  • 在较小的 repo 中，git log -2即使输出到 tty 也很快，因此问题似乎与大型 repo 有关。

    real    0m0.057s
user    0m0.008s
sys     0m0.022s

  • 输出文件上的 Cat 速度很快，因此不仅仅是写入 stdout 很慢。

    time cat /tmp/X
real    0m0.015s
user    0m0.001s
sys     0m0.005s

  • expect强制使用ttyunbuffer也会减慢速度git log：

    time unbuffer git  log   -2 > /tmp/X

real    0m1.007s
user    0m0.104s
sys     0m0.669s

  • 相比之下，unbuffer它本身的开销约为 240 毫秒：

    time unbuffer cat /tmp/X

real    0m0.239s
user    0m0.033s
sys     0m0.111s
git
Martin Hope
merlin2011
Asked: 2024-09-04 08:39:09 +0800 CST
  • 5

envoy我目前正在尝试在无法访问 PyPi 的机器上进行自定义构建。我公司的安全团队要求我们使用具有不同 URL 的公司代理来访问 PyPi 存储库。

当我尝试运行时bazel build ...，出现以下错误：

ERROR: An error occurred during the fetch of repository 'pypi__pip_tools':
   Traceback (most recent call last):
        File "/home/ubuntu/.cache/bazel/_bazel_ubuntu/b4e0fd0e207e6fdf5e33997b6741cf2d/external/bazel_tools/tools/build_defs/repo/http.bzl", line 132, column 45, in _http_archive_impl
                download_info = ctx.download_and_extract(
Error in download_and_extract: java.io.IOException: Error downloading [https://files.pythonhosted.org/packages/0d/dc/38f4ce065e92c66f058ea7a368a9c5de4e702272b479c0992059f7693941/pip_tools-7.4.1-py3-none-any.whl] to /home/ubuntu/.cache/bazel/_bazel_ubuntu/b4e0fd0e207e6fdf5e33997b6741cf2d/external/pypi__pip_tools/temp12252431299166532778/pip_tools-7.4.1-py3-none-any.whl.zip: PKIX path building failed: sun.security.provider.certpath.SunCertPathBuilderException: unable to find valid certification path to requested target

在这种情况下，安全错误是一个干扰因素，因为我需要https://files.pythonhosted.org用不同的域来替换。

对于命令行pip，我必须执行以下操作：

python3 -m pip config set global.index-url  <new_url_here>

在获取 Python 工具时，是否存在某种等效的方法强制bazel使用不同的域？

请注意，我已经看到了这个问题，但它没有帮助，因为这个错误是在安装 pip 本身的过程中发生的，在进行任何pip_install调用之前。

python
Martin Hope
merlin2011
Asked: 2024-05-05 04:41:57 +0800 CST
  • 5

考虑字符串hello(world)。

我想使用awk调用来提取world.

这是我的第一次尝试，输出是一个空字符串，没有错误。

echo 'hello(world)' | awk -F'(|)'  '{print $2}'

我的第二次尝试是使用字符类，这产生了预期的行为：

echo 'hello(world)' | awk -F'[()]' '{print $2}'

然而，鉴于 awk 的文档声称字段分隔符可以是正则表达式，我预计第一次尝试会起作用。

这是我的 awk 版本：

$ awk --version
GNU Awk 5.0.1, API: 2.0 (GNU MPFR 4.0.2, GNU MP 6.2.0)
Copyright (C) 1989, 1991-2019 Free Software Foundation.

为什么表达式(|)达不到预期的结果？

awk