AskOverflow.Dev

AskOverflow.Dev Logo AskOverflow.Dev Logo

AskOverflow.Dev Navigation

  • 主页
  • 系统&网络
  • Ubuntu
  • Unix
  • DBA
  • Computer
  • Coding
  • LangChain

Mobile menu

Close
  • 主页
  • 系统&网络
    • 最新
    • 热门
    • 标签
  • Ubuntu
    • 最新
    • 热门
    • 标签
  • Unix
    • 最新
    • 标签
  • DBA
    • 最新
    • 标签
  • Computer
    • 最新
    • 标签
  • Coding
    • 最新
    • 标签
主页 / coding / 问题 / 79467726
Accepted
MikeB2019x
MikeB2019x
Asked: 2025-02-26 03:49:21 +0800 CST2025-02-26 03:49:21 +0800 CST 2025-02-26 03:49:21 +0800 CST

将列表转换为字符串

  • 772

我正在使用 Polars,我有一个数据集,其中有一列是字符串列表。要查看它是什么样子:

import pandas as pd

list_of_lists = [['base', 'base.current base', 'base.current base.inventories - total', 'ABCD']
                  , ['base', 'base.current base', 'base.current base.inventories - total','ABCD']
                  , ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD']
                  , ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD']]

pd_df = pd.DataFrame({'lol': list_of_lists})

给出:

    lol
0   ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD']
1   ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD']
2   ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD']
3   ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD']

我想对每个列表进行哈希处理。我想将每个列表转换为字符串,然后对其进行哈希处理。我可以用 Pandas 做到这一点

pd_df = pd.DataFrame({'lol': list_of_lists}).astype({'lol':str})
pl_df_1 = pl.DataFrame(pd_df)
pl_df_1.with_columns(pl.col('lol')
                    .hash(seed=140)
                    .name.suffix('_hashed')
                    )

给出:

               lol                  lol_hashed
               str                   u64
"['base', 'base.current base', …    14283628883798345624
"['base', 'base.current base', …    14283628883798345624
"['base', 'base.current base', …    14283628883798345624
"['base', 'base.current base', …    14283628883798345624

但如果我尝试在 Polars 中执行类似操作,我会收到错误:

pl_df_2 = pl.DataFrame({'lol': list_of_lists})
pl_df_2.with_columns(pl.col('lol') # <== can insert .cast(pl.String) here still get error
                    .hash(seed=140)
                    .name.suffix('_hashed')
                    )

给出:

# PanicException: Hashing a list with a non-numeric inner type not supported. 
#   Got dtype: List(String)

我更愿意使用 Polars 库,那么是否可以将列表列转换为字符串,或者在 Polars 中是否有更好的方法来实现相同的结果?

更新:

根据接受的答案,我进行了进一步的实验。

list_of_lists = [
                 ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD'], 
                 ['base', 'base.current base', 'base.current base.inventories - total', 'DEFG'], 
                 ['base', 'base.current base', 'base.current base.inventories - total', 'ABCD'], 
                 ['base', 'base.current base', 'base.current base.inventories - total', 'HIJK'], 
                 '(bobbyJoe460)',
                 'bobby, Joe (xx866e)',
                 137642039575
                 ]

pl_df_1 = pl.DataFrame({'lol': list_of_lists}, strict=False)  # <==== allow mixed types in column
pl_df_1.with_columns(pl.col('lol')
                     .cast(pl.Categorical)  # <==== cast to Categorical
                     .hash(seed=140)
                     .name.suffix('_hashed')
                     )

给出:

                 lol.               lol_hashed
                 str                    u64
"["base", "base.current base", …    11231070086490249882
"["base", "base.current base", …    6519339301964281776
"["base", "base.current base", …    11231070086490249882
"["base", "base.current base", …    14549859594875138034
"(bobbyJoe460)"                     1954884316252525743
"bobby, Joe (xx866e)"               4241414284122449899
"137642039575"                      6383308039250228053
list
  • 1 1 个回答
  • 32 Views

1 个回答

  • Voted
  1. Best Answer
    jqurious
    2025-02-26T04:41:55+08:002025-02-26T04:41:55+08:00

    PanicException 是一个错误,可以报告。

    .list.join()可用于创建可进行散列的“单个字符串”。

    df = pl.DataFrame({"lol": list_of_lists})
    
    df.with_columns(
        pl.col("lol").list.join("").hash()
    )
    
    shape: (4, 1)
    ┌─────────────────────┐
    │ lol                 │
    │ ---                 │
    │ u64                 │
    ╞═════════════════════╡
    │ 8244365561843513530 │
    │ 8244365561843513530 │
    │ 8244365561843513530 │
    │ 8244365561843513530 │
    └─────────────────────┘
    

    您还可以转换为可以散列的分类。

    df.with_columns(
        pl.col("lol").cast(pl.List(pl.Categorical)).hash()
    )
    
    shape: (4, 1)
    ┌────────────────────┐
    │ lol                │
    │ ---                │
    │ u64                │
    ╞════════════════════╡
    │ 599332512135826737 │
    │ 599332512135826737 │
    │ 599332512135826737 │
    │ 599332512135826737 │
    └────────────────────┘
    
    • 1

相关问题

  • 批量删除指定名称的路径,列出文件及其路径

  • 如何访问 TCL 中该过程之外传递给要修改的过程的列表?

  • 如何使用本机表达式 API 在 Polars 中生成项目组合?

  • 视图内的列表

  • 在列表理解格式函数中定义变量

Sidebar

Stats

  • 问题 205573
  • 回答 270741
  • 最佳答案 135370
  • 用户 68524
  • 热门
  • 回答
  • Marko Smith

    重新格式化数字,在固定位置插入分隔符

    • 6 个回答
  • Marko Smith

    为什么 C++20 概念会导致循环约束错误,而老式的 SFINAE 不会?

    • 2 个回答
  • Marko Smith

    VScode 自动卸载扩展的问题(Material 主题)

    • 2 个回答
  • Marko Smith

    Vue 3:创建时出错“预期标识符但发现‘导入’”[重复]

    • 1 个回答
  • Marko Smith

    具有指定基础类型但没有枚举器的“枚举类”的用途是什么?

    • 1 个回答
  • Marko Smith

    如何修复未手动导入的模块的 MODULE_NOT_FOUND 错误?

    • 6 个回答
  • Marko Smith

    `(表达式,左值) = 右值` 在 C 或 C++ 中是有效的赋值吗?为什么有些编译器会接受/拒绝它?

    • 3 个回答
  • Marko Smith

    在 C++ 中,一个不执行任何操作的空程序需要 204KB 的堆,但在 C 中则不需要

    • 1 个回答
  • Marko Smith

    PowerBI 目前与 BigQuery 不兼容:Simba 驱动程序与 Windows 更新有关

    • 2 个回答
  • Marko Smith

    AdMob:MobileAds.initialize() - 对于某些设备,“java.lang.Integer 无法转换为 java.lang.String”

    • 1 个回答
  • Martin Hope
    Fantastic Mr Fox msvc std::vector 实现中仅不接受可复制类型 2025-04-23 06:40:49 +0800 CST
  • Martin Hope
    Howard Hinnant 使用 chrono 查找下一个工作日 2025-04-21 08:30:25 +0800 CST
  • Martin Hope
    Fedor 构造函数的成员初始化程序可以包含另一个成员的初始化吗? 2025-04-15 01:01:44 +0800 CST
  • Martin Hope
    Petr Filipský 为什么 C++20 概念会导致循环约束错误,而老式的 SFINAE 不会? 2025-03-23 21:39:40 +0800 CST
  • Martin Hope
    Catskul C++20 是否进行了更改,允许从已知绑定数组“type(&)[N]”转换为未知绑定数组“type(&)[]”? 2025-03-04 06:57:53 +0800 CST
  • Martin Hope
    Stefan Pochmann 为什么 {2,3,10} 和 {x,3,10} (x=2) 的顺序不同? 2025-01-13 23:24:07 +0800 CST
  • Martin Hope
    Chad Feller 在 5.2 版中,bash 条件语句中的 [[ .. ]] 中的分号现在是可选的吗? 2024-10-21 05:50:33 +0800 CST
  • Martin Hope
    Wrench 为什么双破折号 (--) 会导致此 MariaDB 子句评估为 true? 2024-05-05 13:37:20 +0800 CST
  • Martin Hope
    Waket Zheng 为什么 `dict(id=1, **{'id': 2})` 有时会引发 `KeyError: 'id'` 而不是 TypeError? 2024-05-04 14:19:19 +0800 CST
  • Martin Hope
    user924 AdMob:MobileAds.initialize() - 对于某些设备,“java.lang.Integer 无法转换为 java.lang.String” 2024-03-20 03:12:31 +0800 CST

热门标签

python javascript c++ c# java typescript sql reactjs html

Explore

  • 主页
  • 问题
    • 最新
    • 热门
  • 标签
  • 帮助

Footer

AskOverflow.Dev

关于我们

  • 关于我们
  • 联系我们

Legal Stuff

  • Privacy Policy

Language

  • Pt
  • Server
  • Unix

© 2023 AskOverflow.DEV All Rights Reserve