Início / coding / Perguntas / 79354062
Accepted
its_niks
Asked: 2025-01-14 13:28:54 +0800 CST

Como concatenar elementos de uma coluna binária?

  • 772

Tenho um DataFrame com uma coluna binária que representa a codificação hexadecimal de uma string inicial:

id_aleatório id_aleatório_cesu8
123456789012 [31 32 33 34 35 36 37 38 39 30 31 32]

A random_id_cesu8coluna contém a representação binária da random_idstring codificada em UTF-8 e exibida como uma lista de valores de bytes em formato hexadecimal.

Quero transformar a random_id_cesu8coluna em uma única string hexadecimal concatenada: 313233343536373839303132, que é a concatenação de cada valor de byte individual da random_id_cesu8lista.

Tentei várias abordagens, mas todas resultaram no random_idvalor original ( 123456789012) em vez da string hexadecimal concatenada desejada ( 313233343536373839303132).

Como posso realizar corretamente essa transformação?

python

1 respostas

  1. Best Answer

    Aqui está uma solução usando o PySpark para converter a coluna binária em sua representação hexadecimal:

    from pyspark.sql import functions as F

# Create DataFrame with the initial value
df = spark.createDataFrame([("123456789012",)], ["value"])

# Convert the value to UTF-8 encoding and then to hex
df = df.withColumn(
    "encoded_hex", 
    F.hex(F.encode(F.col("value"), 'utf-8')),
)

# Display the resulting DataFrame
df.show(truncate=False)

    Explicação:

    1. encode(df.value, 'utf-8'): Esta função codifica o valor da string em um formato binário usando codificação UTF-8.
    2. hex(): Esta função converte os dados binários em sua representação hexadecimal.

    O resultado será um DataFrame com a encoded_hexcoluna contendo a string hexadecimal desejada 313233343536373839303132.

    +------------+------------------------+
|value       |encoded_hex             |
+------------+------------------------+
|123456789012|313233343536373839303132|
+------------+------------------------+
    • 0

relate perguntas