Início / coding / Perguntas / 76923810
Accepted
Matthew
Asked: 2023-08-18 01:21:00 +0800 CST

Melhor maneira de substituir caracteres em uma string - Spark SQL

  • 772

Sou novo no Spark e no Databricks Sql. Eu tenho a consulta abaixo mencionada. Tenho certeza de que deve haver uma maneira inteligente de representar a mesma expressão em vez de usar as 3 regexp_replace()funções fornecidas abaixo. Em essência, preciso me livrar do -, :, ' '. Além disso, podemos nos livrar da parte dos milissegundos também?

select 
    regexp_replace(regexp_replace(regexp_replace(MAX(rec_insertdttm), '-', ''), ':', ''), ' ', '') as my_dttm 
from mydb.mytable

A saída desta consulta é algo como:- '20230817162231.730846'e eu quero:20230817162231

Obrigado por qualquer ajuda.

apache-spark-sql

1 respostas

  1. Best Answer

    Se sua coluna for realmente um TIMESTAMPtipo, você pode usar a date_formatfunção SQL integrada para formatá-la com eficiência:

    select 
  date_format(rec_insertdttm, 'yyyyMMddHHmmss') 
from mydb.mytable;

    Se o seu tipo for um STRING, você pode CAST(rec_insertdttm AS TIMESTAMP)passar isso para a mesma date_format()solução acima.

    Ou você pode substituir vários caracteres regex de uma só vez usando um intervalo de caracteres regex : regexp_replace(rec_insertdttm, '[\- :.]', ''). Mas a date_format()solução é muito melhor para legibilidade e simplicidade.

    • 0

relate perguntas