Início / unix / Perguntas / 434462
Accepted
alhelal
Asked: 2018-03-31 01:44:36 +0800 CST

O que posso fazer se o delimitador de csv aparecer no valor?

  • 772

Suponha que meu arquivo csv contenha 

"item_name","price","description"
mobile,500$,It has many features (e.g., camera, big display, etc)

Eu quero carregar este arquivo de dados csv no banco de dados mysql usando o comando mysql como 

load data local infile 'file.csv' into table table
 fields terminated by ','
 lines terminated by '\n'
 (column1, column2, column3,...)

Você também pode dizer para usar colocando cada valor "e usando enclosed by '"'a opção do mysql. Mas incluir cada valor é uma sobrecarga para mim.

Posso incluir apenas descriptionvalor se houver uma solução para ler esse tipo de csv em que uma coluna é incluída, "mas não todas.

csv

2 respostas

  1. Best Answer

    Altere o delimitador de campo de vírgulas para algo que não esteja presente no arquivo. Se você tiver controle sobre o que cria o arquivo CSV, isso não deve ser muito difícil.

    Com csvkit, isso pode ser feito se o último campo estiver entre aspas corretamente:

    $ cat file.csv
"item_name","price","description"
mobile,500$,"It has many features (e.g., camera, big display, etc)"

$ csvformat -D@ file.csv
item_name@price@description
mobile@500$@It has many features (e.g., camera, big display, etc)

    Ou, sem csvformat, assumindo que as duas primeiras vírgulas em cada linha são verdadeiros delimitadores:

    $ sed -e 's/,/@/' -e 's/,/@/' file.csv

    Isso não requer que o último campo seja citado.

    Redirecione isso para um novo arquivo e, em seguida, use

    load data local infile 'newfile.csv' into table table
 fields terminated by '@'
 lines terminated by '\n'
 (column1, column2, column3,...)
    • 2

  2. Eu diria que é um campo complexo e sou pessoalmente a favor de codificá-los, por exemplo, em base64,

    $ echo "It has many features (e.g., camera, big display, etc)"  | base64
SXQgaGFzIG1hbnkgZmVhdHVyZXMgKGUuZy4sIGNhbWVyYSwgYmlnIGRpc3BsYXksIGV0YykK

    Mas é claro que há prós e contras de fazê-lo.

    • 1

relate perguntas