主页 / dba / 问题 / 27400
Accepted
Ran
Asked: 2012-10-23 10:48:33 +0800 CST

MySql - 选择文件并用特殊字符重新加载它

  • 772

我有一个名为 MySql 的表twitter_statuses，正如标题所暗示的那样，它包含 Twitter 状态。 这是表结构。

该表包含文本列中的各种字符，某些列包含多行的 Ruby 对象。

我试图选择一些记录到一个文件中，然后将它们加载到一个新表中，但是由于所有特殊字符，一些行变得“混乱”。

这是我用来转储状态的查询

这是我用来重新加载转储状态的查询

如您所见，我尝试用 替换文本列中的逗号****以防止它们拆分字段，并替换多行列中的新行 ( urls, hashtags, user_mentions) 以防止在将文件转储为 CSV 时“截断行”。

目前，多行字段负载很大（换行字符有效）我的问题 ID 与其他字段中出现的其他字符（各种字符）导致拆分列。

关于我可以在那里改变什么的任何想法？

mysql mysql-5.5

1 个回答

  1. Best Answer

    我建议删除所有这些REPLACE(text,',','****')东西，然后使用FIELDS ENCLOSED BY...：

    SELECT 
  id,
  status_twitter_id,
  twitter_id, 
  creator_twitter_identity_id, 
  text, 
  in_reply_to_status_id, 
  in_reply_to_user_id, 
  urls,
  hashtags,
  created_at, 
  updated_at, 
  sent_at,
  user_mentions
FROM 
  twitter_statuses 
into outfile '/tmp/twitter_statuses.csv'  
FIELDS TERMINATED BY ',' ENCLOSED BY '"'
LINES TERMINATED BY '\n'
;

    然后你LOAD DATA INFILE喜欢这样：

    LOAD DATA LOCAL INFILE '/srv/$SPLIT_FOLDER/$f' 
INTO TABLE my_db.twitter_statuses_new 
FIELDS TERMINATED BY ',' ENCLOSED BY '"'
LINES TERMINATED BY '\n'
...

    这应该可以完成工作。

    • 1

相关问题