Yaron Asked: 2017-05-17 04:18:39 +0800 CST2017-05-17 04:18:39 +0800 CST 2017-05-17 04:18:39 +0800 CST 将 CouchBase 转储导入 BigQuery 772 创建 CouchBase 转储并将其复制到 Google 存储桶后,我尝试将数据导入 BigQuery。 我悲惨地失败了,显然在我尝试导入时design.json出现在同一目录中的文件或文件不起作用。data-0000.cbbjson 我需要以某种方式转换转储吗?还有其他方法可以将数据从 CB 迁移到 BQ 吗? 谢谢大家。 migration dump 1 个回答 Voted Best Answer Yaron 2017-07-12T01:05:19+08:002017-07-12T01:05:19+08:00 我设法将 couchbase 数据导出为 CSV,在转换为 CSV 后我发现文件已损坏并且有一些条目我不得不放弃。 当我第一次尝试时,BigQuery 中没有“忽略错误”选项,所以我根本无法导入文件,几周后我再次尝试并找到“忽略错误”选项,我立即导入了我的文件,首先是每个文件它们到一个数据库,后来将它们组合在一起,现在看起来不错,但还没有经过合规性测试,我丢失了 80 GB 数据中的几条记录(不到 20 条)。
我设法将 couchbase 数据导出为 CSV,在转换为 CSV 后我发现文件已损坏并且有一些条目我不得不放弃。
当我第一次尝试时,BigQuery 中没有“忽略错误”选项,所以我根本无法导入文件,几周后我再次尝试并找到“忽略错误”选项,我立即导入了我的文件,首先是每个文件它们到一个数据库,后来将它们组合在一起,现在看起来不错,但还没有经过合规性测试,我丢失了 80 GB 数据中的几条记录(不到 20 条)。