Migration

將 CouchBase 轉儲導入 BigQuery

  • July 11, 2017

創建 CouchBase 轉儲並將其複製到 Google Storage 儲存桶後,我嘗試將數據導入 BigQuery。

我慘遭失敗,顯然design.json出現在同一目錄中的文件在data-0000.cbb我嘗試json導入時不起作用。

我需要以某種方式轉換轉儲嗎?有沒有其他方法可以將數據從 CB 遷移到 BQ?

謝謝大家。

我設法將 couchbase 數據導出為 CSV,在轉換為 CSV 後,我發現文件已損壞,並且有一些條目我不得不放棄。

當我第一次嘗試時,BigQuery 中沒有“忽略錯誤”選項,所以我根本無法導入文件,幾週後我再次嘗試並找到“忽略錯誤”選項,我立即導入了我的文件,首先是每個它們到一個單獨的數據庫,後來將它們組合在一起,現在看起來很棒,但還沒有經過合規性測試,我在 80 個數據中失去了幾條記錄(略少於 20 條)。

引用自:https://dba.stackexchange.com/questions/173688