Google BigQuery がネイティブ JSON サポートを実装する計画はありますか?
Hive データ (~20T) を Google BigQuery に移行することを検討していますが、Hive のテーブル定義には、BigQuery でサポートされていないマップ タイプが含まれています。
たとえば、以下の HiveQL です。
select gid, payload['src'] from data_repository;
ただし、正規表現を使用して回避できます。
Google BigQuery がネイティブ JSON サポートを実装する計画はありますか?
Hive データ (~20T) を Google BigQuery に移行することを検討していますが、Hive のテーブル定義には、BigQuery でサポートされていないマップ タイプが含まれています。
たとえば、以下の HiveQL です。
select gid, payload['src'] from data_repository;
ただし、正規表現を使用して回避できます。
2012 年 10 月 1 日以降、BigQuery はインポートとエクスポートで改行区切りの JSON をサポートしています。
ブログ投稿: http://googledevelopers.blogspot.com/2012/10/got-big-json-bigquery-expands-data.html
データ形式に関するドキュメント: https://developers.google.com/bigquery/docs/import#dataformats