問題タブ [google-bigquery]

私は自分のプロジェクトに Google インフラストラクチャと Google App Engine を検討しています。私が望んでいたことの 1 つは、Google App Engine Datastore を Big Query のデータ ソースとして使用できることでしたが、そうではないようです。それを行うためのレシピはありますか？

私はグーグルでBigQueryに非常に新しいです

yyyy/mm/dd:hh:mm:ss日と月に基づいてタイムスタンプ（）を解析し、日を週にバケット化します。これを行うBigQuery関数は見つかりませんでした。

UDFしたがって、 BigQueryクエリでを記述してアクセスする方法があるかどうか疑問に思いました。

BigQueryにはs3からデータをインポートする機能がありますか？そうでない場合、あなたが提案できる最良の代替パスは何ですか？

インストール手順のインストール手順に従っています

私は次のエラーで終わっています

このエラーを取り除くにはzlibをインストールする必要があると思いましたが、役に立ちません

検索すると次の結果が得られます

zlib が正しくインストールされているかどうかわかりません

次のステップを提案してください

これが私の読み込みジョブのスクリーンショットです。「予期しない。もう一度やり直してください」と表示されます。追加情報なし。詳細を取得する方法はありますか？または、Google の誰かがログを詳しく見て、失敗した理由を教えてもらえますか?

bq ショー:

ジョブ tzgqnxt:job_016afefcfc0a42089822d621cf3d6ace

ジョブの種類 状態 開始時間 期間 処理されたバイト数

負荷障害 7 月 27 日 10:32:05 2:00:09

ジョブの実行中に発生したエラー。予想外。もう一度やり直してください。

GoogleBigQuery内で基本的なSQLCreateTable構文を使用して、すでにBQにある2つの既存のテーブルの列に基づいてテーブルを作成したいと考えていました。GoogleSQLダイアレクトリファレンスにはCREATEが表示されません。すべてのドキュメントは、コーディング方法を知る必要があることを示唆しているようです。

構文や方法はありますか

？

分析エンジンとしてBigqueryを使用するJavaアプリケーションに取り組んでいます。クエリジョブの挿入のコードを使用してクエリジョブを実行（および結果を取得）できました。stackoverflowに関するこのコメントを使用して、サービスアカウントを使用するようにコードを変更する必要がありました。

次に、抽出ジョブを実行して、テーブルをGoogleStorageのバケットにエクスポートする必要があります。テーブルのエクスポートに基づいて、抽出ジョブを挿入するようにJavaコードを変更できました（以下のコード）。実行すると、抽出ジョブのステータスがPENDINGからRUNNING、DONEに変わります。問題は、指定されたバケットに実際にファイルがアップロードされないことです。

役立つかもしれない情報：

• このcreateAuthorizedClient関数はBigqueryインスタンスを返し、クエリジョブで機能するため、サービスアカウント、秘密鍵などに問題はない可能性があります。
• また、 Googleのapi-explorerで挿入ジョブを手動で作成して実行しようとすると、ファイルがバケットに正常に作成されます。プロジェクト、データセット、テーブル、および宛先URIにコードと同じ値を使用するため、これらは正しいはずです。

コードは次のとおりです（他の誰かがこれが役立つと思った場合に備えて、ファイル全体を貼り付けます）。

出力は次のとおりです。

小さなテーブル（約4MB）なので、1分程度で大丈夫そうです。バケットにファイルが作成されない理由や、これをデバッグする方法がわかりません。どんな助けでもいただければ幸いです。

Craigが指摘したように、status.errorResult（）とstatus.errors（）の値を出力しました。

• getErrorResults（）：{"メッセージ"： "バックエンドエラー。ジョブが中止されました。"、 "reason"： "internalError"}
• getErrors（）：null

新しいプロジェクトを開始していますが、テーブル スキーマを定義する前に検証したかっただけです。

BigQuery は次のもの以外をサポートしていますか?

GoogleBigQueryで次のエラーが発生します。

私の質問は

prosperloans12つのテーブル名が正しいデータセットIDです。select句の最初に表示されるフィールド名に関係なく、エラーが返されます。

Google SQL構文に関するドキュメントには、これが正しいと記載されています。

ありがとうショーン

https://developers.google.com/bigquery/docs/query-referenceにあるGoogleSQL構文ガイド は、NOTIN用語の使用に対応していないようです。

エラーが発生します

（そしてGoogleは「oneof」という単語の後に何もリストしません）

私のクエリが

テーブル「small」には14行あります。大きなテーブルには57K行があります。

何か案は？GoogleSQLがNOTINをサポートしているかどうかわからない。

ありがとうショーン