問題タブ [google-bigquery]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票する
6 に答える
44156 参照

sql - BigQuery SQL で UNION 関数をサポート

BigQuery はまだ UNION をサポートしていないようです: https://developers.google.com/bigquery/docs/query-reference

(ソースのためにテーブルを結合するという意味ではありません。それはあります。)

もうすぐですか?

0 投票する
1 に答える
4872 参照

google-app-engine - Javaを使用してGoogleCloudStorageからBigQueryにデータを読み込む

Google Cloud StorageからBigQueryにデータをアップロードしたいのですが、これを行う方法を説明するJavaサンプルコードが見つかりません。誰かがこれを行う方法として私にいくつかのヒントを教えてもらえますか?

私が実際にやりたいのは、Google App EngineテーブルからBigQueryにデータを転送する(そして毎日同期する)ことです。これにより、分析を行うことができます。GoogleAppEngineでGoogleCloudStorage Serviceを使用して、Google Cloud Storageのファイルに(新しい)レコードを書き込みます。不足しているのは、BigQueryのテーブルにデータを追加する(または初めて書き込むために新しいテーブルを作成する)ことだけです。確かに、BigQueryブラウザツールを使用してデータを手動でアップロード/追加できますが、自動にしたいのですが、そうでない場合は、毎日手動で行う必要があります。

0 投票する
2 に答える
1144 参照

google-bigquery - 割り当て制限

Big Query へのデータのクエリとインポートに適用されるクォータ制限を増やすにはどうすればよいですか?

https://developers.google.com/bigquery/docs/quota-policy

この目的のために提出する必要のあるフォームはありますか? オフラインで行うことは可能ですか?

私の要件のほとんどには、1000 のクエリ制限では十分ではありません。

0 投票する
2 に答える
886 参照

php - Unicode(?)文字列を変換します

fopenで読むために開いたtxtファイルがあります。次に、を使用して画面上の行をエコーし​​ようとします

行の1つは次のようになります。

誰かがこれを正しくデコードする方法を教えてもらえますか?

このスクリプトはコマンドラインで実行され、結果のCSVを「テール」すると、上記のエンコードが表示されます。CSVをMySQLにインポートすると、同じ結果が表示されます。OpenOfficeでCSVを開くときのSimilair。

txtファイルは、次のコマンドを使用したGoogleBigQueryからのエクスポートです。

BigQueryコマンドラインツールにCSVファイルを直接出力させないのはなぜかと思うかもしれませんが、これは、このエンコーディングにも関係するシステムのバグを引き起こすためです...

0 投票する
1 に答える
730 参照

github - GitHubアーカイブからどこまでデータを取得できますか?

GitHubアーカイブ プロジェクトは次のように述べています

GitHub Archiveは、公開されているGitHubタイムラインを記録し、アーカイブして、さらに分析するために簡単にアクセスできるようにするプロジェクトです。

このアーカイブは、GoogleBigQueryからもクエリできます。ただし、何かが不足しているか、データの一部しか利用できないようです。

実際、次のクエリを実行すると、1636WatchEvents(開始または停止)のみが返されますが、Railsリポジトリ14300はウォッチャーよりも多くをアカウントします。

取得された最も古いデータは、多かれ少なかれ2.5か月前のもののようです。

データは切り捨てられますか(アーカイブでは奇妙に見えるかもしれません)?BigQueryの使用に関連して私が知らない制限/割り当てはありますか?

github-アーカイブ

0 投票する
2 に答える
419 参照

google-bigquery - BigQuery を使用するためのエンド ユーザー API キーを取得するにはどうすればよいですか

大きなクエリ API の上に Android アプリを構築する必要がある場合、エンド ユーザーは使用量に応じて課金されるため、独自の API キーを提供する必要があります。これを達成するにはどうすればよいですか? 設定でユーザーにAPIキーを尋ねてクライアント側に保存してもよろしいですか?

0 投票する
2 に答える
5348 参照

google-apps-script - Google スプレッドシートを使用して BigQuery にアクセスする

Google スプレッドシート内に bigquery データをインポートする方法をインターネットで調べています。この appscript サンプルを見つけましたが、API が同じレベルではなく、appscript で API2 または API@beta1 を使用してクエリを実行する方法がわかりません。

あなたのアイデアを前もってありがとう、

GQ

0 投票する
1 に答える
198 参照

google-bigquery - 堅牢でスケーラブルな不変性を処理する方法はありますか?

bigqueryは追加専用なので、アップロードする各レコードに、peoplesoftの動作と同様の「発効日」をスタンプすることを考えていました。そのパターンに精通している人がいれば、

次に、selectステートメントを発行して、最大発効日に参加できます。

残念ながら、クエリの「小さな結合」の制限が大きいため、これは拡張できないと思います。そのため、他の誰かがこのユースケースについて考えたことがあるかどうかを確認したいと思いました。

0 投票する
4 に答える
997 参照

google-app-engine - Pythonスクリプトからbigqueryにログを取り込む

appengine mapreduceを使用せずに、appengineアプリからbigqueryにログを取り込みたいですか?

0 投票する
3 に答える
394 参照

google-apps-script - Apps Script のカスタム関数で BigQuery 呼び出しが失敗しました

関数の引数を使用してクエリを作成し、クエリを提供する BigQuery サービス (API キーを使用して有効化) を呼び出すカスタム関数を Apps Script で作成しました。しかし、スプレッドシートで関数を使用すると、常にサーバー エラーが返されました。

これが私のコードです(手動で変数を指定してデバッガーで実行すると機能します):