問題タブ [google-cloud-datalab]

DataLab をデプロイしようとしています。私のプロジェクトが米国ゾーンにあることを確認しました。新しいプロジェクトを作成してそこにデプロイしようとしましたが、役に立ちませんでした。この時点まではすべて正常に機能しているようです。私のプロジェクト ID には前の s~ がないことに注意してください (それが重要なのか、それとも単に DataLab / Google Cloud で使用されている表記なのかは不明です。2 日間で 10 回ほど試しましたが、成功しませんでした。

先週、新しい Google Cloud Datalab と IPython を使い始めたばかりです (ただし、BigQuery を数か月使用しています)。github のチュートリアルとサンプルは非常に役に立ちますが、スクリプトとクエリがより複雑になるにつれて、いくつか疑問に思うことがあります。1 つ目は、ある %%sql モジュールで定義されたクエリを後の %%sql モジュールで参照できますか? もう 1 つのやや関連する質問は、1 つの %%sql モジュールからの結果をどうにかして保存し、その情報を後続の %%sql モジュールの IN 句のようなものに入れることができるかということです。

Datalab を既存のプロジェクトの 1 つにデプロイしようとすると、startupscript で「一時的なエラーが原因であきらめています」というメッセージが表示されます (以下のログ出力末尾の最後の行から 2 番目の行)。すべての試行は、自動的に作成された PROJECT-datalab/logs ストレージ バケットに自分自身を記録し、最初の試行には最初にいくつかの追加コンテンツがあります (1 回限りのブートストラップだと思います) が、すべて同じように失敗します。

クラウド コンソールの下に datalab モジュールのダッシュボードも表示されます。https://datalab.cloud.google.com/に戻ってプロジェクトを選択すると、唯一可能なオプションは「Deploy Datalab」のままです。[Datalab を開始] と [Datalab を管理] はグレー表示されています。

ログ出力の末尾は次のとおりです (チェックしたすべてのログ ファイルのタイムスタンプ以外は同じです)。

何が問題なのかわかりますか？この「一時的な」エラーは、過去 4 時間にわたる 10 回の試行のそれぞれで発生しました。これはおそらく、手動の介入なしでは現在機能しない既存のプロジェクトの 1 つですか?

ちなみに、「Datalab のデプロイ」ページからログ リンクをたどると、次のサイクルをたどります。

その後、に変わります

そして最後に

完全なログ ファイル (401 メッセージを除く) がストレージ バケットに表示されるため、実際には複数の Google アカウントの問題であり、無関係である可能性があると思いますが、念のため言及してください。

有効な BigQuery クエリが 0 行を返すと、to_dataframe() がクラッシュします。(ところで、私はこれを Google Cloud Datalab で実行しています)

例えば：

生成:

これは既知のバグですか？

私は python (BigQuery および Cloud Storage とやり取りする) を数か月間使用しており、最近では同様のタスクに Datalab を使用しています。gcloud (別名gcloud-python ) パッケージと、データラボの例で使用されているgcpパッケージの違いを明確にしていただければ幸いです。Datalab は gcloud を認識していないようです (インポートしようとすると、「ImportError: No module named gcloud」という結果になります)。

更新:私のプロジェクトの開発者は、過去 1 年間、さまざまな Python パッケージを使用して Google Cloud Platform を操作してきました。一部のパッケージは不安定でしたが、その後のリリースで改善されました。場合によっては、これらのパッケージ内の機能が重複しているため、標準化するパッケージに関する専門家の意見、および/またはどのパッケージがどのユースケースに最も適しているかについての推奨事項を探しています.

• Google クラウド プラットフォームgcloud-python
• Cloud Datalab gcp
• Python 用 Google API クライアント ライブラリ
• ぼと

特に、gcloud-python が不安定だった時期には boto を使用しましたが、AWS へのアクセスをサポートする必要がない場合は、boto ではなく Google 固有のライブラリを使用する方がよいと考えています。 boto の使用について説明/推奨(?)しているこのページは、活発に維持されているようです。それは、それが好ましい代替手段であることを意味するのでしょうか?

これが適切な SO の質問でない場合は、削除します。