問題タブ [bigquery-standard-sql]

私は2つの異なるGoogleスプレッドシートを持っています:

4 列の 1 つ

前のファイルの 4 列とさらに 2 列の 1 つ

それらを Google BigQuery で Federated ソースとして構成したので、両方のテーブルのデータを結合するビューを作成する必要があります。

両方のテーブルCol1には ID を含む列があり、この ID はテーブル全体で一意であり、複製されたデータは含まれません。

私が探している結果のテーブルは次のとおりです。

最初のファイルにない列については、NULL値を期待しています。

私は標準SQLを使用しています。サンプルデータを生成するために使用できるステートメントは次のとおりです。

UNION ALLテーブルが異なる列を持っているため、シンプルは機能しません

Federated ソースはワイルドカード演算子をサポートしていないため、ワイルドカード演算子は適切な方法ではありません

もちろん、これはサンプル データで、3 ～ 5 列しかありません。実際のテーブルには 20 ～ 40 列あります。したがって、フィールドごとに明示的にSELECTフィールドする必要がある例は、かなりの方法ではありません。

この 2 つのテーブルを結合する有効な方法はありますか?

GQL (Google SQL) クエリを記述して、深くネストされた構造をフィルタリングし、その後再度ネストして、ARRAY と同じレベルの STRUCT プロパティの最初のレコードを残す方法を見つけようとしています。

スキーマサンプルを用意しました

また、フィルタリングには、ネストされたすべてのフィールドを平坦化するソース フィルター クエリが必要です。

主な問題は、このフィルタリングの後、すべてをグループ化しsaleItemsてsale._id(初期構造を返す)、serviceFeedbackSTRUCT 型のフィールドを取得することです。

JSON 形式で期待される結果は次のとおりです。

頭に浮かぶ最も単純なクエリのアイデアを書きました。正しい結果が得られます。しかし、おそらくもっと効率的な方法で書き直すことは可能です。

同じ結果を達成するためのより良い解決策を提案してもらえますか?

次のようなテーブルがあります。

フィールド内の要素の頻度を示す表を探していますl_0, l_1, l_2, l_3。

たとえば、出力は次のようになります。

編集：

場合によっては、配列フィールドに複数のタイプの要素が含まれる場合があります。たとえばl_0、 ['biology', 'biology', 'geometry', 'geometry']. その場合、フィールドの出力は、すべての要素が に含まれ、対応するすべてのカウントが にl_0, l_1, l_2, l_3含まれるネストされた繰り返しフィールドになります。l_0.namel_0.count

標準SQLでは、同じクエリで以下をすべてクエリできるようにしたい

• customDimensions
• hits.customDimensions
• hits.customMetrics
• hits.product.customDimensions

これまでのところ、私はこのようなものを思いつきました (モバイル用とデスクトップ用の 2 つの GA プロパティの UNION を含みます) - これよりも多くの列を追加する予定であり、それらすべてを持つことは想像できませんsub-selects が最良のアプローチであるため：