問題タブ [data-formats]

1 日分の avro データ (~2 TB) を寄木細工に変換したいと考えていました。

ハイブ クエリを実行したところ、データが正常に寄木細工に変換されました。

でもデータサイズは6TBになりました。

データが 3 倍のサイズになるとどうなるでしょうか。

パラメータ t を含む socket.io へのリクエストは、LZywzeV、LZz5lk7 などのようです。

これまでに見つけたすべての例では、秒またはミリ秒ベースの UNIX タイムスタンプを使用していました。

このようなタイムスタンプ形式を見たことがありますか? (base64 エンコードではありません)。

keras で基本的な MLP の例を作成しようとしています。入力データには shape がtrain_data.shape = (2000,75,75)あり、テスト データには shape がありtest_data.shape = (500,75,75)ます。2000と500は学習データとテスト データのサンプル数です (つまり、データの形状は ですが(75,75)、学習データとテスト データは 2000 個と 500 個あります)。出力には 2 つのクラスが必要です。

input_shapeネットワークの最初の層のパラメーターに使用する値がわかりません。keras リポジトリの mnist の例のコードを使用して、(更新しました):

は562575 * 75 です (MNIST の例をエミュレートします)。私が得るエラーは次のとおりです。

何か案は？

SAS でデータセットとフォーマット カタログを受け取り、それを開こうとしていますが、フォーマット カタログが正しく適用されていません。これが私が使用したコードです。SAS のサイトを調査しましたが、カタログを呼び出すための正しい手順があると思いましたが、機能していません。私はそれが私が作っている基本的なエラーだと確信しています。

変数ごとに、ログに次のエラーが表示されます。

外部ソースからの json データを使用していますが、何らかの理由で、余分なデータを別のフィールドに入れるのではなく、文字列フィールドにエンコードしました。これはある種の標準に従っていますか？私はそれを見たことがないので、何らかの形で解析する必要があります。json は次のようになります。