問題タブ [csv-import]

私はlogstashを使用してcsvファイルからelasticsearchにデータをインポートしています。

インポート中に、他の 2 つのフィールドの値を持つ新しいフィールドを作成したいと考えています。これが私のインポートのスニペットです：

これは希望どおりに機能しますが、たとえば name3 が空の行では、logstash は%{name3}新しいフィールドに書き込みます。空でない場合にのみ値を追加する方法はありますか?

私は PostgreSQL データベースに解析している csv ファイルのフォルダーを持っています。大部分は比較的簡単ですが、値の 1 つは文字列として返されますが、実際には次のような辞書のリストです。

EDIT：これは読み取られる値の構造であり、可変量のエントリがあるか、まったくない場合もあります。これは、行の値として、csv リーダー オブジェクトによって読み取られる文字列です。

これは有効な json オブジェクトではないため、json.loads() できません。私もそれをjson文字列にしてみました

私に与える為に：

これは有効な json オブジェクトですが、json.loads は依然として ValueError をスローします。

私はこれらの行に沿って何かをしています:

基本的に、これによりcsvファイルの各行の辞書が残り、データベースにプッシュされます。私はそれがよりきれいになると確信していますが、その1つの完成したコードです。私が抱えている問題は、実際にはリストである文字列値を処理する方法です。私が見落としているこれを処理する簡単な方法があると確信しています。

私の最初の考えは、値を空のリストに入れることでした（反復可能な辞書のリストが得られるという仮定の下で）。しかし、それは文字列内の文字のリストを与えるだけです。

自然なテキスト フィールドには句読点があるため、文字列をカンマで分割することもできません。

何かご意見は？