問題タブ [logstash-file]
For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.
logstash - パフォーマンスに影響を与えずにマシンでlogstashを構成する方法は?
自分のシステムからいくつかのログ情報を読み取るには、logstash を使用する必要があります。logstash の出力としてエラスティック サーチを使用しています。エラスティック検索は別のサーバーで構成されます。
いくつかの記事やディスカッション フォーラムを読みましたが、logstash の使用中にメモリ消費の問題に直面していました。
参照リンク:
https://groups.google.com/forum/#!topic/logstash-users/qIdzJmD6pJ4
https://discuss.elastic.co/t/logstash-heap-size/622/6
パフォーマンスに影響を与えずにマシンでログスタッシュを構成するにはどうすればよいですか?
私のシステム構成:
Windows サーバー 2012
8GBのRAM
500GB HDD
logstash - Logstash 解析 csv ファイル
json オブジェクトを含む列を持つ csv ファイルがあります。この形式の json 入力が正しく機能する場合があります。
ただし、レコード全体が破損するのは、以下の形式である場合があります。
csvファイルの読み取り中またはフィルタリングステップ中に、2番目の形式で単一の "をエスケープするにはどうすればよいですか?
ruby - Codec の `decode` メソッドに渡される `data` オブジェクトは何ですか?
CodecLogStash がバイナリ データ形式をデコードできるようにするプラグインを作成したいと考えています。
a を作成するための公式ドキュメントでCodecdecodeは、単一のパラメーター ( という変数) を受け入れるメソッドを定義する必要があることが示されていますdata。
私は LogStash と Ruby の両方に不慣れです。data主に静的に型付けされた言語を扱ってきたので、変数について詳しく知る方法がわかりません。利用可能になったときにデータを読み取ることができるようにするためのタイプのオブジェクトに似ているとInputStream思いますが、よくわかりません。
質問:
dataオブジェクトはどのタイプですか？どのような方法がありますか?- Ruby 開発者は通常、このような変数をどのように調査しますか?
dataスケルトン プラグインを作成し、文字列表現を STDOUTにダンプすることなく、それを理解する方法がわかりません。
ありがとう！
elasticsearch - Logstash - xml データの変換と ES へのロード
XML 形式のデータ
logstash を使用して、このように変換する必要があります。id、name、version、severity、priority、summary、description .. xml を json 出力に変換するにはどうすればよいですか。すべてのフィールドを適用する前に、id フィールドを解析しようとしました。
実行中に、コンソールに空の myid 値が表示されます。また、json にフォーマットした後、es インデックスにリダイレクトする方法を教えてください。