問題タブ [access-log]

同様のクラスターを見つけることに興味があるアクセス Web ログ ファイルからのデータ セットがあります。（私はデータマイニングの完全な初心者です）。これまで、同じ問題領域に関する多くの研究論文を参照してきました。

Web ログから Web アクセス パターンをクラスタリングするための効率的なアプローチ

k-means クラスタリングを使用した Web クエリのユーザーの意図の分類

k-means クラスタリングを使用して Web ページをクラスタリングしたいと考えています。これらの論文はアルゴリズムについて議論していますが、入力データセットを提供する方法を指定していません。k-meansユークリッド距離を使用してデータ ポイント間の類似性を計算します。k-meansURLはk-meansに直接使用できないため、マイニングされるデータセットを正規化する方法。これに関するヘルプ/良いリファレンスはありますか?

サンプル データセット (p1..pn は異なる Web ページです)

logback.xml私はそれが完全に機能するように設定しますが、機能しlogback-access.xmlません。

Mavenでpom.xml

のsrc/main/resource

アクセスログを設定する方法はありますか?

私は ec2 で小さなテスト Web サイトをホストしていますが、サーバーへの有効なログインを持つテスト ユーザーは 2 ～ 3 人しかいないはずです。ただし、Apache の access_log (/var/log/httpd/access_log) に大量のジャンク ログが表示されます。

198.2.208.231 - - [13/Dec/2013:21:11:07 +0000] "GET http://ib.adnxs.com/ttj?id=1995383&position=HTTP/1.0の上" 302 - " http:// www.minbusiness.net/?p=611 " "Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/533.18.1 (Gecko のような KHTML) バージョン/5.0 Safari/533.16"

173.234.32.69 - - [13/Dec/2013:21:11:07 +0000] "GET http://ads.creafi-online-media.com/st?ad_type=iframe&ad_size=728x90,468x60§ion=5172215&pub_url= ${ PUB_URL} HTTP/1.0" 302 - " http://lookfashionstyle.com/index.php?option=com_content&view=category&layout=blog&id=42&Itemid=98&limitstart=24 " "Mozilla/4.0 (互換; MSIE 6.0; WINDOWS; .NET CLR 1.1.4322)」

198.136.31.98 - - [13/Dec/2013:21:11:07 +0000] "GET http://ad.tagjunction.com/st?ad_type=ad&ad_size=468x60§ion=4914662&pub_url= ${PUB_URL} HTTP/1.0" 302 - " http://www.benzec.com " "Mozilla/5.0 (Windows; U; Windows NT 5.1; de; rv:1.9.0.13) Gecko/2009073022 Firefox/3.0.13"

....

何が起こっているのか正確にはわかりません...私は攻撃されていますか?

ありがとう！

アプリケーション ログ サーバーとして Graylog2 サーバーを使用しています。しかし、Apache ログを graylog2 に接続できませんでした。Apacheログをgreylog2サーバーに送信するためのガイドはありますか、誰かがこれを解決するのを手伝ってくれますか?

SQUID Proxy の実行に成功しました。私の質問は、ログに 2002** (例: 20020403.gz) の日付が表示されるのはなぜですか? SQUID Proxy を 2 か月前にインストールしたばかりの場合、2014** のように表示されるはずです (例: 20140114.gz)。

助けてください。ありがとう！

Nginx を Web サーバーとして使用しています。

抽出http_referer_hostnameしてアクセスログに記録する方法はありますか。

例:が の場合、ホスト名の部分 ( )のみを行に記録するに$http_refererはどうすればよいですか?"http://example.com/?somedata"example.comaccess.log

パフォーマンスの問題をデバッグするために、Tomcat でアクセス ログを有効にしました。Apache サーバーは使用していません。私たちが使用している埋め込みTomcatです。

アクセスログには以下のパターンを使用しています。

%D = 要求の最初のバイトが受信された時間 ~ 応答の最後のバイトが送信された時間。

したがって、%D にはネットワーク遅延も含まれます。

しかし、受信した要求の最初のバイトと送信した応答の最初のバイトの時間差を出力するにはどうすればよいですか。

access_logサーバーでログ (および)を無効にしたいと考えerror_logています。これは機能によって可能ini_set()ですか？もしそうなら、どのようにしますか？

アクセスログの挙動がおかしくなりました。ログは次のように構成されています。

これは非常に標準的だと思います。アクセス ログのほとんどの行は、次の 2 つの IP アドレスで始まります。

最初のものは私のもので、2番目のものはクライアントのIPです。ただし、時々、次の 3 つのアドレスを含む行が表示されます。

もちろん、すべてのアドレスと URL は偽造されています。

では、そのようなアドレスが 3 つ表示された場合、それはどういう意味ですか? 真ん中のアドレスはしばしば 10. サブネットですが、実際にはそうではありません ;-) これ (アクセス ログの 3 つのアドレス) は週に約 3 回発生します。

私のセットアップ httpd -> virtualbox with httpd -> tomcat (ただし、アクセス ログは 2 番目の httpd によって書き込まれます)。

よろしくお願いします レオン

着信要求の IP アドレスを GlassFish のログに記録したいと考えています。いろいろ調べた結果、方法がわかりました。しかし、ここでの問題は、それをアクセス ログ ファイルに記録する方法を学んだことです。server.log ファイルに IP アドレスを記録する方法はありますか?