私は、Javaで記述された、サイト内の無効なURLを検出するためのクロールツールを探しています。
難しいのは、URLの多くがjavaScript、CSS3、Ajaxで行われていることです。したがって、サイトのURLのコンテンツを取得するだけでは不十分です。
理想的なのは、javaScript、CSSスタイリング、AJAX呼び出しを実行し、その際にアクセスしたさまざまなURLを吐き出すことができるヘッドレスツールです。
これは大変な注文だと思いますが、どこかに存在するのではないでしょうか。
私は、Javaで記述された、サイト内の無効なURLを検出するためのクロールツールを探しています。
難しいのは、URLの多くがjavaScript、CSS3、Ajaxで行われていることです。したがって、サイトのURLのコンテンツを取得するだけでは不十分です。
理想的なのは、javaScript、CSSスタイリング、AJAX呼び出しを実行し、その際にアクセスしたさまざまなURLを吐き出すことができるヘッドレスツールです。
これは大変な注文だと思いますが、どこかに存在するのではないでしょうか。
それらのために作られたhttp://htmlunit.sourceforge.net/で使用することをお勧めします。