url - HTTPURLのファイルでHTTP応答コードを確認してください

Question

リンクを含むファイルをチェックして、リンクが壊れていないかどうかを確認する方法が必要です。このファイルには、何千もの異なるURLへのリンクが含まれています。ファイルにあるURL以外にクロールやスパイダーを行う必要はありません。必要なのは、URLごとにHTTPリクエストの応答だけです。

Answer 1

Xenuを見てください。

Webページまたはリンクのテキストファイルであると仮定すると、必要なことを正確に実行します。リンクをたどる深さを制御できます。