python - http 経由でディレクトリをトラバースする

Question

ページを開くURL http://example.com/resultがあり、いくつかの (ディレクトリの数は 1、2、3... 任意の数のディレクトリ) ディレクトリがあるとします。各ディレクトリをトラバースして、ディレクトリまたはサブディレクトリ内のどこにでもあるnew.txtファイルを見つけたい....

http://example.com/resultには次のディレクトリがあります:

security
major
minor
fails
logs
..

すべてのディレクトリ内で new.txt を見つける必要があり、コンテンツを読みたいです。すべてのディレクトリ (security/major/...etc) にもサブディレクトリがある場合があります。dir またはサブディレクトリ内で new.txt を見つける必要があります。

Answer 1

Pythonを使用する場合は、urllibを使用する必要があります。

各ページのヘッダーを確認してください。ディレクトリとファイルにはリンクタグがあります。そのリンクタグに移動し、ヘッダーを確認します。ファイルとディレクトリのヘッダーが異なる可能性があります。

そのディレクトリが再帰的に同じ関数を呼び出し、そのディレクトリ内の各ファイルをチェックする場合。