Web サイトに含まれるすべての aspx ページのリストを作成したいと考えています。
しかし、私は40ページしか得ていません。しかし、2000ページ以上あります。
すべての aspx ページ リストを取得する方法を教えてください。次のコードを使用して、URL ページのリストを取得しています。
private string[] GetAllUrls(string str)
{
string pattern = @"<a.*?href=[""'](?<url>.*?)[""'].*?>(?<name>.*?)</a>";
System.Text.RegularExpressions.MatchCollection matches = System.Text.RegularExpressions.Regex.Matches(str, pattern, System.Text.RegularExpressions.RegexOptions.IgnoreCase);
string[] matchList = new string[matches.Count];
int c = 0;
foreach (System.Text.RegularExpressions.Match match in matches)
matchList[c++] = match.Groups["url"].Value; return matchList;
}