python - BeautifulSoup を使用して、特定のドメインを指すページ内のすべてのリンクを見つけるにはどうすればよいですか?

Question

BeautifulSoup を使用して、特定のドメインを指すページ内のすべてのリンクを見つけるにはどうすればよいですか?

Answer 1

スープストレーナーを使用し、

from BeautifulSoup import BeautifulSoup, SoupStrainer
import re

# Find all links
links = SoupStrainer('a')
[tag for tag in BeautifulSoup(doc, parseOnlyThese=links)]

linkstodomain = SoupStrainer('a', href=re.compile('example.com/'))

編集：公式ドキュメントの変更例。