python - portia (scrapy) を使用して Web サイトからメタタグを抽出する

Question

portia (scrapy) を使用して Web サイトからメタタグを抽出する

一部の Web サイトからメタ タグを抽出するために portia を使用したいのですが、head タグが表示されず、body タグのみから開始されています。

body タグからしかデータを抽出できません

Answer 1

これをメタ名に使用できます。

meta_name = hxs.select('//meta/@name').extract()

これはメタコンテンツ用です：

meta_content = hxs.select('//meta/@content').extract()

これは、説明のような特定の名前を持つメタのコンテンツの場合です。

meta = hxs.select('//meta[@name=\'description\']/@content').extract()