タイトルの通り記事をクローリングして、あとは著者だけです。
以下は私のコードで、pyqueryを使用して段落と作成者をコンパイルし、作成者のみが空白を返します
対象サイト:http: //business.transworld.net/153984/news/surfrider-foundation-names-chad-nelsen-new-ceo/
def extract_text_pyquery(html):
p = pq(html)
article_whole = p.find(".entry")
p_tag = article_whole('p')
print len(p_tag)
print p_tag
for i in range (0, len(p_tag)):
text = p_tag.eq(i).text()
print text
entire = p.find("#main")
author = entire.find('a').filter('.author')
print 'By:', author