私はスクレイピングハブを 2 日間使用しましたが、ウェブサイトにログインしてデータをスクレイピングする方法を探しています。このトピックは表示されますが、Dash に適用する方法がわかりません。
http://blog.scrapinghub.com/2012/10/26/filling-login-forms-automatically/
それを達成する方法を説明していただけますか?
Scrapy だけを使用していたときは、次のように実現します。
parsed = [FormRequest.from_response(
response,
formdata={
'session[email]': 'email@gmail.com',
'session[password]': 'password'
},
callback=self.after_login)]
しかし、Scraping Hub を使用してそれを達成する方法がわかりませんでした:/