1

誰かがCassandraデータベースを手伝ってくれますか?実際、私はスクレイピングされたデータを直接カサンドラに送りたいと思っています。現在、さまざまなWebサイトのデータを解析するためにscrapyを使用しています。

前もって感謝します。

ssich

4

1 に答える 1

2

Scrapy では、データをスクレイピングしたら、それをアイテム パイプラインを介して実行して保存できます。

ドキュメントは理解しやすいです: http://doc.scrapy.org/en/latest/topics/item-pipeline.html

カスタム アイテム パイプライン内で Cassandra の python ドライバーを使用して、結果を保存するだけです。


編集:デッドリンクを有効なものに更新しました。

于 2011-06-27T13:47:57.457 に答える