1

Yahoo ファイナンスの URL から結果を取得しようとしています。

http://finance.yahoo.com/d/quotes.csv?s=XOM=sn1yr を返す:

"XOM",4:00pm - <b>83.25`</b>`,2.11,13.42

これらの結果を Mongoose を使用してデータベースに保存しようとしています。既存のCSVファイルから保存するコードがいくつかあります（ご覧のとおり、異なるが関連するコンテンツがあります）：

 var writer = new csv.CsvWriter(process.stdout);
  reader.setColumnNames(["Symbol","Company","StockExchange"]);
  reader.addListener('data', function(data) {
  console.log(data);
  var stock = new Stock(data).save();
 });

私は次のようなことをしようとしています:

Scraper は、https://github.com/mape/node-scraperにあるモジュールです。

scraper('http://search.twitter.com/search?q=javascript', function(err, $) {
if (err) {throw err;}

$('.msg').each(function() {
    console.log($(this).text().trim()+'\n');
});
 });

しかし、応答を別のCSVファイルに入れずにYahoo URLからのCSV結果を使用すると、何らかの方法でstream.writeを使用する必要があると言われました。私はNode.jsを初めて使用するので、これを理解するのに助けていただければ幸いです。助けてくれてありがとう！

4

1 に答える 1

5

http://finance.yahoo.com/d/quotes.csv?s=XOM=sn1yrから CSV を取得して、データベースに保存できるようにデータを解析しようとしていますか?

私のスクレイピング ライブラリnode.ioが役立つかもしれません。

require('node.io').scrape(function() {
    this.get('http://finance.yahoo.com/d/quotes.csv?s=XOM=sn1yr', function(err, data) {
        var lines = data.split('\n');
        for (var line, i = 0, l = lines.length; i < l; i++) {
            line = this.parseValues(lines[i]);

            console.log(line); //['XOM, '4:00pm - <b>83.25`</b>`', '2.11', '13.42']

            //Do something with your data..
        }
    });
});
于 2011-03-31T11:33:28.673 に答える