新しい賭けツールを作りたいのですが、オッズと結果のデータベースが必要で、ウェブで何も見つかりません。すばらしいアーカイブがあるこのサイトを見つけました: OddsPortal
私がやりたいのは、上記のようなページから結果とオッズをこすり落とすことだけです。Scrapy というツールでできることがわかりましたが、本当ですか? 誰かがヒントを教えてくれますか?
新しい賭けツールを作りたいのですが、オッズと結果のデータベースが必要で、ウェブで何も見つかりません。すばらしいアーカイブがあるこのサイトを見つけました: OddsPortal
私がやりたいのは、上記のようなページから結果とオッズをこすり落とすことだけです。Scrapy というツールでできることがわかりましたが、本当ですか? 誰かがヒントを教えてくれますか?
Scrapy については知りませんが、JSoup はあなたが始めるのに役立つはずです。
.jar ファイルをダウンロードします。プロジェクト フォルダーを右クリック > [プロパティ] > [Java ビルド パス] > [ライブラリ] > [外部 jar を追加] > jar を見つけてクリックします。
素敵な小さな HTML パーサーです
これが例です。
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
public class HtmlParser {
public static void main(String[] args) throws IOException{
String url = "http://stackoverflow.com/questions/16794913/data-scraping-with-scrapy";
Document document = Jsoup.connect(url).get();
String question = document.select(".question .postcell").text();
System.out.println(question);
}
これにより、質問が出力されます:P
この Web ページを右クリックし、[要素の検査] をクリックします。
次に、必要な要素を見つけて、そのクラスの名前 (または ID) を document.select() 部分に入力します (この場合は ".question .postcell")。(.parentClass .childClass)
さらにヘルプが必要な場合は、jsoup Web サイトにガイドがあります。
お役に立てれば!
編集:
私はボードに乗っていたので、2003 年から 2004 年のすべてのイタリア サッカーのスコアを取得する小さなものをまとめました。 2004/実績/
public class HtmlParser {
String url = "http://www.oddsportal.com/soccer/italy/serie-a-2003-2004/results/";
Document document = Jsoup.connect(url).get();
Elements stats = document.select("#tournamentTable tbody tr");
for(int i = 0; i < stats.size(); i++){
System.out.println(stats.get(i).text());
}
}
Output:
Soccer» Italy»Serie A 2003/2004
1 X 2 B's
AC Milan - Brescia 4:2 - - - 6
Chievo - Bologna 2:1 - - - 5
Empoli - Inter 2:3 - - - 5
Parma - Udinese 4:3 - - - 5
Lazio - Modena 2:1 - - - 4
Lecce - Reggina 2:1 - - - 5
Perugia - Ancona 1:0 - - - 1
Sampdoria - AS Roma 0:0 - - - 4
Siena - Juventus 1:3 - - - 5
1 X 2 B's
Ancona - Empoli 2:1 - - - 1
AS Roma - Perugia 1:3 - - - 3
Bologna - Lecce 1:1 - - - 7
Brescia - Lazio 2:1 - - - 1
Inter - Parma 1:0 - - - 7
Juventus - Sampdoria 2:0 - - - 7
Modena - Siena 1:3 - - - 7
Reggina - AC Milan 2:1 - - - 1
Udinese - Chievo 1:1 - - - 3
1 X 2 B's
AC Milan - AS Roma 1:0 - - - 6
Parma - Ancona 3:1 - - - 3
Lazio - Reggina 1:1 - - - 6
Lecce - Inter 2:1 - - - 6
Perugia - Juventus 1:0 - - - 4
Sampdoria - Udinese 1:3 - - - 5
Siena - Brescia 0:1 - - - 3
1 X 2 B's
Ancona - Chievo 0:2 - - - 3
AS Roma - Empoli 3:0 - - - 6
Inter - Lazio 0:0 - - - 6
Juventus - Lecce 3:4 - - - 6
Modena - Sampdoria 1:0 - - - 5
Reggina - Parma 1:1 - - - 5
Udinese - AC Milan 0:0 - - - 6
1 X 2 B's
Lazio - AS Roma 1:1 - - - 7
1 X 2 B's
Modena - AS Roma 0:1 - - - 6
Chievo - Reggina 0:0 - - - 4
Empoli - Brescia 1:1 - - - 5
Parma - Juventus 2:2 - - - 6
Inter - Bologna 4:2 - - - 6
Lazio - Ancona 4:2 - - - 5
Sampdoria - Perugia 3:2 - - - 6
1 X 2 B's
Lecce - Udinese 2:1 - - - 6
Siena - AC Milan 1:2 - - - 5
1 X 2 B's
Perugia - Inter 2:3 - - - 7
1 X 2 B's
Juventus - Lazio 1:0 - - - 7
AC Milan - Empoli 1:0 - - - 7
Ancona - Bologna 3:2 - - - 7
AS Roma - Chievo 3:1 - - - 7
Brescia - Modena 0:0 - - - 7
Reggina - Udinese 0:1 - - - 7
Siena - Sampdoria 0:0 - - - 7
とてもクール!