問題タブ [craigslist]

craigslistからのRDFフィードを利用しようとすると、（401）UnauthorizedWebExceptionが発生します。そのすぐ下にあるコメントアウトされた2つのURLを問題なく読み取ることができます。Internet Explorerを使用してクレイグリストのURLに直接問題なく移動できる場合、XmlReaderを使用してデータを読み込もうとすると失敗するのはなぜですか？

http://portland.craigslist.org/search/sss?query=mac&srchType=A&format=rss

興味のある craigslist のリストを管理するために、GAE で小さなアプリを作成しようとしています。アプリからこれらのリストからデータを取得したいのですが、そうするたびに craigslist から 404 が返されます。

調査の結果、私のコードが原因ではないことが判明しました。craigslist は HTTP ヘッダーを調べ、User-Agent ヘッダーに「AppEngine-Google」が見つかると、体系的に 404 を返します。

あなたはcurlでそれを見ることができます：

動作します（ページを返します）。

何も与えません。

GAE によってデフォルトで設定されているこのヘッダーを削除する方法はありますか? または、問題を回避するための別のアイデアはありますか?

こんにちは、私の質問を手伝ってくれてありがとう。

craigslist または kiji の投稿、つまりhttp://toronto.en.craigslist.ca/tor/atq/3346994296.htmlで提供されたときに、次の情報を抽出するスクリプトを作成することは可能ですか?

1. メールアドレス (craigslist が提供するデフォルトのもの)
2. ポストのアイテム
3. ポスターのアドレス

上記の 1 ～ 3 は、手動で取得できる情報ですが、投稿 ID または広告 ID を入力するだけで、この情報を抽出できるようにしたいです。

craigslistsfbay.craigslist.orgでHTTPGETを実行しようとしています。これが私の（ruby）コードです。これは本当に単純です。

「このIPは自動的にブロックされました」というエラーが表示されます。

この動作は、AmazonEC2またはherokuでこれを試した場合にのみ発生します。自分のコンピューターのローカルホストで再試行すると、正しい結果が得られます。これはAmazonEC2と関係がありますか？

他の人も同じ問題を抱えているのではないかと思います。EC2からクレイグリストにアクセスするにはどうすればよいですか？

重複の可能性:
無料のジオロケーション geoip、それらは実行可能ですか?

訪問者の位置を追跡する最も正確な方法を見つけたいと考えています。craigslist は、ユーザーからの入力を必要とせずにユーザーの位置を正確に取得できることに気付きました。ユーザーを追跡するために何をしているのか誰か教えてもらえますか? 私は自分の Web プログラムが彼らのプログラムと同じくらい正確であることを望んでいます。

注：（私はJavaScript / PHPを使用しています。）

何かを Craigslist に投稿したり、他の Web サイトを選択したりするときに、リターン キーを 2 回押して新しい段落を開始します。改行要素を手動で挿入する必要はありません。Craigslist には、改行キーのダブルタップを新しい段落の開始として認識し、区切り要素を挿入するコードがあります。

彼らはどのようにそれをしますか？技術者以外のユーザーが HTML を使用せずに複数段落のエントリを送信できる Web サイトを作成したいと考えています。オンラインで何かを見つけることに成功していません。誰かが私を正しい方向に向けることができれば幸いです。ありがとうございました。

Scrapyを使用して Craigslistの広告をスクレイピングして、販売中のアイテムを抽出しようとしています。

日付、投稿のタイトル、投稿の URLを抽出できますが、価格の抽出に問題があります。

何らかの理由で、現在のコードはすべての価格を抽出しますが、価格範囲を検索する前に//を削除すると、価格フィールドは空として返されます。

誰かが以下のコードを確認して、私を助けてくれませんか?

私は最初のPythonプロジェクトに取り組んでおり、Scrapy.orgフレームワークを使用しています。IFステートメントを使用して、価格が空であるかどうかを判断しようとしているため、CSVファイルに保存されません。

何らかの理由で、インデント例外が発生します。

IndentationError：インデントされたブロックが必要です

IFステートメントは、このコードスニペットの最後にあります。

時間を割いて私を助けてくれてありがとう！

コード：

私はPythonでコーディングするのが初めてで（おそらく数日）、基本的にstackoverflowで他の人のコードを学習しています。私が書こうとしているコードは、beautifulsoup を使用して pid と craigslist のオートバイの対応する価格を取得します。これを行うには他にも多くの方法があることは知っていますが、現在のコードは次のようになります。

それはうまく機能し、学習を続けながら最適化する予定です。私が今抱えている問題は、価格のないエントリがまだ表示されていることです. 私が行方不明であることは明らかです。ありがとう。

Delphi2010と最新バージョンのIndy10を使用してCraigslistにログインし、アカウントページを取得しようとしています（すべての投稿のリストを収集するため）。

ただし、ログインの詳細を投稿すると、返されるHTMLはログインページのHTMLですが、アカウントページに投稿が一覧表示されることを期待しています。

これが私の最新のコードです：

メールとパスワードがリクエストパラメータで渡されるので正しい値であることをデバッグで確認しましたが、期待するページが表示されないのはなぜですか？