問題タブ [rcurl]

これはおそらく非常に基本的な質問ですが、私はそれを理解しようと多くの時間を費やしましたが、単に解決策を思い付くことができません.

TwitteR を使用して、Twitter からユーザーの友人やフォロワーに関するデータを取得しようとしています。私はこの単純な構文を使用しました：

最後の行を実行すると、次のメッセージが表示されます。

Twitter から友達を抽出しようとすると、同じ問題が発生します。構文は非常に簡単に見えますが、何が問題なのでしょうか?

ありがとうございました！

ルーシー

curlPerform()またはからデータを取得しようとすると、JSON 文字列の文字サイズ制限のように見えますgetURL()。これは再現不可能なコード [1] ですが、問題を明らかにするはずです。

また

私の推測では、またはテキスト ハンドラー オブジェクトのupdateまたはvalue関数が大きな文字列に問題を抱えていると思います。この例では、約 2 MB の切り捨てられた文字列が返されます。上記のコードは、2 MB 未満のクエリで問題なく動作します。basicTextGatherdynCurlReaderr$value()

コマンドラインから (または R で使用して) 以下を簡単に実行できますがsystem()、その後の分析を R で行っている場合、ディスクへの書き込みは無駄に思える ことに注意してください。

ここstream.jsonで、約 14MB の json 文字列です。どちらかを使用して文字列を R に読み込むことができます

または直接リストする

どんな考えでも大歓迎です。

ライアン

[1] - 再現可能なコードを提供できなくて申し訳ありませんが、私は政府のファイアウォールを扱っています。

続行する前に、ダンカン テンプル ラングの Web サイトであるRGoogleTrends_0.2-1.tar.gz ここからダウンロードしてください。

再現可能な例（または、少なくとも、誰かが再現できることを願っています）：

これらのパラメーターを使用して Google アカウントを作成しました。

次にRGoogleTrendsコード：

コードの結果:

私のsessionInfo()：

URLlist という名前の URL のリストがあり、それをループして、各 URL のソース コードを取得します。

問題はランダムな URL で、コードが動かなくなり、次のエラー メッセージが表示されます。

しかし、ループではなく、問題のある URL で getURL 関数を試してみると、完全に機能します。

何か助けてください？どうもありがとうございます

次のように、RCurl を使用して https get リクエストを取得する必要があります。

次のエラーが表示されます。

Cranに接続してRパッケージをインストールできるため、Rセッションからインターネットに確実に接続できます。URL内にキーがあるため、接続しているこのURLにはユーザー名/パスワードは必要ありません。ブラウザでこの URL に手動でアクセスできます。ここで何が間違っているのか誰か教えてもらえますか?

curl プロキシでtwitteR のsearchTwitter()関数を使用しようとしていますが、JSON 関連のエラーが発生します。多くの人がこれと同じ JSON エラーを受け取っているようです。しかし、私の原因は違うと思いますので、具体的に質問したいと思います。

Twitter の API との OAuth 接続を適切にセットアップしました。私は Windows を使用しており、最新バージョンの R とすべてのパッケージを使用しています。会社のファイアウォールのため、プロキシを使用しています。RCurlOptionsプロキシの設定に使用しています。RJSONIOも持ち込みます。プロキシを構成する必要がない場合、コードは会社のファイアウォールの外側で正常に実行されます。

これは私が得るエラーです:

Twitter が R によって適切に解析できない文字を返す問題ではないことはわかっています。

このリンクは、RCurl の使用が原因である可能性があることを示唆しています: https://github.com/omegahat/RCurl/issues/1

彼の説明は、私が RCurl を使用したために JSON が台無しになっているというものです。は、データに Unicode 文字が含まれている場合にのみ呼び出されるによって\\変換されます。私が理解しているのはこのくらいです。彼はまた、議論に言及しています。\R_mapString.mapUnicode

RCurlOptionsこの問題を解決する I can configureのパラメーターはありますか? ありがとう。

Web サイトのディレクトリにあるファイルのリストを取得しようとしています。ローカル ディレクトリの一覧表示の dir() または list.files() コマンドと同様の方法はありますか? RCurl を使用して Web サイトに接続できます (HTTPS 経由の SSL 接続が必要なため必要です)。

しかし、これはファイルのリストの画像、ハイパーリンクなどを含む HTML ファイルを作成しますが、dir() で取得するように、ファイルの R ベクトルが必要なだけです。これは可能ですか？または、ファイル名を抽出するために HTML 解析を行う必要がありますか? 単純な問題に対する複雑なアプローチのように思えます。

ありがとう、

編集: http://hgdownload.cse.ucsc.edu/goldenPath/hg19/encodeDCC/wgEncodeGencodeV7/で動作させることができれば、私の言いたいことがわかるでしょう。