問題タブ [robot]

大量の Web ページのインデックスを作成する必要があります。優れた Web クローラー ユーティリティはありますか? 私は .NET が通信できるものを望んでいますが、それはショーストッパーではありません。

私が本当に必要としているのは、サイトの URL を指定できるもので、すべてのリンクをたどり、インデックス作成のためにコンテンツを保存します。

私はロボットを持っていて、電波を使ってインターネット経由で制御したい..しかし、それでもそれを行うのに最適な言語がわかりません。誰もがそれを使用できないようにするために、安全なサイトを構築する必要があります。私はC＃でサイトASPを期待していますが、送信者デバイスから受信ロボットまで制御するために必要な言語は何ですか. また、ロボットカメラからサイトへのライブビデオ転送も必要です.........お手数をおかけしてすみません....間違っているかもしれませんが、私は初心者です

そして、私を読んだり助けようとしたりしてくれたすべての人に感謝します

ルートに次のrobots.txtがあるサイトがあります。

そして、このサイト内のページは、一日中Googlebotsによってスキャンされています。私のファイルまたはGoogleに何か問題がありますか？

自分のチャネルで使用しているPHPIRCロボットがあり、スクリプト内の特定のセットユーザーにOPを作成するために必要です。とにかく、私はロボットにユーザーがNickServにログインしているかどうかをチェックして、あらゆる種類の詐欺などを防止したいと思っています。

とにかく、これが私の接続と実行のコードであり、その下に本当に助けが必要なものが続きます。すべての助けに感謝します。:) Freenodeで、/ NS ACC [user]と入力すると、[user]が数値でログインしているかどうかが返され、3がログインし、0-2が何らかのログインしていないと判断しました。

ボットが私のIRCチャネルにログインする方法は次のとおりです...（freenodeで#tyreusに参加して、BwaddArr（または彼の電子メール）を要求してください）

そして、これは私が本当にすべての助けを必要とするところです！:)

Web/HTTP ベースのロボットを開発するための既存のプラットフォーム/フレームワークはありますか? 実際、私はいくつかの Web ゲームをプレイすることに興味があります。このゲームでは、自分の都市を構築したり、ヒーローや兵士を選択して訓練したりできます.. ( Travianなど) しかし、ゲームでは、そのようなアクションを完了するのに時間がかかります (私は待つのは嫌いです..）それらに対処するための自動ツールを作成しようとしています。そのため、次の方法で開発の進行を容易にするプラットフォーム/フレームワークを見つけようとしています。

• http/https クライアントを提供します ( Keep-Alive をサポートすることをお勧めします)
• Web ページ、josn データの解析を容易にする[重要]
• ジョブ/タスクのスケジュールをサポート
• javascript、python などのスクリプトを有効にします。
• イベントドリブン（そのようなプラットフォーム/フレームワークには最適な方法だと思います）

私は調査を行い、Twistedが最も適しているように思われますが、最も適した別のものがあるかどうかを知りたいです。

はい、私はそれらの QA ツールを知っていて、よく知っていますが、HTTP レベルで動作するコンソール アプリが本当に好きです。スクリプトは、ゲーム イベントの処理方法を指示するため、ロボットと呼ぶことができます。フレームワークが必要です。 ..

運営しているウェブサイトのメンテナンス ページをセットアップする必要があります。たとえば、サイトのメンテナンス中 (スケジュールされたダウンタイム) に表示するため、または何かが本当に壊れて保留ページを表示する必要がある場合などです。

検索エンジンのクローラーがそのサイトをインデックスに登録せず、自分のサイトだと認識しないようにするために、何か特別なことをする必要がありますか? または、404 を実行するか、一時的な robots.txt ファイルなどを追加する必要がありますか? 基本的に、私のサイトとしてインデックスに登録してほしくありませんが、私のサイトが死んで戻ってこないと思わせたくもありません。

編集:これが私が Apache で行ったことです: ErrorDocument 503 /.server-maintenance.html RewriteEngine On RewriteRule !^.server-maintenance.html /server-maintenance Redirect 503 /server-maintenance strong text

位置トラックとして光学式マウスを使用するロボットがあります。基本的に、ロボットが動くと、マウスを使用してX方向とY方向の変化を追跡できます。マウスは、移動している方向（つまり、負のXまたは正のX）も追跡します。これらの値は、別々のXレジスタとYレジスタに合計されます。

これで、ロボットは所定の位置で回転し、前進するだけです。そのため、ロボットの動きは理想的には直線であり（ただし、マウスのトラッキングは、方向を変えると偏差を拾う可能性があります）、特定の角度で行われます。ロボットの特定の動きのセットは次のようになります
。A：45度回転、3インチ移動
B：90度回転、10インチ移動
C：-110度回転、5インチ移動
D：10度回転、1インチ移動
しかしマウスXおよびマウスYレジスタが、各方向に移動した実際の距離を示すたびに。

さて、AからDへの移動セットのみを繰り返したい場合、すでに収集した情報を使用してこれを行うにはどうすればよいですか。基本的に、すでにフィードしているすべての角度と距離を合計できることはわかっていますが、各移動順序に大きなエラーがあった場合、これは不正確であることがわかります。マウスからの生の情報をどのように使用できますか？友人から、マウスの値を連続的に正弦波と正弦波で計算して最終的なベクトルを計算できるというアイデアがありましたが、これがどのように機能するかはよくわかりません。

問題は、マウスが相対的な読み取り値しか表示しないため、回転または後方に移動すると、情報が消去される可能性があることです。そうですね、私が疑問に思っているのは、アルゴリズムを実装して、変更を継続的に追跡し、元々そこに到達するためにジグザグに移動した場合に最短経路を提供できるようにする方法です。

何年も前、プログラミングを始めたばかりの頃、CRobots スタイルのプログラミング ゲーム (実際には CRobots ではなかったと思いますが、一種のクローンのようなものです) に出くわしました。

最近、「プログラミングは遊びじゃなくて仕事だ」という気持ちが強くなったので、仲間と一緒に誰が一番いいロボットを作れるかを競うのはどうだろうと考えました。

しかし、さまざまなレベルの経験があり、プログラミング言語に関して多くの異なる好みがあるため、私は競争を 1 つの言語に結び付けたくありません。深夜のグーグル検索で見つけたものは単一の言語に結びついているようで、Java ベースのもの (Robocode など) でさえ、Jython やその他の JVM ベースの言語 (理論的には動作するはずです）。

単一の言語に制限されていないこのタイプのゲームはありますか?

具体的には、ソケットを使用しないライブラリはありますか? このコードは、ソケットの使用を許可しない Google App Engine で実行します。

Google アプリ エンジンでは、urllib2 を使用して Web リクエストを行うことができます。

以前使っていたので、機械化を働かせようとしてきましたが、もっと簡単なものがあれば、それをやりたいと思います。

ありがとう、マーク

ユーザーが入力し、情報をサーバーに送信してデータベースに保存する Web フォームがあります。ロボットがフォームに入力するだけで、役に立たないレコードでいっぱいのデータベースになってしまうのではないかと心配しています。ロボットがフォームに入力するのを防ぐにはどうすればよいですか? Stackoverflow のロボット検出のようなものを考えています。ロボットであると判断した場合、ロボットではないことを確認するように求められます。Perl、Java、または PHP にサーバー側 API はありますか?