問題タブ [mesos]

ハイパーテーブル マスター マシンに接続しようとしています。ハイパーテーブルは mesos 経由でデプロイされます。ハイパーテーブル.cfg ファイルをマスター マシンから任意のマシンにコピーすると、start-thriftbroker.sh を実行した後、約 10 行の " ThriftBroker が起動するのを待っています...」、「エラー: ThriftBroker が起動しませんでした」、ThirftBroker のログファイルは次のように述べています。

Windows マシンで Spark クラスターをセットアップしようとしています。
ここに行く方法は、スタンドアロンモードを使用することですよね?
Mesos や YARN を使用しないことの具体的なデメリットは何ですか? そして、それらのいずれかを使用するのはどれほどの苦痛でしょうか? ここで経験した人はいますか？

Chronosのサイトでは、Chronos がカスタムMesosエグゼキュータをサポートしていると述べています。Mesos の例は、カスタムの Mesos エグゼキューター (master/src/examples/java/TestExecutor.java) を作成する方法を示しています。ただし、Chronos RET API を介してそのようなカスタム executor をスケジュールする方法に関するドキュメントを見つけることができません。これに関するヘルプやポインタは大歓迎です。

前もって感謝します。

私のクラスターはSpark-0.7.2+Mesos-0.9です。Python で spark プログラムを作成しましたが、ローカル モードで問題なく動作します。しかし、mesos で実行すると、いくつかのエラーが発生しました。エラー情報は次のとおりです。

これは毎回起こっているわけではありません。ソケット接続が安定していないようです。誰かがこの問題を解決する方法を提案できますか?

茂みをぶつけずに、直接クエリに行きます:)

複数の VM、WAR ファイル、および次の構成があるシステムを実装しています。 - 負荷分散のために mod_jk で構成された Apache と Tomcat を実行するマスター VM があります。

• このマスター VM は、リソースの監視とタスクの実行のために Apache Mesos も実行します。このタスクは、WAR ファイルと MySQL データベースのダンプを Mesos スレーブにコピーするように構成されています。

アイデアは、利用可能なリソースに基づいて、必要に応じてスケールアップ/ダウンすることです。たとえば、新しい HTTPRequest が着信し、空いているマシンがない場合、Mesos マスターにリソースが要求され、新しい VM がオンになります。この VM は、Tomcat、MySQL、およびその他の必需品で既に構成されているとします。Mesos タスクは、必要な WAR ファイルとデータベース ダンプを正しくコピーします。

私の問題は、Apache が新しい HTTPRequest を受信したときに、Apache がこのリクエストを Tomcat に転送してサービスを提供する前に、何らかのタスク (Mesos にリソースを要求し、VM を起動して実行する) をどのように実行するかということです。

情報については、Ubuntu 12.04 を実行しています。

httpd.conf でいくつかの構成を検索しましたが、このシナリオに役立つ構成が見つかりませんでした。

どんな助けでも本当に感謝します! 前もって感謝します！

OS X Mavericks にアップグレードした後make、Mesos ビルド ディレクトリで実行するとエラーが発生します。

クリーンなビルド ディレクトリから始めて、 re-ran./bootstrapを実行し、 run を実行しましcd build && ../configureた。

Apache Mesos クラスターをセットアップし、Hadoop-Job を実行しようとしています。ここのドキュメント は私のレベルではないため、理解できず、誰かが説明してくれるかもしれません:

まず、機能する Hadoop クラスターをセットアップする必要がありますか? または、最初に Mesos クラスターをセットアップしますか? 奴隷をどこに向ければいいですか？Hadoop スレーブ ファイルまたは登録済みの Mesos スレーブのみを使用する必要がありますか?

CentOs に mesos をインストールしようとしています。ダウンロードして./configureコマンドを実行しました。しかし、mesos には開発バージョン 2.6 が必要なため、インストールされている python のバージョンが原因で完了できませんでした。Python をアップグレードしようとしましたが、2.4 にしかアップグレードされません。次に、手動で python 2.6 をダウンロードしてインストールします。これは下に/usr/local/bin/あり、古いものは の下にあり/usr/binます。ターミナルで python コマンドを実行すると python 2.6 が表示されますが、mesos を設定すると再び同じエラーが発生します。

configure: エラー: `/root/mesos-0.14.1' 内: configure: エラー: テスト プログラムを Python にリンクできませんでした。メインの Python ライブラリが非標準のライブラリ パスにインストールされている可能性があります。その場合は、LDFLAGS 環境変数を介して configure に渡します。例: ./configure LDFLAGS="-L/usr/non-standard-path/python/lib" =========================== =============================================== エラー! おそらく、ディストリビューション用の Python パッケージの開発バージョンをインストールする必要があります。このパッケージの正確な名前は、パッケージによって異なります。================================================== ==========================

/usr/local/bin/python次に、へのシンボリックリンクを作成します/usr/bin/pythonが、「yum」コマンドが機能せず、メソを再度構成しても同じエラーが発生します。./configure LDFLAGS="-L/usr/local/lib/python/lib"Cent Os に mesos クラスタをインストールするにはどうすればよいですか? 解決策は何ですか？

Mesos.make と make check のインストール中にエラーが発生しましたが、make install の実行中にエラーが発生しました

私は Mesos クラスターをセットアップしています -- マスターがスレーブを認識できることを確認しました -- しかし、Hadoop ジョブを実行しようとすると、すべてのタスクが LOST のステータスで終わります。すべてのスレーブ stderr ログに同じエラーが存在します。

それが stderr ログの唯一の行です。

http://mesosphere.io/learn/run-hadoop-on-mesos/の指示に従って、各スレーブがアクセスできる修正された Hadoop ディストリビューションを HDFS に配置しました。Hadoop ディストリビューションのlibディレクトリに、 と を追加hadoop-mesos-0.0.4.jarしましmesos-0.14.2.jarた。

各スレーブが実際にこの Hadoop ディストリビューションをダウンロードし、そこにhadoop-mesos-0.0.4.jarclass が含まれていることを確認しorg.apache.hadoop.mapred.MesosExecutorたので、クラスが見つからない理由がわかりません。

CDH4.4.0 と mesos-0.15.0-rc4 の Hadoop を使用しています。

何が問題なのかについて何か提案はありますか? 私は常にCLASSPATH問題から始めることを知っていますが、この場合、mesos-slave は Hadoop TaskTracker をダウンロード、アンパック、および実行しようとしているためCLASSPATH、mesos-slave によってセットアップされると想像できます。

スレーブ ログの stdout に、環境が出力されます。MESOS_HADOOP_HOME空の があります。これは何かに設定する必要がありますか？ダウンロードした Hadoop ディストリビューションに設定することになっている場合、Hadoop ディストリビューションは毎回新しい場所にダウンロードされるため、事前に設定することはできません。

関連するイベント (おそらくいくつかの権限の問題) で、マスター UI を介してスレーブ ログを参照しようとすると、エラーが発生しますError browsing path: ...。mesos-slave を実行しているユーザーは、手動で正しいディレクトリを参照できます。