Azure ACS 経由でインストールされた dcos を使用し、デフォルト オプションで dcos ツール経由で hdfs と spark をインストールしました。
SparkStreamingContext を作成すると、次のようになります。
16/07/22 01:51:04 WARN DFSUtil: Namenode for hdfs remains unresolved for ID nn1. Check your hdfs-site.xml file to ensure namenodes are configured properly.
16/07/22 01:51:04 WARN DFSUtil: Namenode for hdfs remains unresolved for ID nn2. Check your hdfs-site.xml file to ensure namenodes are configured properly.
Exception in thread "main" java.lang.IllegalArgumentException:
java.net.UnknownHostException: namenode1.hdfs.mesos
dcos package install–options=を使用して spark パッケージを再デプロイする必要があると思いますが、どうあるhdfs.config-urlべきかわかりません。https://docs.mesosphere.com/1.7/usage/service-guides/spark/install/#hdfsドキュメントは古くなっているようです。