1

Databricks を使用して Spark クラスターを実行しています。curl を使用してサーバーからデータを転送したいと考えています。例えば、

curl -H "Content-Type: application/json" -H "auth:xxxx" -X GET "https://websites.net/Automation/Offline?startTimeInclusive=201609240100&endTimeExclusive=201609240200&dataFormat=json" -k > automation.json

Databricks ノートブック内でこれを行うにはどうすればよいですか (できれば Python ですが、Scala も問題ありません)。

4

2 に答える 2

4

Scala では、次のようなことができます。

import sys.process._
val command = """curl -H "Content-Type: application/json" -H "auth:xxxx" -X GET "http://google.com" -k > /home/user/automation.json"""
Seq("/bin/bash", "-c", command).!!
于 2016-09-28T15:07:00.033 に答える