3

以下の解決策

データをCSVに抽出し、それを別のサーバーにアップロードしてから、他のサーバーに接続し、Javajarを呼び出してcsvをmemcacheにロードするETLシステムがあります。これのすべてのステップを実行できるスクリプトがありますが、最後のステップでSSH接続が失われます。リモートマシンでのプロセスが続行され、完了します。

これにNet::SSH :: Perlを使用していますが、短時間実行した後、「接続に失敗しました:ピアによって接続がリセットされました」というエラーが表示されます。スクリプトをこれまで煮詰めて、結果を複製しました。

#!/usr/bin/perl

use strict;
use Net::SSH::Perl;
use Log::Log4perl;

my ($stdout, $stderr, $exit, $ssh);

$ssh = Net::SSH::Perl->new('sshost',
        identity_files => ['/path/to/key.rsa'],
        protocol => 2,
        debug => 1);

$ssh->login('user');

my $cmd = "java -Xms4096m -Xmx4096m -DetlDate=20120427 -DmemcacheHosts=host1,host2 -cp etl-0.1-SNAPSHOT.jar com.nnn.platform.service.etl";

$ssh->register_handler("stdout", sub {
        my($channel, $buffer) = @_;
        print "STDOUT: ", $buffer->bytes;
});

$ssh->register_handler("stderr", sub {
        my($channel, $buffer) = @_;
        print "STDERR: ", $buffer->bytes;
});

$ssh->cmd("cd /usr/local/loader; $cmd");

私が取得するSSHデバッグ情報は次のとおりです。

localhost: Reading configuration data /home/user/.ssh/config
localhost: Reading configuration data /etc/ssh_config
localhost: Connecting to sshost, port 22.
localhost: Remote protocol version 2.0, remote software version OpenSSH_4.3
localhost: Net::SSH::Perl Version 1.34, protocol version 2.0.
localhost: No compat match: OpenSSH_4.3.
localhost: Connection established.
localhost: Sent key-exchange init (KEXINIT), wait response.
localhost: Algorithms, c->s: 3des-cbc hmac-sha1 none
localhost: Algorithms, s->c: 3des-cbc hmac-sha1 none
localhost: Entering Diffie-Hellman Group 1 key exchange.
localhost: Sent DH public key, waiting for reply.
localhost: Received host key, type 'ssh-dss'.
localhost: Host 'sshost' is known and matches the host key.
localhost: Computing shared secret key.
localhost: Verifying server signature.
localhost: Waiting for NEWKEYS message.
localhost: Send NEWKEYS.
localhost: Enabling encryption/MAC/compression.
localhost: Sending request for user-authentication service.
localhost: Service accepted: ssh-userauth.
localhost: Trying empty user-authentication request.
localhost: Authentication methods that can continue: publickey,gssapi-with-mic.
localhost: Next method to try is publickey.
localhost: Trying pubkey authentication with key file '/path/to/key.rsa'
localhost: Login completed, opening dummy shell channel.
localhost: channel 0: new [client-session]
localhost: Requesting channel_open for channel 0.
localhost: channel 0: open confirm rwindow 0 rmax 32768
localhost: Got channel open confirmation, requesting shell.
localhost: Requesting service shell on channel 0.
localhost: channel 1: new [client-session]
localhost: Requesting channel_open for channel 1.
localhost: Entering interactive session.
localhost: Sending command: cd /usr/local/loader; java -Xms4096m -Xmx4096m -DetlDate=20120427 -DmemcacheHosts=host1,host2 -cp etl-0.1-SNAPSHOT.jar com.nnn.platform.service.etl
localhost: Sending command: cd /usr/local/loader; java -Xms4096m -Xmx4096m -DetlDate=20120427 -DmemcacheHosts=host1,host2 -cp etl-0.1-SNAPSHOT.jar com.nnn.platform.service.etl
localhost: Requesting service exec on channel 1.
localhost: channel 1: open confirm rwindow 0 rmax 32768

次に、jarの出力がSTDERRに出力され、返されることがわかります。9秒後に停止し、最終的にピアエラーによって接続がリセットされます。STDERRハンドラーは期待どおりに機能しています。

これがNet::SSH :: Perlの処理コマンドの問題であるかどうかはわかりませんが、STDERRまたはそれ以上でのみ実行/戻るのに時間がかかります。より充実した機能を備えたライブラリのように見えるため、Net :: SSH2への切り替えを検討してきましたが、なぜこれが失敗するのかを知りたいと思います。

解決

問題は、出力がSTDERRにのみ送信されることでした。コマンドを編集して追加2>&1し、それによってSTDERRをSTDOUTにリダイレクトしましたが、突然すべてが期待どおりに機能しました。

4

2 に答える 2

2

Net :: SSH :: Perlはもう維持されておらず、既知の未解決のバグの長いリストがあります。現在、CPANからNet::SSH2またはNet::OpenSSHとして利用できるより優れたモジュールがあります。

例えば:

my $ssh = Net::OpenSSH->new($sshost,
                            user => $user,
                            key_path => '/path/to/key.rsa');
my ($out, $err) = $ssh->capture2($cmd);
于 2012-05-03T08:01:06.343 に答える
0

問題は、出力がSTDERRにのみ送信されることでした。コマンドを編集して2>&1を追加し、それによってSTDERRをSTDOUTにリダイレクトすると、突然すべてが期待どおりに機能しました。

my $cmd = "java -Xms4096m -Xmx4096m -DetlDate=20120427 -DmemcacheHosts=host1,host2 -cp etl-0.1-SNAPSHOT.jar com.nnn.platform.service.etl 2>&1";
于 2012-05-02T14:44:05.910 に答える