ActiveMQ をリッスンし、メッセージに基づいて、Web サービスからデータを取得し、何らかの処理を行ってから、プロセス データを別の Web サービスに配置するプロセスを作成しようとしています。(REST/JSON)
以下のモジュールは、私が話している不安定な Web サービスの 1 つがエラーを返すまで正常に動作します。エラーをキャッチするために多くのことを試みましたが、まだ役に立ちません。次のメッセージが表示されますが、Webサービスエラーが発生すると:
イベント (MESSAGE, AnyEvent::STOMP::Client=HASH(0x3ad5e48), HASH(0x3a6bbb0) {"action":"created","data":{"id":40578737,"type":") で未処理のコールバック例外が発生しましたalert","who":null},"guid":"ADCCEE0C-73A7-11E6-8084-74B346D1CA67","hostname":"myserver","pid":48632}): $fork_manager->start() はマネージャ プロセス内で呼び出される
OK、概念的には、子プロセスが別のプロセスを開始しようとしていて、フォーク マネージャーがそれはノーノーだと言っていることを理解しています。しかし、以下のモジュールを考えると、長時間実行される処理を処理するために新しいプロセスを開始する適切な方法は何ですか? または、子プロセスが停止してこの例外が発生するのはなぜですか?どうすればこれを防ぐことができますか?
これがモジュールです(取り除かれています)
package consumer;
use AnyEvent::ForkManager;
use AnyEvent::STOMP::Client;
use JSON;
use Data::Dumper;
use v5.18;
use Moose;
sub run {
my $self = shift;
my $pm = AnyEvent::ForkManager->new(max_workers => 20);
my $stomp = AnyEvent::STOMP::Client->new();
$stomp->connect();
$stomp->on_connected(sub {
my $stomp = shift;
$stomp->subscribe('/topic/test');
say "Connected to STOMP";
});
$pm->on_start(sub {
my ($pm,$pid,@params) = @_;
say "Starting $pid worker";
});
$pm->on_finish(sub {
my ($pm, $pid,@params) = @_;
say "Finished $pid worker";
});
$pm->on_error(sub {
say Dumper(\@_);
});
$stomp->on_message(sub {
my ($stomp, $header, $body) = @_;
my $href = decode_json $body;
$pm->start(cb => sub {
my ($pm, @params) = @_;
$self->process(@params);
},
args => [ $href->{id}, $href->{data}->{type}, $href->{data}->{who} ],
);
});
my $cv = AnyEvent->condvar;
$cv->recv;
}
sub process {
say "Processing ".Dumper(\@_);
sleep 5;
if ( int(rand(10)) < 5 ) {
die "OOPS"; # this triggers the error message above
}
say "Done Processing $_[1]";
}
1;
上記のモジュールのドライバーは次のとおりです。
#!/usr/bin/env perl
use v5.18;
use lib '.';
use consumer;
my $c = consumer->new();
$c->run;
最後に、これを実際に確認するために使用できるトラフィック ジェネレーターを示します。
#!/usr/bin/env perl
use lib '../lib';
use lib '../../lib';
use v5.18;
use Data::Dumper;
use JSON;
use Net::STOMP::Client;
$ENV{'scot_mode'} = "testing";
my $stomp = Net::STOMP::Client->new(
host => "127.0.0.1",
port => 61613
);
$stomp->connect();
for (my $i = 1; $i < 1000000; $i++) {
my $href = {
id => $i,
type => "event",
what => "foo",
};
my $json = encode_json $href;
say "Sending ".Dumper($href);
$stomp->send(
destination => "/topic/test",
body => $json,
);
}
$stomp->disconnect();