19

非同期モードで cpp-netlib を使用して、C++ で Ubuntu 14.04 で Web サービスを開発しています。サービスは、メッセージ本文で HTTP POST を介して送信されたデータに応答する必要があります。1K を超える入力を受信するとパフォーマンスが低下することがわかりました。これを修正したいと考えています。

データが 1K 未満の比較的小さい場合、サーバーはほぼ瞬時にデータを受信します。データが 1K を超える場合、実際のデータの最初のチャンクがコールバックに提示される前に、非同期読み取りコールバック関数が最初に呼び出されてから約 1 秒の遅延があります。最初の遅延の後、後続のチャンクがほぼ瞬時に到着します。

この遅延を解消するにはどうすればよいですか? curl を使用してテスト データを投稿した場合のアーティファクトですか? データを投稿するためのcurlのパフォーマンスを簡単にテストするにはどうすればよいですか?

github で問題を示す最小限のソース コードを見つけることができます。サーバーにデータを投稿するために使用するコマンドは次のとおりです。

rcook$ curl -d @AsyncDaemon.h http://localhost:8787/foo

その出力の例を次に示します (注釈付き)。

rcook$ ./async_daemon 
1431387368.321863: AsyncDaemon constructor
1431387368.322446: receive thread beginning

*** It's waiting for a connection here.

1431387371.536191: begin transaction 0 on thread 24050
1431387371.536237: transaction 0 constructor
1431387371.536273: received 1206 byte request for /foo from 127.0.0.1:49402
1431387371.536312: invoked asynchronous read
1431387371.536321: end transaction handler
1431387371.536335: begin asynchronous read callback on thread 24050
1431387371.536348: read 0 bytes
1431387371.536386: invoked asynchronous read
1431387371.536394: end asynchronous read callback

*** The asynchronous read callback is invoked quickly, but gets no data.
*** There is then a pause of just over one second before the asynchronous
*** read callback is invoked again.

1431387372.537203: begin asynchronous read callback on thread 24050
1431387372.537253: read 1024 bytes
1431387372.537307: invoked asynchronous read
1431387372.537317: end asynchronous read callback

*** There is no significant delay when reading the next chunk.

1431387372.537429: begin asynchronous read callback on thread 24050
1431387372.537469: read 182 bytes
1431387372.537478: finished reading the body
1431387372.537746: wrote response
1431387372.537763: transaction 0 destructor
1431387372.537772: end asynchronous read callback

*** The server is then killed with a keyboard interrupt.

^C1431387375.382186: terminating with signal 2
1431387375.382231: initiating shutdown
1431387375.382241: stopping server
1431387375.382363: server run finished
1431387375.382423: receive thread ending
1431387375.382522: AsyncDaemon destructor

ご覧のとおり、非同期読み取りコールバックが初めて呼び出された後 (およびゼロ バイトのデータを受信した後)、入力の別のチャンクが要求されます。この時点で、この例では 1431387371.536394 から 1431387372.537203 まで、入力が到着する前に 1 秒強の一時停止があります。その間、何が起こっているのですか？その遅延をなくすにはどうすればよいですか？

オンラインでいくつかの調査を行い、いくつかの実験 (cpp-netlib を使用した同期モードと非同期モード (効果なし)、curl と libcurl (効果なし)) を実行しましたが、答えを見つけることができませんでした。

更新: TCP ダンプ

jxh の提案により、サンプル トランザクション中に tcp ダンプを実行しました。

00:28:01.304446 IP6 localhost.52265 > localhost.8787: Flags [S], seq 3956487146, win 43690, options [mss 65476,sackOK,TS val 395479802 ecr 0,nop,wscale 7], length 0
00:28:01.304461 IP6 localhost.8787 > localhost.52265: Flags [R.], seq 0, ack 3956487147, win 0, length 0
00:28:01.305014 IP localhost.49421 > localhost.8787: Flags [S], seq 1668603425, win 43690, options [mss 65495,sackOK,TS val 395479803 ecr 0,nop,wscale 7], length 0
00:28:01.305039 IP localhost.8787 > localhost.49421: Flags [S.], seq 4010788604, ack 1668603426, win 43690, options [mss 65495,sackOK,TS val 395479803 ecr 395479803,nop,wscale 7], length 0
00:28:01.305079 IP localhost.49421 > localhost.8787: Flags [.], ack 1, win 342, options [nop,nop,TS val 395479803 ecr 395479803], length 0
00:28:01.305185 IP localhost.49421 > localhost.8787: Flags [P.], seq 1:176, ack 1, win 342, options [nop,nop,TS val 395479803 ecr 395479803], length 175
00:28:01.305210 IP localhost.8787 > localhost.49421: Flags [.], ack 176, win 350, options [nop,nop,TS val 395479803 ecr 395479803], length 0
00:28:02.306555 IP localhost.49421 > localhost.8787: Flags [P.], seq 176:1382, ack 1, win 342, options [nop,nop,TS val 395480053 ecr 395479803], length 1206
00:28:02.306620 IP localhost.8787 > localhost.49421: Flags [.], ack 1382, win 1373, options [nop,nop,TS val 395480053 ecr 395480053], length 0
00:28:02.307223 IP localhost.8787 > localhost.49421: Flags [P.], seq 1:52, ack 1382, win 1373, options [nop,nop,TS val 395480053 ecr 395480053], length 51
00:28:02.307270 IP localhost.49421 > localhost.8787: Flags [.], ack 52, win 342, options [nop,nop,TS val 395480053 ecr 395480053], length 0
00:28:02.307494 IP localhost.8787 > localhost.49421: Flags [P.], seq 52:66, ack 1382, win 1373, options [nop,nop,TS val 395480053 ecr 395480053], length 14
00:28:02.307522 IP localhost.49421 > localhost.8787: Flags [.], ack 66, win 342, options [nop,nop,TS val 395480053 ecr 395480053], length 0
00:28:02.307765 IP localhost.8787 > localhost.49421: Flags [F.], seq 66, ack 1382, win 1373, options [nop,nop,TS val 395480053 ecr 395480053], length 0
00:28:02.307867 IP localhost.49421 > localhost.8787: Flags [F.], seq 1382, ack 67, win 342, options [nop,nop,TS val 395480053 ecr 395480053], length 0
00:28:02.307917 IP localhost.8787 > localhost.49421: Flags [.], ack 1383, win 1373, options [nop,nop,TS val 395480053 ecr 395480053], length 0

私は tcpdump の経験があまりありませんが、175 バイトがサーバー (HTTP ヘッダー?) に流れ、1 秒強の遅延の後、1206 バイトがサーバーに流れ、その後に 51 バイトのチャンクが続きます。最小限の遅延に続いて、サーバーの応答が続きます。

これは、おそらくカールで、クライアント側で遅延が発生していることを示しています。誰かが理由を知っていますか？

4

1 に答える 1

21

@jxh によって提案されたデバッグおよび診断手法のおかげで、問題は解決しました。

--trace - --trace-timecurl コマンドに追加すると、サーバーが残りのリクエストを送信する前に、サーバーが 100 Continue レスポンスを返すのを待って、不可解な秒を費やしていたことが明らかになりました。

01:31:44.043611 == Info: Connected to localhost (127.0.0.1) port 8787 (#0)
01:31:44.043726 => Send header, 175 bytes (0xaf)
0000: 50 4f 53 54 20 2f 66 6f 6f 20 48 54 54 50 2f 31 POST /foo HTTP/1
0010: 2e 31 0d 0a 55 73 65 72 2d 41 67 65 6e 74 3a 20 .1..User-Agent: 
0020: 63 75 72 6c 2f 37 2e 33 35 2e 30 0d 0a 48 6f 73 curl/7.35.0..Hos
0030: 74 3a 20 6c 6f 63 61 6c 68 6f 73 74 3a 38 37 38 t: localhost:878
0040: 37 0d 0a 41 63 63 65 70 74 3a 20 2a 2f 2a 0d 0a 7..Accept: */*..
0050: 43 6f 6e 74 65 6e 74 2d 4c 65 6e 67 74 68 3a 20 Content-Length: 
0060: 31 32 30 36 0d 0a 43 6f 6e 74 65 6e 74 2d 54 79 1206..Content-Ty
0070: 70 65 3a 20 61 70 70 6c 69 63 61 74 69 6f 6e 2f pe: application/
0080: 78 2d 77 77 77 2d 66 6f 72 6d 2d 75 72 6c 65 6e x-www-form-urlen
0090: 63 6f 64 65 64 0d 0a 45 78 70 65 63 74 3a 20 31 coded..Expect: 1
00a0: 30 30 2d 63 6f 6e 74 69 6e 75 65 0d 0a 0d 0a    00-continue....
01:31:45.045626 == Info: Done waiting for 100-continue
01:31:45.045831 => Send data, 1206 bytes (0x4b6)

cpp-netlib (少なくともバージョン 0.11.0 の時点)の既知の欠陥であり、curl が期待する 100 Continue 応答の送信をサポートしていません。

その後、解決策は、curl が 100 Continue 応答を待たないことを納得させるものになりました。ここで発見した-H 'Expect:'ように、curl コマンド ラインに追加するとうまくいきます。これにより、トランザクション全体に約 1 ミリ秒かかります。

私は自分の質問に答えたので、他の人にもっと良いものを提供する機会を与えるために、数週間は私の答えを受け入れません.

于 2015-05-12T01:58:51.833 に答える