ruby - ruby mechanizeでスクレイピングしたデータのサイズ

Question

agent = Mechanize.new
url = "---------------------------"
page = agent.get(url)

ここで、インターネット サービス プロバイダーがそのデータをスクレイピングするために使用したデータの KB (キロバイト) を知りたいです。

より具体的には、変数「ページ」のサイズ (KB) は?

Answer 1

page.content.bytesize / 1024.0

Answer 2

それは本当に2つの別々のものです。解凍された応答本文のサイズと転送されたバイト数。1 つ目は を調べることpage.bodyで取得できます。2 つ目は、応答ヘッダーと要求ヘッダーを測定し、gzip やリダイレクトなどを考慮する必要があります。DNSルックアップなどは言うまでもありません。