qt - PyQt: 実行時にスクロールエリアにウィジェットを追加する

Question

ボタンを押して、ランタイム中に新しいウィジェットを追加しようとしています (以下の例ではラベルを使用しています)。ここに例があります：

import sys
from PyQt4.QtCore import *
from PyQt4.QtGui import *

class Widget(QWidget):

    def __init__(self, parent= None):
        super(Widget, self).__init__()

        btn_new = QPushButton("Append new label")
        self.connect(btn_new, SIGNAL('clicked()'), self.add_new_label)

        #Container Widget       
        self.widget = QWidget()
        #Layout of Container Widget
        layout = QVBoxLayout(self)
        for _ in range(20):
            label = QLabel("test")
            layout.addWidget(label)
        self.widget.setLayout(layout)

        #Scroll Area Properties
        scroll = QScrollArea()
        scroll.setVerticalScrollBarPolicy(Qt.ScrollBarAlwaysOn)
        scroll.setHorizontalScrollBarPolicy(Qt.ScrollBarAlwaysOff)
        scroll.setWidgetResizable(False)
        scroll.setWidget(self.widget)

        #Scroll Area Layer add
        vLayout = QVBoxLayout(self)
        vLayout.addWidget(btn_new)
        vLayout.addWidget(scroll)
        self.setLayout(vLayout)

    def add_new_label(self):
        label = QLabel("new")
        self.widget.layout().addWidget(label)


if __name__ == '__main__':
    app = QApplication(sys.argv)

    dialog = Widget()
    dialog.show()

    app.exec_()

アプリケーションを起動すると、すべて問題なく表示され、ラベルのリストが正しく表示され、サイズも正しく表示されます。しかし、ボタンを数回押して新しいラベルを追加すると、新しいラベルがリストに追加されますが、サイズが変わります。リストのすべてのラベルが小さくなります。

このエラーを修正するにはどうすればよいですか?