Как вы верстаете формы(GUI)?

Получается я для начала собирал линию 1, 2, 3... потом собирал эти линии в форму(как на рис.). Пользуюсь GridBagConstraints.
Теперь при добавлении новых полей для ввода и т.п.(обведено синим) элементы формы начинают "ехать", а если поле большое по высоте то и сдвигает все нижние линии.
Не знаю как формулировать вопрос... короче, как можно сделать красиво?