Java - Problema con JScrollPane y JPanel

Mi problema es el siguiente, yo tengo un jScrollPane y dentro de ello un jPanel que contiene varios jButton, el momento en que yo mando a que mis Botones se ubiquen en otro lugar con el método setLocation() al estar en ejecución el programa estos regresan a una ubicación anterior solo si desplazo el Scroll, la ubicación original que tiene agregado el jPanel dentro de mi jScrollPane, además debo decir que mi Panel tiene un diseño de AbsoluteLayout y no puedo agregar elementos con código en este tipo de diseño porque me salta un error.. Alguien tiene una idea de que puedo hacer para que cuando mis Botones cambien de ubicación estos no se regresen a la ubicación original al mover mi jScrollBar que tiene el jScrollPane.