Borrar botones en jframe dependiendo de la necesidad automáticamente

Hola a todos!
El caso es que tengo diferentes eventos asignados a los botones de un JFrame, pero no siempre se utilizarán todos, eso dependerá del usuario en cuestión. Me gustaría poder eliminar los botones que no se utilicen y reorganizarlos de tal manera que si un usuario utiliza 10 el formulario se adapte a las necesidades y muestre solo los seleccionados.
Espero haberme explicado con claridad.
Gracias.