Java - Imagenes en GridLayout

Hola, buenas noches

Vereis, estoy haciendo un 4 en raya y estoy con la interfaz grafica, mi idea es hacer una lamina con un gridLayout.

Y despues poner una imagen de una casilla vacia echa por mi en paint en cada celda de ese gridLayout, a alguien se le ocurre como?

Lo que quiero es que esa imagen se copie en cada celda del grid layout

Hola buenas

Para agregar una imagen de forma sencilla como un elemento swing es usando un JLabel si no quieres interactuar con ella o un JButton si quieres interactuar.

URL url = this.getClass().getResource("direccion de la.imagen");

ImageIcon icon = new ImageIcon(url);

JLabel label = new JLabel();
label.setIcon(icon);

JButton boton = new JButton();
boton.setIcon(icon);

Un saludo