Visual Basic - Mover dos objetos a la vez

Hola, una pregunta: estoy haciendo un juego tipo tenis (dos lineas hacen de jugadores) y quiero que los dos jugadores jueguen a la vez pero tengo el siguiente problema: si los dos jugadores pulsan una tecla a la vez solo reconoce una tecla o si un jugador permanece con una tecla presionada todo el tiempo moviendo su jugador, al otro jugador no le reconoce la tecla que pulse hasta que el otro no suelte la suya.

Para que reconozca las teclas que se pulsan utilizo el evento "Form_KeyDown" y en función de la tecla pulsada se produce un moviemiento u otro y se mueve un jugador u otro.

Me gustaría, si es posible, que alguien me dijera como puedo hacer para que los dos jugadores se puedan mover independientemente de si un jugador está pulsando una tecla o no.

Gracias por todo.