Visual Basic - Cambiar el puerto durante una conexion activa

hola, quisiera saber si se puede cambiar el puerto mentras hay una conexion activa, ya lo intente y me da un error "No se puede realizar la accion en el estado actual" o algo asi, se puede direccionar o algo, por ejemplo que uno reciba la conexion y lo mande a otro puerto o algo asi, gracias