No sé si te refieres a NO querer usar el empaquetador que trae el Visual Studio , pero si el ejecutable es sólo para tu equipo y no para otros, entonces puedes por medio del mismo menú del VB, te hará un ejecutable que podra correr en tu propio equipo, pero este es casi seguro que no funcione en otros equipos que no tengan instalado el Visual Studio.
Pero si lo que quieres es hacer un ejecutable que lo puedas distribuir sin querer hacer un instalador que empaquete todo lo que el programa necesita para funcionar, entonces lamento no tener la respuesta acertada que te resuleve el problema.
Estaré atento a otras respuestas de tu pregunta para saber alguna opción que uno no conozca.
Saludos.