Visual Basic - Conseguir la ip del cliente en Winsock

Hola estoy haciendo una aplicacion servidor con el control Winsock y quiero saber si se puede hacer un sistema de bans con IP. O sea que añado una IP a un archivo de texto, y cuando alguien intente conectarse, primero se fije su IP y solamente si no esta en la lista de acepte la conxion. Tambien voy a hacer lo mismo pero con una lista de IPs permitidas.
Quiero que sea con IPs, asi que no me digan que haga algo con la MAC o un sistema de usuarios(al menos que no se pueda), como me dijeron en otro foro.