Visual Basic - Organizando por orden ascendente y descendente

tengo un list view cuando le doy click a un tope de columna este se me organiza en orden alfabetico, eso esta bien hasta que hay una columna de numeros, como hago para que en vez de organizar alfabeticamente se organice de menor a mayor numericamente ?

Una vez vi un ejemplo de como hacer eso, era convirtiendo los numeros a string y ponerle muchos ceros delante, despues ordenar y una vez ordenado volverlo a convertir a numerico.
Investiga por ahi.
Saludos Mauricio