eso sale automaticamente, esta definido en la propiedades de internet. mas hay una forma de crearle efectos distintos a los predefinidos pero se hace con hojas de estilo. y es mas o menos asi:
<style>
a{ color:#003366 textdecoration:none}; hace que el enlace salga sin linea y de un color dado
a:hover{color:#443311 textdecoration:underline} hace que cuando coloques el mouse encima cambie de color y aparezca subrayado.
</style>
podes tambien cambiar las fuentes, el fondo en fin investigue sobre hojas de estilo.