Visual Basic.NET - Seleccionar celda de un datagrid

Tengo un Datagrid simple, es decir, uns simple tabla sin enlaces ni demás. Busco poder seleccionar con el ratón tanto una celda como una fila concreta y que en cada caso actue de manera distinta. Lo de la fila lo hago con un evento DataGrid_Click que al pulsar a la izquierda de la fila me la selecciona. Para lo de la celda uso DataGrid_CurrentCellChanged, pero el problema viene por que cuando selecciono otra fila también me salta este evento conservando la columna pero variando la fila de la celda, y yo sólo quiero que salte cuando haga click sobre una celda distinta, no cada vez que cambie de fila porque los resultados en mi programa son distintos y se superpondrían.

¿Existe alguna forma de detectar cuando se hace click sobre una celda y que lo diferencie de cuando se hace click a la izquierda de una fila?