Utiliza el evento OnKeyDown del Form (poniendo su propiedad KeyPreview a True). Uno de los parámetros que recibe este evento es la tecla pulsada (Key) de tipo word. Los códigos numéricos están definidos como constantes, concretamente los de las flechas son:
VK_UP
VK_DOWN
VK_RIGHT
VK_LEFT
Puedes encontrar la lista completa en Win32.hlp buscando el tema "Virtual Key Codes".