JavaScript - Controlar un programa a través del chat de Youtube

Estoy iniciándome en la programación y no tengo ni idea de cómo hacer esto:

Necesito hacer un programa que coja una imagen determinada, la convierta en un puzzle y ponga las piezas de una forma aleatoria y que las piezas se puedan controlar de 3 formas:

-Seleccionando una pieza u otra.

-Moviendo la pieza seleccionada (a arriba, abajo, izquierda o derecha)

-Girando la pieza seleccionada

Y esas tres acciones se deben realizar tanto el usuario que tiene el programa en su ordenador (yo) con el ratón como las personas que están viendo un directo en Youtube a través de los comentarios con comandos simples como: arriba, abajo,derecha, izquierda, "selec otra pieza" o gira.

Cualquier duda, me decís.

Muchísimas gracias.


Aclaro que no estoy pidiendo que alguien me haga el programa (que me ayudaría mucho pero bueno), lo que pido es que me digáis, por ejemplo, el lenguaje de programación en el que hacerlo, cómo detectar el chat de un directo de youtube, etc etc etc.

También decir que es algo que ya se hace: https://www.youtube.com/watch?v=gjMz-aS2VB0