App di controllo demo

Ciao ragazzi! Avevo intenzione di sviluppare una sorta di app demo che riproducesse una sequenza di input fatta in precedenza. Quindi, tutte le iterazioni con il touchscreen e la tastiera registrarli in un lasso di tempo. Poi, successivamente riprodurli, come una sorta di controllo remoto, però stavolta il controllo è programmato e riprodotto dall'app stessa invece che da remoto. In questo, vorrei che l'app lavorasse in background, e gestibile tramite comandi vocali (tipo on per attivare la registrazione, stop per interromperla, e play per riprodurre l'input preso in precedenza).
Vorrei solo capire da dove iniziare, quindi le varie librerie che potrei usare ecc (ad esempio per il controllo vocale se mi devo appoggiare a delle Google API ecc). Poi per l'implementazione ovviamente vedo io studiando quello che c'è da studiare. Grazie :)

PS L'app si limita a catturare l'input di touchscreen e tastiera e poi riprodurlo esattamente com'è stato registrato, come se lo smartphone lavorasse da solo. Quindi, non devo acquisire il frame buffer o altre cose, solo quelle due