Ci sono modi semplici per manipolare oggetti in realtà aumentata con la mano?

La prima domanda è: su quale piattaforma?

Se stai usando occhiali AR, come HoloLens e Meta, di solito all'interno del loro SDK c'è qualcosa per rilevare la posizione della mano e alcuni trigger per le mani.

Se stai usando telefoni Android, la mia prima domanda è: sei sicuro che stai usando la giusta interfaccia utente? Tenendo il telefono con una mano, usando l'altra mano dietro lo schermo si otterrebbe una posa imbarazzante dell'utente.

Comunque cercando su Google "Hand Tracking library" ho trovato alcuni risultati... ma non so se sono quelli che ti interessano. Altrimenti potresti provare a usare OpenCV per implementare una sorta di tracker di pink-blobs. Ma tieni a mente che il tracciamento della mano usando una semplice telecamera RGB a 30fps non è così facile.

Il mio suggerimento è di aggiungere qualche hardware per il tracciamento delle mani, come Leap Motion, che è supportato sui telefoni Android e ha un SDK che può rilevare la posa della mano in modo facile ed efficace. L'SDK contiene anche un motore di interazione per Unity per interagire con gli oggetti nella scena.