Robot stworzony przez naukowców działając w oparciu o Kinecta i bazy danych identyfikuje na bieżąco działania, które widzi, następnie generuje zestaw ścieżek reakcji – takich jak jedzenie, picie, sprzątanie i wybiera te najbardziej prawdopodobne. Podczas pracy robot ciągle uaktualnia dane i udoskonala swoje prognozy.
Przykładowo picie kawy to skomplikowana czynność, ale robot dzieli ją sobie na kilka części (np. sięgnięcie ręką do kubka, podniesienie go do ust itp) i dzięki temu jest w stanie prawidłowo rozpoznać nasze intencje. Ashutosh Saxena, współtwórca projektu, zdaje sobie sprawę, że ludzie są przewidywalni tylko przez krótki okres czasu i choć na tę chwilę można zakodować pewne odpowiedzi robotowi, to przed przyszłością stoi zadanie, by sprawić, że robot będzie sam w stanie się nauczyć się jak prawidłowo odpowiadać na nasze reakcje. Projekt zostanie oficjalnie zaprezentowany podczas konferencji poświęconej robotyce w Berlinie 24-28 czerwca br.