Azonban ez a módszer korántsem praktikus, mivel a markereket nem könnyű beültetni vagy eltávolítani. Az elmúlt években a mesterséges intelligencia kutatók jelentősen javították a számítógépes látás erejét, amely lehetővé teheti a robotok számára, hogy önállóan végezzenek műtéti feladatokat ilyen és ehhez hasonló jelzők nélkül.
A változást az úgynevezett ideghálózatok, matematikai rendszerek vezérlik, amelyek hatalmas mennyiségű adat elemzése által sajátítanak el képességeket. Például több ezer macskafotó elemzésével egy idegháló megtanulhatja felismerni a macskát. A neurális hálózat ugyanúgy tanulhat a sebészeti robotok által készített képekből.
Gépi látás és edukáció
A sebészeti robotokat kamerákkal látják el, amelyek háromdimenziós videókat rögzítenek az egyes műveletekről. A videó egy keresőben folyik, amelybe a sebészek belenéznek és a robot szemszögéből látják, miközben irányítják a műveletet. Ezek a képek részletes útitervet is tartalmaznak, amely bemutatja a műtétek végrehajtását. Segíthetnek az új sebészeknek megérteni ezeknek a robotoknak a használatát, továbbá segíthetik a robotokat, a feladatok önálló kezelésében. Olyan képek elemzésével, amelyek megmutatják, hogy egy sebész hogyan vezeti a robotot, az ideghálózat ugyanezeket a képességeket tanulhatja meg.
A Berkeley kutatói is ennek a rendszernek az elvén dolgoztak robotjuk automatizálásán, amely a da Vinci Surgical System-re épül. Ez egy kétkarú gép, amely a sebészeknek évente több mint egymillió eljárást segít végrehajtani. Dr. Fer és munkatársai képeket gyűjtenek arról a robotról, amely emberi irányítás alatt mozgatja a műanyag gyűrűket.