Наблюдателните системи и до днес имат един основен недостатък - колкото и да са съвършени и удобни за ползване, в крайна сметка всички те трябва да бъдат следени от човек. Това може скоро да се промени, тъй като изследователи в Карнеги Мелън работят върху система за анализиране на видеозаписи, която разпознава автоматично действията, уловени от камерите, без да изисква човешка намеса или директно наблюдение.

Софтуерът разделя записа на части и идентифицира отделните действия - вървене, бягане, носене на предмет и т.н., след което ги свързва с ключови думи. Проектът разполага и с интегрирана система за свързване на синонимни думи и изрази ("копая" и "заравям", например). Казано накратко, софтуерът може да наблюдава и разпознава действията, заснети от камери. Възможните приложения на иновативната технология са многобройни, но за момента тя се разработва предимно за военни цели.