Nadzór wideo jest aktywnym obszarem badań, ale istnieje wiele trudności w uchwyceniu twarzy, niezależnie od tego, czy tło jest statyczne, czy ruchome. Wyzwania mogą dotyczyć m.in. złych warunków pogodowych, efektów świetlnych oraz złej jakości sprzętu. Wyzwania związane z wykrywaniem obiektów mogą pojawić się w dowolnej sekwencji obrazów lub wideo.