XperiaとNexusで顔認証を使った印象でいうと
顔への光の当たり方なんかがかなり影響する
例えば、同じ室内でも、水平に向いた状態で登録して
うつむき加減だと認証に失敗するという具合

確実にロック解除させたければ、光の当たり方やメガネ等、なるべく可能性のある条件を網羅するように登録することなんだけど
やりすぎると認証が甘くなるので諸刃の剣といったところ