Även om det kan vara frestande att göra snabba bedömningar om en persons pålitlighet baserat på deras utseende, tyder forskning på att det är mycket opålitligt att göra det. Uppfattningen att någons ansiktsdrag eller övergripande utseende korrekt kan indikera deras pålitlighet kallas vanligtvis för "fysiognomi" och saknar vetenskapligt stöd. Pålitlighet är en komplex egenskap som påverkas av många faktorer såsom personlighet, tidigare beteende och situationsmässiga sammanhang, som inte kan härledas tillförlitligt enbart från fysiskt utseende. Flera studier har visat att människors bedömningar av trovärdighet baserade på ansikten ofta är felaktiga och mottagliga för olika fördomar. Därför kan det leda till felaktiga slutsatser och orättvisa fördomar att enbart förlita sig på visuella signaler för att bedöma tillförlitligheten.