第一：受男人自尊心强的影响。本来当上门女婿和娶媳妇儿是一回事，只不过不同的是，一个娶进门的是女人，一个娶进门是男人。女人可以理直气壮的生活在男人给自己营造的小家里。而男人却认为入赘到女方家则是一种耻辱的现象，因为在许多人的心目中认为当上门女婿是一种无能的体现，是对男人自尊心的挑战，因此好多男人宁愿在家里打光棍也不愿意入赘到女方家去当上门女婿。
第二：受世俗观念的影响，认为这样便是断了自家的香火。中国人的家族观念很强烈，认为自己生的孩子必须跟自己姓，这样才是延续香火，传宗接代。如果孩子跟着别人的心，那便是断了香火。其实我们都知道孩子是两个人爱情的结晶，不管他跟谁姓，他骨子里都流着我们的血脉，是我们生命的延续。
第三：好多人对上门女婿瞧不起。受世俗观念的影响，好多人认为当上门女婿是一种无能的体现，是靠女人养活吃软饭的，同时好多女方的家人对于上门的女婿也没有好脸色。认为这就是一种不受人待见的行为。因此在家中往往会对上门女婿叼难，甚至挑拨两口子的关系。长此以往，会让上门女婿在家中没有地位，以至于使上门女婿感觉不到家的归宿感，从而使夫妻分心，家庭破裂。
第四：有一部分男人会考虑到自己父母的处境。当上门女婿意味着男人独自一个人到女方家生活，至于他的家人，只能留在老家。如果兄弟姐妹多话，入赘后的男人还可在女方家安心的生活，如果兄弟姐妹少，或者是对自己的父母不孝顺的话，自己年迈的父母亲养老问题，则是入赘来人的一大心病。当然，如果女方也能够像在男方家时一样孝顺公婆的话，入赘男人则没有了后顾之忧。