很多人觉得，男人和女人的不同是雄激素和雌激素造成的。事实上，这两类激素的确导致了男女很多区别，但却不完全是，尤其是以下几点。

人的性别在受精那一刻就决定了。在8周前，男女胚胎是没有区别的，这个时候，男胎的Y染色体开始运作，发育出睾丸组织，并开始分泌雄激素，在雄激素的刺激下最终发育出一套完整的男性生殖器官。

女性没有Y染色体，也就不能产生睾丸，缺乏了雄激素的胚胎组织便发育成女性生殖器官。也就是说，胎儿的默认设置是女性，雄激素使胎儿性器官变为男性型，如果没有雄激素，胎儿将发育成女性型，不论其体内雌激素水平如何。

如果某些因素阻碍了男胎细胞与雄激素的结合，将会发育出接近女性的生殖系统和行为。酒精、大麻、氟哌啶醇、可卡因，甚至阿司匹林以及现在经常提到的塑化剂，都会影响雄激素的生成和结合，使男胎的生殖器产生先天畸形。

雌激素对生殖器几乎没有影响，不过，如果女胎缺乏雌激素作用，会对男性和女性都几乎没有性欲和性反应。

性激素能提高或者减慢某些脑细胞死亡速度，导致男性某些脑区较大而女性的另一些脑区较大，所以男性思维方式和特长与女性有所不同。

最明显的例子是下丘脑。男性下丘脑处控制性欲和性行为的区域普遍比女性的大，刺激这个区域会增加男性性行为，这个区域受损则会引起性行为消失。成年女性下丘脑会产生周期性的激素释放，以控制月经周期，男性的下丘脑就不具备这个功能，有趣的是，胎儿时接触了过量雄激素的女性一生不会有月经，这种情况比较罕见，患者需行人工激素替代和促排卵治疗才有可能能获得正常月经及怀孕。

另外，人老年的时候会发生记忆力减退等现象，科学家普遍认为这与性激素水平下降密切相关，当这些激素水平降低时，学习和记忆能力会受到影响。

国外一项研究发现，已婚男性以及与女性同居并拥有稳定性关系的男人，体内平均睾酮含量较单身无配偶者低。对于这个结果，科学家认为一段持久关系建立后，他就不需要再努力寻找性伴侣了，因此睾酮水平也就下降。

另一项研究则发现，已婚男性睾酮水平与婚前比没有明显变化，而是睾酮水平较低的男性更容易结婚。因为睾酮水平高的男性，会热衷于寻找婚外性伴侣。无论结果如何，这两个研究都说明雄激素会促进主动寻找性伴的行为。

睾酮水平下降会使男性性行为减少，性趣降低。被阉割的男性，其性行为会随着雄激素水平的下降而减少，但不会完全消失，部分原因是肾上腺也会产生少量雄激素，只要给他们补充睾酮，就能使其性欲和性行为恢复。

值得一提的是，去势后的男性会因缺乏性欲而不能勃起，但并不是真正阳痿，只要给予适当刺激，仍具有勃起功能，因为阳痿的主要原因是血管病变，以及神经、药物和心理问题。

雌激素对女性来说，能增强其会阴神经的敏感性，更容易将触觉刺激由阴部传到大脑。所以绝经后女性会因缺乏雌激素而难以产生爱液。

雌激素水平也可以改变女性兴趣，排卵期是雌激素水平最高的时期，这时女性会发起更多性行为。一项研究表明，当女性在排卵期观看色情录像，会更令她愉悦，比其他时间更容易产生性唤起。

性激素同样影响女性的注意力——让女性分类不同类型的异性照片，处于排卵期的人速度最快，因为排卵期的女性都偏向于选择更男性化、更有活力、竞争力和自信的男性面孔，其他时间则更喜欢人品好、善良、忠诚的男性——雌激素让女性更希望跟基因更优良的男性结合、产子。

另外，睾酮和雌二醇都会促进脑部释放多巴胺，多巴胺越多，性欲越高，达到一定浓度时，会导致性高潮。缺乏雌、雄激素的人，脑部也会释放正常量的多巴胺，只不过，并非在异性出现和性交时释放，性欲和高潮也就无从谈起了。