除年龄以外，有六类人是LOH的高发人群，包括：工作生活压力大、患有慢性疾病(如糖尿病、抑郁症、心血管疾病等)、有不良生活方式(如抽烟、酗酒等)、生活环境恶劣、缺乏锻炼以及腹部肥胖。
睾丸分泌雄激素，然而，工作生活压力较大的男性，长期处在一个应激状态下，肾上腺皮质激素分泌旺盛，会形成一个负反馈，抑制垂体的功能，继发性地造成雄激素缺乏。
此外，抽烟和喝酒都会破坏睾丸功能，从而导致雄激素水平下降。抽烟会影响血管内皮功能，内皮功能下降了，循环功能也会跟着下降，造成睾丸内氧化活性因子活跃，从而睾丸功能受牵连。烟中的有毒物质还破坏专门制造睾酮的睾丸内的间质细胞。一旦睾酮缺乏，阴茎勃起没有了驱动力。酒精则是直接妨碍睾丸生产睾酮，同时在酒精刺激下，肝脏会加快对睾酮的处理，许多睾酮被分解转变成其他物质。
而男性肥胖，尤其是腹部肥胖，更是“要命”的事情。有多项研究显示，在中老年男性中，内脏(腹部内)脂肪的蓄积与性腺功能减退密切相关。过度肥胖会使男性体内的雄激素降低，雌激素水平会明显升高。而雌激素水平增高又反过来对抗雄激素的作用，造成男性身体肌肉的减少，促使脂肪的形成和男性的乳房发育，这样周而复始，就会形成恶性循环。此外，肥胖的人还常常伴有睡眠呼吸暂停，会导致缺氧，会使雄激素进一步减少，脂肪增多。
