除年齡以外，有六類人是LOH的高發人群，包括：工作生活壓力大、患有慢性疾病(如糖尿病、抑鬱症、心血管疾病等)、有不良生活方式(如抽菸、酗酒等)、生活環境惡劣、缺乏鍛鍊以及腹部肥胖。
睪丸分泌雄激素，然而，工作生活壓力較大的男性，長期處在一個應激狀態下，腎上腺皮質激素分泌旺盛，會形成一個負反饋，抑制垂體的功能，繼發性地造成雄激素缺乏。
此外，抽菸和喝酒都會破壞睪丸功能，從而導致雄激素水平下降。抽菸會影響血管內皮功能，內皮功能下降了，循環功能也會跟著下降，造成睪丸內氧化活性因子活躍，從而睪丸功能受牽連。煙中的有毒物質還破壞專門製造睪酮的睪丸內的間質細胞。一旦睪酮缺乏，陰莖勃起沒有了驅動力。酒精則是直接妨礙睪丸生產睪酮，同時在酒精刺激下，肝臟會加快對睪酮的處理，許多睪酮被分解轉變成其他物質。
而男性肥胖，尤其是腹部肥胖，更是“要命”的事情。有多項研究顯示，在中老年男性中，內臟(腹部內)脂肪的蓄積與性腺功能減退密切相關。過度肥胖會使男性體內的雄激素降低，雌激素水平會明顯升高。而雌激素水平增高又反過來對抗雄激素的作用，造成男性身體肌肉的減少，促使脂肪的形成和男性的乳房發育，這樣週而復始，就會形成惡性循環。此外，肥胖的人還常常伴有睡眠呼吸暫停，會導致缺氧，會使雄激素進一步減少，脂肪增多。
