物理因素對男性生育力影響較大的首推放射線，放射線對快速分裂的生殖細胞殺傷力很強。有人做過試驗，結果表明，接受一次200～300倫琴的X線輻射後即可造成生精功能障礙，而接受一次600～800倫琴的輻射則可使生精功能完全喪失（一次常規胸透的射線量約爲0.3 倫琴）。但大劑量放射線對精子活動力、存活率等並無明顯影響，只是可能引起染色體突變而影響受精能力。另外一個影響男性生育能力的重要因素是高溫，高溫對精子的生成和活力產生不良影響，如在高溫環境中工作、經常穿緊身褲、熱水浴、精索靜脈曲張、感染時患者的長時間高熱等均可使睾丸處於高溫狀態，從而使精子的發生受到影響，導致生育能力下降或不育。
在化學因素中，導致男性不育的因素主要有化學試劑、食品添加劑和藥物三大類。有資料表明，接觸某些化學物質和藥品，對男女生殖功能都可以造成損害。如接觸烷基汞、麻醉劑氣體和合成的雌激素，可導致精子發育不正常或因精子質量差造成妻子流產。在藥物中，如斑螯合劑、馬利蘭等抗癌藥對生殖細胞有類似於放射線的影響，環磷酰胺等可抑制精子發生，甲氨喋呤等可使生殖細胞的染色體異常，抗癲癇藥苯妥英鈉可抑制促卵泡生成素（FSH）分泌，從而抑制精子的發生，利血平等可干擾正常的精子活動，睾酮也可間接抑制生精過程。另外，吸菸、酗酒過量、吸毒等可使血中睾酮水平下降，不但影響性功能，而且對睾丸功能也可造成損害，從而導致男性不育症。
