Os factores ambientais podem ser muito prejudiciais para a infertilidade masculina. As principais formas de exposição a substâncias químicas no ambiente são a alimentação, a poluição do ar e da água e a poluição no ambiente doméstico e profissional. Existem alguns factores que afectam a fertilidade no ambiente de vida e de trabalho, tais como: a exposição prolongada a metais pesados (por exemplo, chumbo, cádmio, mercúrio, alumínio, cobre, etc.), produtos químicos (por exemplo, pesticidas, herbicidas, dissulfureto de carbono, dibromocloropropano, metiletilcetona, formaldeído, fumos de escape de automóveis, tintas contendo benzeno, fumo de cigarros, materiais decorativos e tintas tóxicas, gás doméstico, etc.) e outros (por exemplo, grafite, radiação e trabalho ambiental a altas temperaturas) podem Reduzir a fertilidade. Alguns estudiosos acreditam que a exposição a substâncias que afectam a secreção hormonal, como os estrogénios, os bifenilos policlorados (PCB), o bisfenol A, os alquilfenóis, os ftalatos ou os antagonistas dos androgénios, pode levar a malformações do aparelho reprodutor, reduzir a contagem de espermatozóides e afetar a espermatogénese. Os tóxicos reprodutivos que actuam no sistema reprodutivo são capazes de danificar as gerações seguintes, quer genética quer extrageneticamente, com os insecticidas alkenona e metoxicloro a causarem alterações extragenéticas nas células germinativas masculinas, levando a uma espermatogénese defeituosa na geração seguinte de espermatozóides altamente dominantes. Os hábitos de vida também podem ter um impacto na fertilidade, como o tabagismo, o álcool e os banhos de sauna; o consumo prolongado de óleo de algodão bruto pode levar à infertilidade; e a produção de esperma também pode ser afetada em homens sedentários.