丈夫有生理缺陷可以提离婚，如果男方同意离婚的，双方在签订好书面离婚协议后，双方亲自到婚姻登记机关申请离婚登记即可；如果男方不同意的，可以向人民法院起诉离婚，但是如果仅仅以丈夫有生理缺陷为由的，人民法院一般不会判离。

法律依据

《中华人民共和国民法典》第一千零七十九条   夫妻一方要求离婚的，可以由有关组织进行调解或者直接向人民法院提起离婚诉讼。   人民法院审理离婚案件，应当进行调解；如果感情确已破裂，调解无效的，应当准予离婚。   有下列情形之一，调解无效的，应当准予离婚：   （一）重婚或者与他人同居；   （二）实施家庭暴力或者虐待、遗弃家庭成员；   （三）有赌博、吸毒等恶习屡教不改；   （四）因感情不和分居满二年；   （五）其他导致夫妻感情破裂的情形。   一方被宣告失踪，另一方提起离婚诉讼的，应当准予离婚。   经人民法院判决不准离婚后，双方又分居满一年，一方再次提起离婚诉讼的，应当准予离婚。