丈夫不履行抚养义务可以要求离婚。可以通过协议或诉讼的方式与对方解除婚姻关系。

《婚姻法》第三十二条规定，男女一方要求离婚的，可以由有关部门进行调解或直接向人民法院提出离婚诉讼。

人民法院审理离婚案件，应当进行调解；如感情确已破裂，调解无效，应准予离婚。