根据你的描述和我国相关法律规定，如果男方没过错，离婚时不需要赔偿。男方有过错，如出轨、家暴行为，可要求赔偿。
(一)重婚的
(二)有配偶者与他人同居的
(三)实施家庭暴力的
(四)虐待、遗弃家庭成员的。”
该条确立了合法的婚姻关系中无过错方有权请求损害赔偿的法律保障。
离婚损害赔偿是建立在侵权责任之上的。造成离婚损害赔偿的破坏婚姻家庭关系行为既可以侵害婚姻当事人的财产权，也可以侵害婚姻当事人的人身权。因此离婚损害赔偿的构成要件要适用侵权行为构成要件的一般规定。依据侵权法一般原理，侵权行为责任的构成要件包括违法行为、损害结果、因果关系、主观过错。离婚损害赔偿的构成要件也是以此为基础来构建的。