可以和对方协商，如果协商不成，可以向法院起诉要求变更抚养权。
法院依法应从有利于子女身心健康，保障子女的合法权益出发，结合父母双方的抚养能力和抚养条件等具体情况来决定抚养权的归属问题。方要求变更子女抚养关系有下列情形之一的，应予支持。
(1)与子女共同生活的一方因患严重疾病或因伤残无力继续抚养子女的;
(2)与子女共同生活的一方不尽抚养义务或有虐待子女行为，或其与子女共同生活对子女身心健康确有不利影响的;
(3)十周岁以上未成年子女，愿随另一方生活，该方又有抚养能力的;
(4)有其他正当理由需要变更的。

法律依据

《中华人民共和国民法典》第一千零七十六条 【协议离婚】夫妻双方自愿离婚的，应当签订书面离婚协议，并亲自到婚姻登记机关申请离婚登记。
离婚协议应当载明双方自愿离婚的意思表示和对子女抚养、财产以及债务处理等事项协商一致的意见。

《中华人民共和国民法典》第一千零七十九条 【诉讼离婚】夫妻一方要求离婚的，可以由有关组织进行调解或者直接向人民法院提起离婚诉讼。
人民法院审理离婚案件，应当进行调解;如果感情确已破裂，调解无效的，应当准予离婚。
有下列情形之一，调解无效的，应当准予离婚：
(一)重婚或者与他人同居;
(二)实施家庭暴力或者虐待、遗弃家庭成员;
(三)有赌博、吸毒等恶习屡教不改;
(四)因感情不和分居满二年;
(五)其他导致夫妻感情破裂的情形。
一方被宣告失踪，另一方提起离婚诉讼的，应当准予离婚。
经人民法院判决不准离婚后，双方又分居满一年，一方再次提起离婚诉讼的，应当准予离婚。