养父母与养子女之间可以协议解除抚养关系，协议不成的，可以向法院起诉。

根据《收养法》第26条第2款规定 ，收养人不履行抚养义务，有虐待、遗弃等侵害未成年人合法权益行为的，送养人有权要求解除养父母与养子女间的收养关系。

送养人、收养人达不成协议的，可以向人民法院起诉。