如果是单方面解除，需要法院判决。
一、《中国公民收养子女登记办法》第九条
收养关系当事人协议解除收养关系的，应当持居民户口簿、居民身份证、收养登记证和解除收养关系的书面协议，共同到被收养人常住户口所在地的收养登记机关办理解除收养关系登记。

二、《中华人民共和国收养法》第二十七条
养父母与成年养子女关系恶化、无法共同生活的，可以协议解除收养关系。不能达成协议的，可以向人民法院起诉。

三、《中华人民共和国收养法》第二十八条
当事人协议解除收养关系的，应当到民政部门办理解除收养关系的登记。
当事人协议解除收养关系的，应当持居民户口簿、居民身份证、收养登记证和解除收养关系的书面协议，共同到被收养人常住户口所在地的收养登记机关办理解除收养关系登记。
诉讼解除收养关系的，当事人可以向法院起诉，由法院决定是否解除收养关系，在法院判决解除收养关系后，当事人再去被收养人常住户口所在地的收养登记机关办理解除收养关系登记