根据你的描述，你们之间还是属于普通合伙的关系，口头承诺退伙对方还是可以反悔，确实需要一份协议来约定好退伙关系，不然会有承担无限连带责任的风险。你可以看看之前的入股协议中对退伙的约定。现在对方不让你退，可以要求分红，逼他妥协。你这边也尽快清算下机构之前有没有债务未清，因为就算现在退了，退之前的债务你也是要承担责任的。清算完之前的债务以后，和对方协商退伙，协商不成可以向法院起诉要求分红和退伙。最后可以放弃分红为筹码达成退伙的目的