退休人员与单位发生劳动纠纷的处理是:先协商;协商不成的,可以向调解组织申请调解;调解不成的,劳务合同中约定仲裁条款的,可以向仲裁委员会申请仲裁;直接向人民法院起诉。用人单位与其招用的已经依法享受养老保险待遇或者领取退休金的人员之间为劳务关系。