家属不退赃的，可以酌情从重处罚，但是家属不愿退赃的，法律也不能强迫。

【法律依据】

《刑法》第三百八十三条第三款规定，犯第一款罪，在提起公诉前如实供述自己罪行、真诚悔罪、积极退赃，避免、减少损害结果的发生，有第一项规定情形的，可以从轻、减轻或者免除处罚；有第二项、第三项规定情形的，可以从轻处罚。