遗弃罪和虐待罪主要有以下区别：

1、 客体要件不同。

2、 犯罪客观方面不同。

3、 主体要件不同。

4、 犯罪主观方面不同。

【法律依据】

《刑法》第二百六十一条规定，对于年老、年幼、患病或者其他没有独立生活能力的人，负有扶养义务而拒绝扶养，情节恶劣的，处五年以下有期徒刑、拘役或者管制。