离婚时可以向第三者索赔，如果夫妻双方因为第三者插足导致离婚，无过错方只能向自己的配偶索赔，而不能向第三者提出损害赔偿请求。

【法律依据】

《婚姻法》第四十六条，损害赔偿，

有下列情形之一，导致离婚的，无过错方有权请求损害赔偿：

（一）重婚的；

（二）有配偶者与他人同居的；

（三）实施家庭暴力的；

（四）虐待、遗弃家庭成员的。