聚众斗殴双方不一定，聚众斗殴只处罚首要分子和其他积极参加者，聚众斗殴犯罪涉及的是双方，如果只有一方的话，无法构成聚众斗殴罪。在聚众斗殴罪中，凡是被认定构成犯罪的，都要判刑。在本案中，犯罪情节显著轻微的可以免于起诉。

法律依据

《中华人民共和国刑法》第二百九十二条 【聚众斗殴罪】聚众斗殴的，对首要分子和其他积极参加的，处三年以下有期徒刑、拘役或者管制;有下列情形之一的，对首要分子和其他积极参加的，处三年以上十年以下有期徒刑：
(一)多次聚众斗殴的;
(二)聚众斗殴人数多，规模大，社会影响恶劣的;
(三)在公共场所或者交通要道聚众斗殴，造成社会秩序严重混乱的;
(四)持械聚众斗殴的。
聚众斗殴，致人重伤、死亡的，依照本法第二百三十四条、第二百三十二条的规定定罪处罚。