不一定，要看情况的。聚众斗殴，是指为了报复他人、争霸一方或者其他不正当目的，纠集众人成帮结伙地互相进行殴斗，破坏公共秩序的行为。如果对方只是临时起意那么就不算聚众斗殴。如果你是什么事也没做，对方来打你，你反击他们，那自然也不会聚众斗殴,根据《治安管理处罚法》规定，有下列行为之一的，处5日以上10日以下的拘留，可以并处500元以下罚款；情节较重的，处10日以上15日以下拘留，可以并处1000元以下罚款：,（一）结伙斗殴的；,（二）追逐、拦截他人的；,（三）强拿硬要或者任意损毁、占用公私财物的；,（四）其他寻衅滋事行为。,法律依据：《治安管理处罚法》第二十六条 有下列行为之一的，处五日以上十日以下拘留，可以并处五百元以下罚款;情节较重的，处十日以上十五日以下拘留，可以并处一千元以下罚款：(一)结伙斗殴的;(二)追逐、拦截他人的;(三)强拿硬要或者任意损毁、占用公私财物的;(四)其他寻衅滋事行为。