根据法律明确规定，在聚众斗殴罪中，“聚众”这个概念主要指的是人数较多的情况，一般来说是三人及三人以上。
这是一个较为明确的人数标准，旨在界定此类犯罪行为的规模范围。
然而，这里有一个重要的注意点，那就是不能简单地认为只要有三人以上参与了打架行为，就一定构成聚众斗殴罪。
比如，如果是出于正当防卫这种合法的目的，多人进行对抗行为，那么这种情况就不构成聚众斗殴罪。
因为正当防卫是法律所允许的行为，其目的是为了保护合法权益免受侵害。
并且，认定聚众斗殴罪还需要综合考虑多方面的因素。
其中主观故意方面是关键之一，也就是说双方都必须有斗殴的故意，并且确实实施了斗殴行为，像打、砸、冲等这些暴力行为都包含在内。
只有当这些行为对社会秩序造成了破坏，综合各种因素进行判定后，才能最终确定是否构成聚众斗殴罪。
总之，聚众斗殴罪的认定是一个较为复杂的过程，需要全面考量各种因素。