多少人算非法聚众

三人以上算非法聚众。举行集会、游行、示威没有依法申请，或者没有按照主管机关许可的起止时间、地点、路线进行，属于非法聚众，应当自行承担相应的刑事和民事责任。

【法律分析】

非法聚众聚集处理如下：
1、聚众扰乱社会秩序，情节严重，致使工作、生产、营业和教学、科研、医疗无法进行，造成严重损失的，对首要分子，处三年以上七年以下；
2、对其他积极参加的，处五年以下有期徒刑、、或者；
3、次扰乱国家机关工作秩序，经行政处罚后仍不改正，造成严重后果的，处三年以下有期徒刑、拘役或者管制。

【法律依据】

《中华人民共和国集会游行示威法》第二十七条
举行集会、游行、示威，有下列情形之一的，人民警察应当予以制止：
（一）未依照本法规定申请或者申请未获许可的；
（二）未按照主管机关许可的目的、方式、标语、口号、起止时间、地点、路线进行的；
（三）在进行中出现危害公共安全或者严重破坏社会秩序情况的。