根据《建设部关于印发<业主大会规程>的通知》（以下简称《通知》）第二十九条规定：“经业主委员会或者20%以上业主提议，认为有必要变更业主委员会委员的，由业主大会会议作出决定，并以书面形式在物业管理区域内公告。”要罢免业委会委员或主任，必须经业主委员会或者20%以上业主提议，如果没有业主委员会提议或者20%以上的业主提议变更业主委员会委员或主任的话，个别业主要求变更业主委员会委员或主任的提议将不被采纳，这是为了防止少数业主干扰小区管理，维护小区安定团结的局面考虑的。需要指出的是，并不是经业主委员会或者20%以上业主提议，就可以罢免业主委员会委员或主任，最终是否能够罢免，必须由业主大会会议作出决定。根据规定，业主大会作出的决议至少要有物业管理区域内持有1/2以上投票权的业主参加的业主大会，经与会业主的投票权半数以上通过才有效，并且以书面形式在物业管理区域内公告。只有通过这一系列的程序，罢免业主委员会或主任的程序才是合法有效的。