业主要召开业主大会罢免业主委员会，业主委员会不服，说业委会没有违规行为，凭什么罢免，怎么办，由谁来主导这项工作

成立业主委员会需要什么条件？ 　　第一步，想成立业主委员会的业主首先应该互相建立联系，然后联系本小区十分之一以上的业主签名，发起成立业主大会的倡议，同时发信邀请区、县小区办指导自己小区成立业主大会。
　　第二步，组建成立业主大会的筹备组，筹备组成员可以由业主自荐，也可由业主推荐。最好的方法是由开始的发起人张榜通告，请业主在一定时间内自愿报名参与筹备工作。
　　第三步，筹备组开始工作(人数不多的话，愿参加的业主都可参加)，起草业主委员会章程，决定业主大会成立的时间和业主委员会的组成人数，汇集愿意担任业主委员会工作的业主名单和参选业主的资料，并在业主大会成立十五天前通知全体业主和告知相关居委会。
开会成立的可邀请区、县小区办和相关居委会的代表参加。 　　第四步，将草拟的业主委员会章程、所有参选业主委员会的业主资料、选票(最好用统计反对意见的方法)、要求反馈意见的时间和成立业主大会的时间(收集反馈意见截止时间应早于成立业主大会的时间)书面发给每个业主，并同时请所有收到上述资料的业主签收收条。
　　第五步，成立业主大会时，筹备组公开在小区所有业主有权参与监督的情况下进行验票工作，统计收回的收条和反馈意见。如果收条超过业主所持投票权1/2以上，反馈意见中的反对意见少于1/2，则业主大会成立，业主委员会章程通过。
在业主委员会组成人数范围内，得到反对票少的业主即可担任业主委员会委员。 　　第六步，业主委员会召开第一次会议，选举业主委员会主任、副主任，并可以开展工作。 　　第七步，将业主大会成立简要过程、业主委员会主任和委员名单、业主委员会章程报送区、县小区办备案，并请接收人签收，注明接收文件的时间。
　　第八步，备案十天后仍没有收到区、县小区办的备案意见，可要求他们尽快发出。

应该是街道负责指导首次业主大会的筹备以及召开。居委会不是业委会的上级单位，不存在隶属关系，另外居委会也没权利和资格来指导业委会。至于选举的事情，只能是起到协助的作用。
居委会的角色定位一定要清楚。根据《物业管理条例》的规定，业主可以提议召开业主大会，在业主大会上选举业主委员会；业主对于业主委员会和业主大会的决定侵害业主权益的，业主可以起诉撤销。