从房屋中介租得一套房屋（有协议），可是中介与房东签订并不是代理出租房屋协议（我们租房的时候并不知情），中介是以个人的名义从房东那里租来的。现在房东要我们搬出去，我们让中介退钱，中介说不能全额推给我们，要我们也承担损失，我们应该怎么处理阿？（这个中介十分不讲理）