根据合同的内容和法律规定,如果合同中没有约定大房东有权要求你们搬走,那么你们可以不理他的要求。然而,如果合同中有规定大房东有权要求你们搬走,或者你们违反了合同条款,大房东可能有权采取法律行动来强制你们搬走。建议你们咨询相关法律专业人士以了解具体情况和权益保护措施。