房租租赁房东不退押金我们没和二手房东…

房租租赁房东不退押金我们没和二手房东签订合同只是写了一张收据房租是押一付三每月房租一千二我们已交了5100元其中还包括一年的水费卫生费300元我们已提前半个月告诉房东不续租了现在房东恐吓我们必须搬走不退押金请问房东这样扣押金合法吗是否我们搬走就应该退给我们