我有一处筒子楼租给了一家三口,签订合同是押一付六,半年一收租金。但是每次到去收房租的时候总不是很顺利,他们总以各种理由拖时间,不付钱,虽然最后总还是能付上但是过程很曲折,都有口角。昨天我去收了这次的房租后,与他们发生激烈口角被打,我不想再租给他们了。可是我之后半年的房租已经收了,110民警说已经收钱了没有办法让他们退租。请问我应该怎么办(租房协议是只签了一年,之后是我们口头协议续约的,每次收钱只开一个收据,没有书面东西了。)