朋友找我借钱，我答应后又不想借了怎么办？

他是河南的，好朋友谈不上，只是一起工作过的那种，他找我借3000回家结婚。问题是我以前给他借过1000，他还我时说没那么多只还我800，过去快半年了，另200他也不提还，我也不好意思找他要，还有以前也是个河南的回家借了他3000，再就联系不上了，06年那时工资才一千多，气的我吞血！我现在每天加班累死累活也才三千多一点，他借的时候我答应了，他回家的时候来拿，我是那种很要面子的人，后来越来越不想借给他了，要是再被她骗了我可又伤钱还伤身，网友们觉得我答应了他后再反悔好不好？