坐标乌鲁木齐，今年5月，新疆城建开始销售八道湾公务员小区，说还剩3栋楼没分配完，转为商品房销售。整个小区都是公务员的房子，就剩这3栋楼没有分配。5月底开盘前，再三反复与置业顾问沟通，明确说后期可正常办理按揭，可下产证，但期间未取证。开盘当天先缴纳5万元定金后签署了定房协议，协议里说该房屋只能一次性付款，一周内无法全款支付就不退定金。当时提出异议，但置业顾问说不影响，等时间到了办理按揭即可。6月初通知我去回款，说只能全款不能接受按揭。当面沟通后，说房屋归属于机关事务管理局管辖，该小区的确不能办理按揭。同期有很多客户投诉，协商后新疆城建同意退款。已经过去三个月了，反复沟通数次，始终不予退款，每一次都说退款需要机关事务管理局签字，但相关文件还没签署完。向该单位咨询后，表示退款责任在城建方，与其无关。再次向城建问询后，开始推脱，只说等着就行。已经过去三个月了，急需购置新房，请问这笔定金怎么退回，直接起诉吗？