求助，更换lender后之前锁利率的钱可以要回来么？。。

KarlShen3470

本人前段时间在湾区定了一套房子，4月初的时候在preferred lender那里锁了利率，花了5k锁六个月，lender承诺这5k会在close的时候返回给我，因为是preferred lender，有额外返还的5k credit，所以当时想的就是早点定下来就好了。
最近收到消息说房子还有一个月就建好close了，然后另一个朋友在chase那边拿到了非常低的利率，所以我就抱着试试看的心态去chase试了一下，果然比everbank低了0.25以上的rate，因为贷款60多万，所以0.25相差还是很大的。但是everbank拒绝退还之前所利率的5k美金，当初锁利率的时候也没有明确说过这个non refund的，我问了chase的loaner manager，他说我应该要回来。
我就想求助下大家，这笔钱是真的不可以refund还是应该可以要回来的？如果对方拒不归还，找律师可行么？我有所有的聊天记录和文件，并没有明确的说不可退还。