在解除取保候审的同时，公安机关应当将保证金如数退还给犯罪嫌疑人。决定退还保证金的，应当经过严格审核后，报县以上公安机关负责人批准，签发《退还保证金决定书》。

法律依据：

《最高人民法院最高人民检察院公安部国家安全部关于取保候审若干问题的规定》第二十一条：被取保候审人在取保候审期间没有违反《刑事诉讼法》第五十六条的规定，也没有故意重新犯罪的，在解除取保候审、变更强制措施或者执行刑罚的同时，县级以上执行机关应当制作《退还保证金决定书》，通知银行如数退还保证金，并书面通知决定机关。执行机关应当及时向被取保候审人宣布退还保证金的决定，并书面通知其到银行领取退还的保证金。